my brouther was ill, so we DIDN'T GO to the beach
ПОЧЕМУ ИМЕННО DIDN'T
​

Не пошли в прошедшем, Past Simple - будет didn't go. И всегда когда говорят в Past Simple "НЕ сделали что-то", мы пишем didn't.