Не ездить к ним, им ничего не объяснишь, они не изменятся, ситуация будет повторяться.
Поговорить с мужем, свести общение с ними к минимуму.
Еще сказали, что стараетесь прививаете любовь к свекрам вопреки всему, специально объясняете детям какие они хорошие - можно этого больше не делать, достаточно просто нейтрально относиться. Уважение/любовь не надо искусственно прививать, человек либо вызывает уважение к себе, либо нет. Дети всё равно любят дедушку с бабушкой, и дополнительный допинг в виде ваших слов ни к чему.