Чувство вины из-за предпочтений

Я не люблю ходить туда где мне не нравится, общаться с тем, кто мне не нравится. Сегодня муж собрался именно в такую компанию, я ему напомнила, что у нас маленький ребенок, и было бы хорошо остаться дома, но он уже "договорился", и нужно идти. И вот в перепалке услышала от него, что "тебе эти не нравятся, ты не идешь туда, те не нравятся, ты и туда не идешь". Так и есть, отчего у меня чувство вины тогда перед мужем?