Зачем ходить к психологу?

Почему многие используют фразу "Сходи к психологу" как оскорбление? Особенно мужчины, от обиды. Например когда со мной знакомятся мужчины и обращаются на ты, я им говорю чтобы обращались ко мне на Вы. Многие обижаются и говорят "Сходи к психологу". Я же вижу что они это говорят от обиды, пытаются таким образом задеть. Только я не пойму, а что здесь плохого в том что человек ходит к психологу? Мне кажется в современных реалиях все мы должны периодически посещать психолога, ведь стресса сейчас много, особенно на работе порой столько проблем, что необходимо высказать все профессионалу и получить профессиональную рекомендацию как справляться с этими проблемами. Я обычно на такие обижульки отвечаю "Я хожу к психологу, и вам советую(я сейчас правда хожу к нему, в связи с недопониманием между мной и дочкой). На что еще обиженней мне часто отвечают "Ну вот и ходи, а я в отличии от тебя здоров и мне это не надо". Как будто к психологом одни больные ходят. Мне кажется наоборот к психологу ходят для того чтобы научиться рационально спокойно рассуждать, легко реагировать на ситуации, не паниковать и тд, чтобы в последующем это не отразилось негативно на здоровье и чтобы человек не стал больным.