Как бороться с поведением бывшего мужа?

Бывший муж не берет младшую с собой, если куда-нибудь забирает старших. Как с этим бороться? Как можно на это повлиять?
Меня бомбит и трясет от злости и обиды. Сегодня вечером я отъехала по делам, с детьми была бабушка. Нарисовался БМ, он же никогда заранее не предупреждает, пишет по факту «дети дома? я приеду». Я никогда не против его приездов, для детей это важно, я на их стороне. В итоге сегодня он приезжает и говорит старшим «Одевайтесь, поедем в магазин (или еще куда-то, мама моя не расслышала). Младшая услышала, побежала тоже одеваться, оделась сама быстрее всех, так как она очень компанейская в этом плане, куда все, туда и она, вообще за любую идею выхода из дома. И вот ребенок уже натягивает на себя шапку в коридоре, а он выходит со старшими из дома со словами «а ты остаешься с бабушкой», и уходят😡🤬 ребенок, конечно, в рев, орет под дверью стоит, мама моя ее еле успокоила. Я ему и писала, и звонила, зачем так делать, она же расстроилась, плачет, возвращайся за ней, но ему похер. Так и уехал со старшими.
Просто не могу. Как победить это мудачество? Единственное, что я смогла решить, что когда меня не будет дома, он тоже не будет приходить. Мама моя ему не указ, ему вообще плевать на всех.
Один мат в голове, мудила..