Мы живём сейчас в такой квартире. Объединены балконы и на кухне, и в комнате. Очень тепло и места сильно больше. Но надо обязательно уточнять насчёт законности этого момента именно в Вашем доме, чтобы потом не было проблем.

Не холодно, сами сносили стену и утепляли

Балкон не возможно узаконить, придется где-то держать оконный блок, чтобы в случае если кто-то накапает и придет проверка, поставить его на место, будто никакого присоединения и не было. Если лоджия, то это можно узаконить.

Зимой не холодно, но нужно утеплить, конечно
Если места мало, и балкон не нужен , то почему бы и нет

Если именно балкон, а не лоджия, то думаю, что стоит сильно утеплять. В любом случае утеплять. И продумывать отопление.
Если останутся щели - то будет холодно 100%.