1) Купить грелку-матрас, грелку подушку;
2) Заделать все щели ( вариант с с зажигалкой очень не плох), можно использовать уплотнитель, а можно и пену монтажную для совсем больших щелей; Или ватой утрамбовывая ее уплотнителем;
3) Можно купить еще и лампы греющие в ванну, хоть они жрут не мало, зато в ванной тепло будет после того как лампы подрубишь;
4) Обогревающие приборы + использование отражающей поверхности на места возможной утечки тепла (типа бетон по-моему очень много тепла поглощает, может еще ковер купить, как вариант);
5) Перед холодами пригласить мастера подкрутить стеклопакеты, чтоб не задувало.
6) Если батареи не греют - попробовать продуть их, воду пропустить;