Повышенная влажность и духота - это от пластиковых окон, их надо ставить на проветривание небольшое всегда. Холодно - это отопление, возможно плохие батареи, но сейчас не поменяешь, надо ждать окончания отопительного сезона. В батареях может быть воздушная пробка и как следствие нет тепла. Еще надо проверить вентиляцию в санузле и на кухне, есть ли движение, возможно поставить принудительный вентилятор. А иногда соседи перекрывают воздуховод и оттока вообще может не быть. Конечно надо разбираться. В крайнем случае, есть еще специальные осушители воздуха (я находила в Интернете), он недорогой, можно поставить, но главное не перестараться. А вот для  грудного ребенка идеально температура воздуха 19-20 градусов и влажность 60%. Вы измеряли? Может это только взрослым некомфортно, а детю хорошо.