С отцом ребенка отношения нормальные? Может, попросить его с сыном "как мужчина с мужчиной" поговорить? Ну и рискованно Вы, конечно, поступаете. Сын не младенец, в любой момент может проснутся ночью. Надо было все-таки как-то обозначить Вашего мужчину, либо уж устраивать встречи на нейтральной территории. Я сейчас наблюдаю похожую историю у знакомой. там дочери 11, мама таки собралась устроить свою жизнь, у дочери истерика -  Папе будет не приятно! К слову, папа уже давным давно счастливо женат,растит двух новых детей.