Пускай реализует себя в хобби. Отпускайте его к друзьям, не держите возле себя. Но, чтобы вы не чувствовали себя ущербной, то делите обязанности: в субботу он сидит с ребенком, гуляет с ним, водит в кино, в парк, в тир, а в воскресенье вы целый день с ребенком, а он посвящает время своему хобби.