Понимаете, социальные роли очень разнообразны. Конечно, есть образ идеального отца, который содержит семью, гуляет с ребенком и покупает ему мороженое, любит жену и дарит ей цветы на 8 марта, а летом все вместе ездят в отпуск. У Вас такой модели не получилось. Но это не трагедия. Но мужчина от того, что он не соответствует именно этой модели, не перестает быть отцом. Ребенку нужен отец, пусть даже такой. Исключение - преступник (юридически признанный или как Ваш отец - домашний садист) или    психически нездоровый человек, тогда нужно искать специальные слова и приемы, чтобы ребенок смог нормально жить с  этим знанием.