С максимальной вероятностью проблемы в вас - ваши семейные отношения, отношение к вам мужа, отношения с бабушками/дедушками, ваши методы воспитания, отсутствие контакта, отсутствие семейного досуга, который бы вас сближал и давал общие точки и так далее. Поэтому да, это ваша ответственность - разобраться в ситуации и наладить ее хоть как-то. "Отпускать" можно в 18 лет, но не в 15.