Это определенная модель отношений в семье, и вы с этим ничего не сделаете. Живет сам по себе и своими интересами. Так многие мужчины живут. Скандалы - путь в никуда, будут только ухудшать ситуацию. Или живите своей (параллельной) жизнью, или расходитесь. Изменить вам этого человека не получится.