У вас налицо неумение договориться и найти компромисс с самым по сути близким вам человеком. При нашей современной жизни спорт просто необходим. У нас это святое, мы с мужем выбрали и поделили время когда это нас обоих устраивает. Почему бы вам также не сделать? Например он с утра в понедельник-среду-пятницу, а вы во вторник и четверг, плюс один раз в выходные. Какие-то дела можно пересмотреть и вообще не делать. Или делать реже, никто от этого не умрет. Проблема и яйца выеденного не стоит.