Я бы исходила из принятого в семье отношения к доходу. Если муж считает, что обеспечивать семью - обязанность мужчины, то поездка за счет жены его унизит. Будет на отдыхе раздраженным или виноватым - кому на фиг такой отдых сдался. Если в семье принято зарабатывать,делать домашнюю работу  и воспитывать детей супругами совместно, то ехать надо всем, т.к. доход жены - общий доход, и жертвовать отдыхом мужа несправедливо.Возраст детей тоже надо учитывать.