В семье общие деньги. И когда один мало заработал, то бюджет это деньги второго. Так что сегодня вы больше заработали, завтра он заработаешь больше - это общие деньги. И в  отпуск надо ехать вместе. Кстати, ребенку этот отпуск нужен меньше, чем кому-то из вас двоих.Кстати, показательна ваша лексика. Надо ехать не с папой, а с мужем.