Вам этот вопрос себе нужно было задать себе раньше, прежде чем соглашаться. А раз согласились, то нужно вести себя прилично, и , да, потерпеть, а не изображать капризного ребенка. В следующий раз отказывайтесь сразу, чтобы вдруг "в какой-то момент" вас не посетила мысль уехать, тем более требовать, чтобы с вами уезжали другие люди, которые вас привезли на своей машине.Вот ваш муж отказывается ехать туда, куда не хочет и не в состоянии потерпеть.  Правильно делает, не сидит там с кислой рожей, "сделав вам отдолжение", и не дергает "поехали уже отсюда".