Ну как-то глупо уходить из-за того, что не хочешь быть чьим-то рабом. Для нормального человека такая альтернатива воспринимается как шутка, он явно не поверил, что ему серьезно говорят быть рабом или уходить. Поэтому он и не хотел бросаться словами про уход(а кто оттуда хочет уходить из-за глупости?), думал, что это затянувшаяся шутка и сейчас все рассмеются. Он же не мог подумать, что там уже моральные уроды, которые всерьез предлагают или уходить, или быть рабом бабы, от которой ты отказался и которая тебе не нужна.