Как сделать чтоб не задевало, не посоветую. Но подставить парня вопросом, касающимся работы, можно) "Тут клиент звонил, ну я же не знала, когда ты будешь", или "ты завтра как обычно к концу дня?... " ну и т.д. А остальные сотрудники- кроме Вас и парня, они как с отпрашиванием  решают вопрос?