Мне лично довольно часто звонят в неподходящее время (не обязательно вечером). Фраза "Извините, мне сейчас не удобно разговаривать, не могли бы Вы перезвонить в/через..." еще никого не обидела... А извиняться за беспококойство считаю глупым, исключая ситуацию когда ты что-либо просишь...