Вы в следующий раз отвечайте "спасибо", вместо "ты опоздал" и все! Ничего более. Далее по обстоятельствам, если продолжает писать, односложные вежливые нескорые ответы. Пара таких ответов и вообще достаточно отвечать. Надо будет, пусть сам звонит. Три недели не звонил и вы потеряли к нему интерес. Но ответили на поздравления, как всякий культурный человек. А вы в продемонстрировали обратное, что вы на эмоциональном крючке. Он может быть спокоен на этот счет и еще месяц не звонить. Вы же на крючке.