道中与毕打街，再于1911年迁至位于在毕打街与德辅道中交界处（现址为环球大厦）。直至1970年代因为兴建港铁中环站，邮政总局再次搬迁，于1976年8月1日搬迁至康乐广场2号的现址。第一套香港邮票于1862年12月8日发行；此前，只有驻港英军可以使用英国邮票寄出邮件，其他香港居民则没有任何邮票获准使用。直至1997年6月30日香港回归前一日，驻港英军在香港使用邮政服务是使用英军邮政局的号码以及地址BFPO 1，并且可以当作在英国本土内使用。早期邮政局并无固定的收件和派件时间，寄信人只需要将信件放置在邮