所以才有半山区巴士专线的出现），对行车时间并没有太大帮助，在半山区巴士专线出现后才稍为舒缓了一点。这时由于本班次跟原有4号线的行车路线有很大分别，为免乘客混淆，故于1975年1月1日，「黄牌4号线」班次订为40号线。1980年2月12日，配合地铁修正早期系统（观塘至中环，现分别称为港铁荃湾线及观塘线）全线通车，金钟及中环站启用，本线改为前往湾仔码头，改经金钟道而不再经中环中心地带，并提升至每天早上至深夜、为华富邨居民提供前往金钟及湾仔的服务，而在半山区也停靠所有巴士站，方便乘客。1986年6月9日起绕经