定例局首位华人非官守议员，同年他曾署任裁判司。在港期间，他积极支持港督轩尼诗的政策，反对歧视华人，并要求废除公开笞刑和遏止贩卖女童等。后因与妻子及妻舅何添投资生意失败，被迫辞去立法局议员一职。1881年12月20日，在特遣分舰队「」号服役的英国皇孙艾伯特维克托王子及乔治王子（即后来乔治五世长兄及乔治五世）随分舰队访港，由于舰队司令海军中将（Vice-Admiral Earl of Clanwilliam）的拒阻，将伍才等香港缙绅为王室成员筹备的许多欢迎节目省掉。伍才被嘉兰威廉伯爵数次冷落，决心返回大陆发展。