院议员利德蕙所言，其父利铭泽因此事禁止所有家族成员前往澳门。虽说当年贩卖鸦片是合法，毕竟是损人利己的偏门生意，故靠卖鸦片积累巨额财富的利希慎，自然招致大众憎恶。当时有一首顺口熘在香港广为流传：首三句的开头三字，就是利希慎的广东话谐音。位于香港东角繁华闹市的希慎道是以其名字命名的。此外，不少大学建筑物也被冠上他的名字，包括香港大学的学生舍堂利希慎堂，及利希慎医科图书馆（该馆1965年启用，1986年冠名，2002年搬迁后改名余振强医学图书馆）、香港中文大学的利希慎音乐厅和香港公开大学的利希慎实验室