伍崇曜中意畫畫、寫詩、睇大戲，個人作品有《茶村詩話》、《粵雅堂詩鈔》等，重響白鵞潭附近起粵雅樓，同潘仕成嘅海山仙館、孔廣陶嘅三十三萬卷樓、康有為嘅萬木草堂，併稱「粵省四家」 。