丞相陆秀夫的后人所建造，虽然表面是祭祀陆秀夫的玄孙陆广裕，主要是为了祭祀宋朝末代宰相陆秀夫。祠堂始建于明朝永乐四年（1406年）之后曾经经历过六次大修，分别是在明朝嘉靖三十二年（1553年），明朝崇祯十二年（1639年），清朝康熙六年（1667年），清朝嘉庆十二年（1807年），1915年以及2003年。每次修整都有详尽的日期记录，这是岭南建筑中十分罕见及珍贵的，对研究明、清建筑的特色更是十分有帮助，被誉为“明清建筑的活标本”。
建筑及特色.广裕祠一共有三间三进，分为前厅、中堂和后