Astor era masón, y sirvió como maestro de Holland Lodge # 8, ciudad de Nueva York en 1788.