ทั้งนี้มิทราบว่าใครเป็นผู้ริเริ่มในการสร้างปรางค์แขกโดยอาจสร้างขึ้นตามพระบรมราชโองการของพระมหากษัตริย์หรือสร้างจากการอุปถัมภ์ของผู้นำท้องถิ่น