奥州藤原氏3代秀衡が嘉応2年(1170年)5月25日、鎮守府将軍・陸奥守に任ぜられたことで、初代清衡の代からの奥州藤原氏の居館であった柳之御所が政庁・平泉館として大改修され、秀衡が柳之御所の南西に新たに伽羅御所を建築したものと推測される。