後楽園
岡山藩士・斎藤一興の『池田家履歴略記』には「曹源公(=綱政)御遊休の園をひらかれんため簸川(ひのかわ、=京橋川)の東、御野郡・上道郡の内にて、御野郡は浜村の内上道郡は国富村の内、城北にあたって其の地を卜せられ、津田重次郎(=永忠)諸事奉行し......」とある。
池田家史料によると、1687年(貞享4年)12月に着工し(鍬始め)、翌1688年(元禄元年)には本格的な土木工事にとりかかり、次々と園内の建造物や植栽が完成していった。藩主・綱政は岡山在城中に足しげく庭園に通い、工事開始4年後の1691年(元禄4年)には、完成したばかりの延養亭で綱政が永忠ら工事に携わっている家臣の労をねぎらって園内で宴を催していることからも、この時点で綱政が満足できる出来栄えになっていたとみられる。途中、洪水の被害を受けて施設の建て替え等を余儀なくされたが、その後も庭園の拡張や新たな施設の建築が行われ、1700年(元禄13年)に一応の完成をみる。
なお、庭園は工事が始まった当初は「御菜園」、「御菜園塚」などと呼ばれていたが、1695年(元禄8年)頃には城の背後にあることから「御後園」または「後園」と呼ばれるようになった。