武蔵没後21年後の寛文6年(1666年)に書かれた『海上物語』に武蔵が絵を描く話が既に記されている。