Su padre, Munisai, era un experto del jutte (hierro porra) y el tachi (espada antecesora de la katana) y se entiende que le habría enseñado a Musashi a una edad muy temprana el manejo de estas armas.