Eventualmente logró ser nombrado magistrado de la provincia y se estableció en el Castillo Inabayama.