1646 માં એન્ડો સુનિતોમો દાઇમ્યો બન્યા અને કિલ્લાના વારસામાં વારસામાં મળ્યા હતા, જે તેમણે વ્યાપકપણે જીર્ણોદ્ધાર કર્યું હતું.