El dominio al principio tenía su sede central en Sawayama, el castillo que había sido ocupado por Ishida Mitsunari antes de la Batalla de Sekigahara. La construcción del nuevo castillo en Hikone comenzó en 1603.