Nhà Hosokawa về phe Ishida Mitsunari trong trận đánh quyết định Sekigahara, và do đó bị giáng làm "tozama" (người ngoài) daimyo dưới thời Mạc phủ Tokugawa. Họ được nhận tỉnh Higo, với thu nhập 540.000 "koku", làm "han" (phiên) của mình. Mặc dù lãnh địa của họ ở xa thủ đo, trên đảo Kyūshū, họ nằm trong số những daimyo giàu có nhất. Cho đến năm 1750, Higo là một trong những nơi sản xuất gạo hàng đầu, và thực tế được những người buôn gạo Osaka lấy làm tiêu chuẩn. Sau đó, lãnh địa này, cũng như phần lớn các lãnh địa khác, gặp phải suy giảm kinh tế nghiêm trọng, nhưng Hosokawa Shigekata bắt đầu một số cải cách làm xoay chuyển tình hình.