书』）。天正11年（1583年）9月，攻陷背叛北条氏的北条高广的厩桥城后，国繁兄弟因为祝辞而向厩桥城的北条氏直出仕。此时氏直为了攻击佐竹氏，提出借用和馆林城，兄弟二人都答应，不过因为对此反对的家臣拥立国繁的母亲妙印尼并死守城池，于是兄弟二人被幽禁在小田原城（『石川忠总留书』）。守城军与佐竹义重、连结，攻击北条方的，不过在同年冬天因为北条方的攻势，城池被攻下。天正13年（1585年）正月，金山城、馆林城依照当初的预定，让渡予北条氏照，兄弟二人的知行得到保证，国繁把本据移至（桐生城），显长则把本据移至，