塩飽諸島は江戸時代に人名(にんみょう)と呼ばれる幕府の御用船方の集まりによって自治が許されており、その中から選ばれた年寄がこの勤番所において政務(島務)を行った。