赤坂間部家当主・間部詮番の長男。