义建的五子。乳名是镇三郎，后来继承父亲义建的偏讳而取名为建重（初名）。大哥源之助、四哥整三郎夭折，二哥庆恕过继尾张德川家，三哥武成过继越智松平家，所以取代这4位哥哥，而于嘉永二年（1849年）8月16日成为父亲义建的嫡子。同年11月1日，获第13代将军德川家定「御目见」。同年12月16日，获任命为从五位下弹正大弼，并晋升为从四位下侍从。其后改任为摄津守。嘉永3年（1850年）10月16日，因父亲隐居而就任高须藩第11代藩，改名为义比（よしちか）。同年12月16日，任职为左近卫权少将。安政5年（1858年