その後は親政を行ない、文久3年(1863年)にオランダ式の軍制を採用して軍備を増強し、元治元年(1864年)には大坂加番に任じられた。