远、黎平、都匀、古州等地苗民尤其凶悍，州县地方政府不能控制，桂良上奏请求挑选精兵专事围剿逮捕不受控制的苗民。道光二十五年（1845年），桂良入觐，被留在中央，署理兵部尚书，兼正白旗汉军都统。旋即外放为热河都统。道光二十八年（1848年），应召来京，授任镶红旗汉军都统，以其侧室所生庶女嫁与道光帝六子奕䜣（恭亲王）为福晋。
咸丰年间.咸丰元年（1851年），桂良署理吏部尚书，外放为福州将军。咸丰二年（1852年），召授兵部尚书。咸丰三年（1853年），太平天国攻陷江宁，京师戒严。桂良上