父の高吉は足利義昭に仕えていたが、義昭と織田信長が対立した際に出家し、高次は美濃国へ人質として送られ、幼少期を過ごす。
父亲高吉原本仕于足利义昭，义昭与织田信长对立之际出家，高次被送往美浓国担任人质，渡过幼少年时期。