督之位让给元光，使他成为若狭守护。为了巩固在若狭的统治，元光在远敷郡最西边兴建作为根据地。继任后，元光不但与宿敌丹后一色氏对抗，而且积极介入管领家细川氏的内部纷争中，协助时任管领的驱逐前任管领细川澄元，并且成功拥立足利义晴成为将军。然而，丹波国的波多野稙通和柳本贤治背叛高国，而拥立足利义维成为的细川晴元亦随之举兵，元光为了协助高国上洛，与晴元等人在交战，最终不敌对方，并且与管领高国逃至近江国。其后，元光仍然作为高国派一员，与晴元派的将领战斗。享禄3年（1530年），元光出家，及后在天文8年（1539