西園寺公望
慶應4年（1868年），戊辰戰爭爆發，賴直靠攏，由於藩軍在北越戰爭和會津戰爭中協助西園寺公望而立下戰功，賴直便獲賞賜2000両。明治2年（1869年），版籍奉還後，賴直成為高遠，並且在明治3年（1870年）制定新藩制。