文久3年(1861年)芸平は親の希望を叶え故郷である信州飯山に戻った。