妻何依妹，育有2子2女。方幼祥身高170公分、身体壮硕、个性坚强、教养甚严、领导力强。在日治时期，方幼祥来台经营方仁记牙刷店。当时台湾为清廷割让予日本统治，划归日本国土，所以往返大陆与台湾两地视同两国，均须办理护照出入。中日八年战争开打时，有许多闽南人无法返回家乡而被扣留在台。方幼祥因早年参加「中华会馆」，又为台北「三山善社」负责人，后受台湾「中华总会馆」（海内外华侨所成立的全球性团体）主席易炳汉先生指示，于抗战期间加入「抗日救国会」，帮助滞留台湾的闽南人进行撤侨任务，并成功撤出达五万多名华侨，甚得