出生。父系祖先祖籍中国山东渤海，明末随延平郡王来台，定居将军。父亲高瑞云（1856-1917）务农为业，为沤汪地方重要领袖，日治时期曾出任沤汪堡区长。高瑞云娶了四个老婆，母高李咏为后港望族，与高瑞云生下高文瑞、高清分（曾任沤汪庄庄助役、将军信用组合长、将军庄长等职）二子。高文瑞于明治四十五年（1912年）3月自萧壠公学校毕业，进入台湾总督府国语学校师范部。大正五年（1916年）从台湾总督府国语学校毕业。毕业后高文瑞曾历任学甲公学校及萧壠公学校训导，后升为教喻。曾出任台湾制药株式会社专务取缔役（专务董事）