时每天和弟弟轮班去外婆家种豆芽菜，每三小时要浇水一次，再用推车运到菜市场卖，有时半夜三点天还没亮就得出门。潘安邦说自己从小就是琼瑶迷，十四岁的时候看了《窗外》，就非常喜欢，认为琼瑶小说「至情至性」「一点也不肉麻」。小时候喜欢的歌曲则是包括有刘家昌和洪小乔等人的歌。高中毕业后，潘安邦离开澎湖、到台北考大学。据潘安邦儿时友人赵舜说，潘从小喜欢画画，到台北后跟赵的姪女一起画卡片，赚了不少钱。
歌唱生涯.
1976 - 华视出道.1976年，当时正在台北补习班