行けます。台北から高雄や台南は新幹線で最短1時間半程度でアクセスできます。日帰り旅行も物理的には可能ですが、じっくり観光したい場合は宿泊をおすすめします。