游诸城的守将陆续投降，三吴地区的吴州（今江苏吴县）、会稽（今浙江绍兴市）二城坚守拒降，岭南守将徐璒阻挡隋使韦洸于南康前，不愿意归附隋朝。于是杨广率军南下三吴、岭南等地，各地陈军或受陈后主号令投降、或抵抗隋军而被消灭。岭南地区早在梁朝侯景之乱时，就受冼夫人控制。冼夫人率兵击破梁高州刺史李迁仕后掌控岭南，并与都督陈霸先合作。陈霸先后来创建陈朝，即南朝陈。冼夫人平定多次叛乱，保境安民，被当地俚汉人尊为「圣母」。杨广得知此事后，命令陈后主致书冼夫人，使其归隋。为了证明是真的，还将冼夫人曾经献给陈帝的扶南犀杖及陈