一直到了十几年以后，由于种种原因刘秀和郭圣通渐渐疏远，才发生了废皇后、换太子的事情