Sau đó, Thiên hậu lập tức chọn lập Anh vương làm thái tử thay thế, đổi thành "Hiển" làm húy danh. Thái tử khi còn là Chu vương đã kết hôn với Triệu thị, con gái Thường Lạc Công chúa (常樂公主) - cô của Thiên hoàng, đồng thời là con gái út của Đường Cao Tổ Lý Uyên, so với Thái tử thì Triệu thị là biểu cô. Thiên hoàng rất tán thành cuộc hôn nhân này, và vì duyên cố của Thường Lạc Công chúa mà rất thiên vị Triệu thị, song Thiên hậu không ưa Công chúa, vì thế đối với Triệu thị cũng chán ghét. Vào một dịp, Triệu thị do đắc tội với Thiên hậu liền bị giam lỏng trong Nội thị tỉnh, chỉ được đưa rau, thịt sống cho tự nấu ăn. Dần dần Triệu thị chết đói, Thiên hậu bèn đày cha Triệu thị là Triệu Côi (趙瑰) cùng Thường Lạc Công chúa ra đến Hoạt Châu.