Fang Xuanling
Sekitar tahun 646, sekali lagi Fang dipensiunkan dari jabatannya dan alasannya juga kurang jelas. Setelah Chu Suiliang mengirimkan petisi pada kaisar yang meminta agar ia jangan melupakan kesetiaan Fang, Taizong akhirnya mengunjungi Fang di kediamannya. Ia membawanya kembali ke istana dengan kereta kekaisaran sambil bercakap-cakap di dalamnya. Fang sangat berpengaruh
dalam pengambilan keputusan kaisar. Ada sebuah kejadian tahun 647 ketika kaisar mengangkat seorang pejabat bernama Li Wei menjadi menteri keuangan. Saat itu kaisar sedang berada di istana musim panas Cuiwei, di Pegunungan Qinling, sementara Fang mengurus pemerintahan di ibukota Chang'an. Ketika seorang utusan dari Chang'an datang untuk menyampaikan laporan, Taizong bertanya padanya mengenai pendapat
Fang tentang pengangkatan Li Wei sebagai menteri keuangan. Utusan itu menjawab, "Ketika Perdana Menteri Fang mengetahui pengangkatan itu, dia hanya berkomentar, Li Wei memiliki jenggot yang indah." Kaisar Taizong membaca maksud tersirat Fang dalam komentarnya yang mengisyaratkan bahwa Li bukanlah orang yang tepat untuk jabatan itu, maka ia pun memutasikan Li menjadi kepala prefektur Luozhou (wilayah sekitar Luoyang).
Tahun 648, Fang merampungkan proyek penyuntingan Kitab Jin, sejarah resmi Dinasti Jin, dimana ia berperan sebagai editor kepala. Tahun itu pula ia jatuh sakit ketika sedang menggantikan kaisar mengurus pemerintahan di ibukota, saat itu kaisar sedang berlibur di istana musim panas Yuhua (di Tongchuan, Shaanxi). Kaisar memanggilnya ke Istana Yuhua dan memerintahkan pelayan
kerajaan untuk merawatnya. Penyakitnya sempat membaik sebentar sebelum akhirnya bertambah parah. Dalam keadaan sakit, ia menyampaikan pesan terakhirnya pada kaisar, satu-satunya kekhawatirannya yang terbesar adalah kemarahan kaisar terhadap Kerajaan Goguryeo, untuk itu ia menulis sebuah petisi yang meminta kaisar untuk mengurungkan
niatnya menyerang Goguryeo. Setelah membaca petisi itu, Kaisar Taizong berkata pada Putri Gaoyang, "Ia sudah sakit sedemikian parah, namun ia masih sempat mengkhawatirkan kekaisaran ini." Ia lalu mengunjungi Fang secara pribadi untuk menyampaikan salam perpisahan. Pada musim gugur tahun itu, Fang menghembuskan napas terakhirnya di Istana Yuhua. Ia dimakamkan di dekat makam Permaisuri Zhangsun.
"Fang Xuanling membantu Kaisar Taizong dalam menaklukan dan mendamaikan negara selama 32 tahun, hingga akhirnya menjadi perdana menteri. Semua orang menjulukinya sebagai perdana menteri yang cemerlang, namun ia sendiri tidak pernah menyebut-nyebut kontribusinya, sungguh ini memperlihatkan kebajikannya. Kaisar Taizong menghentikan segala kekacauan; Fang dan Du
tidak pernah mengungkit-ungkit prestasi mereka sendiri; Wang Gui dan Wei Zheng dengan penuh kerendahan hati menyarankan agar kaisar menghargai mereka atas kejujurannya; Li Shiji dan Li Jing berperang di segala penjuru dan memenangkan berbagai pertempuran; Fang dan Du banyak membantu mereka di bidang politik. Mereka telah membawa kedamaian pada zaman mereka dan mempersembahkan segala kemuliaannya pada sang kaisar. Tidakkah pantas menyebut mereka sebagai kontributor besar Dinasti Tang?"
Sayang kemuliaan keluarga Fang tidak bertahan lama setelah kematiannya. Kaisar Taizong sendiri mangkat pada tahun 649 dan putranya, Li Zhi, naik tahta sebagai Kaisar Tang Gaozong. Putra Fang, Fang Yi'ai dan istrinya, Putri Gaoyang, terlibat konspirasi besar menggulingkan Kaisar Gaozong dan berencana menggantikannya dengan pamannya, Li Yuanjing, Pangeran Jing. Konspirasi ini juga
melibatkan Jenderal Xue Wanche, Li Ke (Pangeran Jing), dan Chai Lingwu (saudara ipar Gaozong). Fang Yi'ai dihukum mati, istrinya dipaksa bunuh diri, dan kakaknya, Fang Yizhi, diturunkan pangkatnya menjadi kepala polisi daerah di wilayah yang sekarang menjadi Guangdong. Patung peringatan Fang Xuanling yang dibangun oleh Gaozong di kuil kekaisaran disingkirkan dari sana.