文化大革命による混乱の中で、その「反革命的な」出自と、劉少奇元国家主席らの「実権派」と親しいとされた立場について強い非難を受け、身に危険が及ぶ可能性も高くなったことから、1970年8月に各種肩書と給与を捨てて日本へ帰国。事実上の追放であった。以後国内で言論活動を行い、かつて自らの給料を出して保護してくれた中国共産党や毛沢東、江青等を賞賛。また、自らが文化大革命の中で中華人民共和国を事実上追放されたにもかかわらず文化大革命を礼賛し、さらにかつては日中国交正常化に向けて親しく意見交換をしていた劉少奇を強く批判する言動を続けたため、保守派だけでなく、左派の言論人たちからさえ大きな疑念と批判を受けた。さらに、文化大革命中より、その中国共産党におもねった言動に対して多方面から批判を浴びていたが、1970年代中盤に文化大革命が終結しその実情が暴かれたことで、西園寺の主張が完全に的外れなものであることが証明された。さらにその後、中華人民共和国内で文化大革命に対する批判がされた後は、完全に言論人としての立場を失った（後述）。
この間、1957年に世界平和評議会の大会をセイロンで開くことになって中華人民共和国に相談に立ち寄った際、同国から「人民交流」の日本側の窓口となる人物の推薦を頼まれたことがきっかけで同国の「民間大使」となる。日本に帰国してから間もなく家族を連れて中華人民共和国へ移住し、中国共産党から「日中文化交流協会常務理事」や「アジア太平洋地域平和連絡委員会副秘書長」の肩書と、500元（毛沢東の月給は600元）と大臣クラスの給与を与えられることになり、同政府の意向を受けて北京にて国交成立前の日中間の「民間外交」を行った。昭和33年（1958年）には日本共産党に入党するも、のちに日中共産党が不和となった結果、文化大革命初期の昭和42年（1967年）2月に北京滞在中に「日本人の勤労人民としての生活経験をもたず、中華人民共和国においても、社会主義の政府によって与えられている特恵的な生活になれて」、「特定の外国勢力に盲従して、分裂と破壊活動に狂奔するようになった」（『赤旗』）旨を以て除名処分となる。なお「北京空港事件」の現場にも居合わせた。
大東亜戦争後に日本がソ連を含む連合国軍の占領下にあった中で執行猶予が解けた。その後は実家の資産を投じて『グラフィック』誌の仲間と共に『世界画報』を創刊。また、新設プロ野球球団である「セネタース」（現在の北海道日本ハムファイターズ）のオーナーを短期間務めるなど、相続権こそ失ったものの、潤沢な実家の資産をばら撒きながら自由な生活を享受した。1947年には、 第1回参議院議員通常選挙に無所属で出馬して当選。しかし肝臓ジストマに侵されていた公一は参院で欠席の記録を作り、議員としては見るべき活動ができず、2回目の参院選には落選。昭和29年（1954年）には京都市長選挙に出馬して落選する。このあたりより、第二次世界大戦で消えたかと思った左寄りの姿勢が表ざたになり、1955年には、冷戦下でソ連や東ドイツ、ポーランドなどの東側諸国（社会主義国）政府の主導で設立された「世界平和評議会」に、日本共産党系の日本平和委員会から「日本代表」として送られ、そのままオーストリアのウィーンの評議会の執行部に「書記」の身分で単身滞在し3年間を過ごす。
同年10月に、風見章が主催する昼食会の席上で、尾崎の逮捕を知る（ゾルゲ事件）。尾崎とは共に近衛内閣のブレーンとしてさまざまな情報交換を行っていた ことから逮捕された。その後裁判で禁錮1年6月、執行猶予2年の有罪判決を受けた。このため嫡男としての爵位継承権を剥奪され、1946年に父・八郎が死去したあとの家督を弟の不二男に譲ると共に、西園寺家の相続権を放棄することとなった。なお大東亜戦争には、執行猶予と年齢などにより徴兵を逃れた。
シージャック事件から数週間後、再びアマルガムに狙われた事で、自分が周囲の人間を危険に晒す事を自覚しつつも、かなめは未だに日常を捨てられずにいた。ある日、学校帰りに家の中で待っていたレナード・テスタロッサから最終警告を受け、さらに今の生活を捨て自分と一緒に来るように提案される。これを断った次の日、これまでかなめの意思を尊重し東京での生活を優先していたミスリルだったが、かなめの安全を考え、彼女を東京から離れさせようとしたが、時を同じくして、アマルガムのミスリルへの総攻撃が開始され、かなめの奪取を目論む襲撃により、宗介とかなめは、逃げ場を失う。そして東京都がクラマを中核としたアマルガムの武装集団に襲われ、陣代高校と全校生徒とかなめに近しい人間であったことから常盤恭子とが人質にされたことを知る。かなめも陣代高校のクラスメイトも失いたくない宗介は無茶を承知で両方助け出すことを決意する。宗介はかなめに協力を要請するも、かなめから見た宗介の知能の低さに苛立ち、酷い暴言を吐いてしまう。結果かなめの協力を得られなかった宗介はたった一人でアマルガム武装集団と戦い、レイスの協力もあって人質を救出することに成功するが、恭子が流れ弾に当たり、重傷を負ってしまう。宗介もレナードに追い詰められ、アーバレストも大破する。最終的に宗介の助命と引き換えに、レナードと共に行くことを決意する。