アンドレアス・パレオロゴス
しかしソマスの家臣ゲオルギオス・スフランツェスによれば、ソマスが亡命皇帝家や従者たちを養っていくにはこの額でも不十分であったという。アンドレアスとマヌエルも当初は同じ額の支援を受けていたが、教皇庁からの支援は次第に減額され、枢機卿たちからの支援もなくなり、全体で月150ドゥカートまで落ち込んでいた。
これに加え、ベッサリオン枢機卿が死去してから状況はさらに悪化した。1473年の最初の3か月、アンドレアスとマヌエルの兄弟は本来合計900ドゥカートを受け取れるはずが、690ドゥカートしか支払われなかった。1474年にマヌエルがローマを去ると、教皇シクストゥス4世は残ったアンドレアスらへの支援を半減させ、月150ドゥカートしか支払わなくなった。1475年にマヌエルがローマに帰ってきてからも、この額は見直されなかった。1470年代後半からはその金額もさらに切り詰められていき、1478年6月時点で150ドゥカートの援助だったものが、11月から数か月間は「立て続く(教皇庁の直面した)戦争」を理由に月104ドゥカートしか支払われなくなった。1488年と1489年にはさらに月100ドゥカートに減らされた。1492年8月に教皇アレクサンデル6世が死去してからは、ついに月50ドゥカートまで減らされることになった。
アンドレアスが多数の従者を抱え続けていたのも困窮の原因となった。父ソマスに従っていた者たちの一部は姉ゾエ(ソフィヤ)と共にモスクワへ移ったが、アンドレアスと共にローマに残ったものも少なくない。
1453年にビザンツ帝国の首都コンスタンティノープルがオスマン帝国によって陥落し、次いで1460年にモレアス専制公領も侵攻を受けると、ソマスは子女アンドレアス、マヌエル、ソフィヤとともにコルフ島へ亡命した。1465年にソマスが死去したのち、12歳だったアンドレアスはローマへ赴いた。コンスタンティノス11世の最年長の甥であるアンドレアスはパレオロゴス家の家長にあたる存在となり、古代ローマ帝国から続く皇帝の系譜の第一請求者の立場にあったとみなされることがある。イタリアにいる亡命ビザンツ貴族の支援を受けたアンドレアスはビザンツ皇帝の後継者を名乗り、帝国の復興を志した。またアンドレアスはローマ女性のカテリーナと結婚した。2人が子を残したという確固たる証拠はないが、彼らの子孫がいたと匂わせる一次史料も存在する。
ローマで暮らすようになったアンドレアスの生活は年を追うごとに困窮していった。その理由について、彼がぜいたくで無責任な浪費生活をしたのだと批判する節があるが、むしろ教皇庁から支給される年金が切り詰められていったことが大きかった。アンドレアスはコンスタンティノープル奪還に向けて、何度かヨーロッパ中を旅して各国の君主に援助を求めたが、彼のもとに集まった支援はわずかなものだった。
初めてカテリーナを悪人として描写したのは17世紀のビザンツ学者シャルル・ドゥ・フレスネであり、カテリーナに関する伝承は実証不可能なものであるといえる。1932年のギリシャ人ビザンツ学者ディオニュシオス・ザキュティノスの著作Le despotat grec de Morée (1262–1460)以降、アンドレアスが「娼婦」カテリーナと結婚したことが教皇庁からの支援切り詰めの原因であるという説が広まったが、これは全く誤りである。例えば教皇シクストゥス4世は、1479年におそらくロシアへの旅費として従来の支給金の2年分にもあたる資金をアンドレアスに与えている。
アンドレアスが浪費生活を送った可能性は否定できないが、彼の経済的困窮の原因はむしろ教皇庁からの支援の減少にある。当初はパレオロゴス家に対し住居費を支援するなど寛大な対応をとっていた教皇たちであるが、彼らは一部の歴史家が主張するほど気前の良い支援を提供したわけではなかった。そのような教皇庁を誇大に称賛する説が生まれた原因は教皇たち自身にも求められる。例えば、シクストゥス4世は自身がパレオロゴス家に対して示した寛大さをサン・スピリト・イン・サッシア病院のフレスコ画に描かせている。中にはアンドレアスがシクストゥス4世に跪いて感謝している絵もある。アンドレアスは広く伝えられているほど教皇の金を浪費したわけではなかった。もともと父ソマスに支払われていた月300ドゥカートの支援金は、1492年の時点で50ドゥカートまで減らされていた。
彼らの困窮の原因を彼ら自身に求め批判している文献は、同世代の著述家によるものの中では一つ、次世代の著述家によるものでも一つしか確認されていない。次世代のものは、1538年のテオドロス・スパンドゥネスによる著作である。彼はマヌエルがあらゆる面でアンドレアスより勝っていたと主張している。同世代では1481年にジェラルディ・ダ・ヴォルテッラが、アンドレアスの経済的困窮は彼自身の「性遍歴と悦楽」を含む度を越した浪費のせいであると主張している。こうしたアンドレアスの悪評は近代の歴史家たちに大きな影響を与え続けているが、ハリスはこうした見解が根拠に乏しいものであると批判している。
他にも近代の歴史家たちはアンドレアスを酷評するため、1479年のカテリーナとの結婚に関する記述を利用している。歴史家スティーヴン・ランシマンがカテリーナを「ローマの街女」と評したのをはじめとして、彼女は娼婦であったとするのが通説である。その上で娼婦との結婚がアンドレアスの経済的没落の原因の一つだとする説もある。カテリーナについて言及している一次史料はカメラ・アポストリカ(教皇庁の財政部門)がまとめたイントロイトゥス・エト・エクシトゥスのみで、その中でもカテリーナという名に触れているのは一か所のみである。そのため実際には、カテリーナの職業や社会的地位は全く不明である。同時代のジェラルディ・ダ・ヴォルテッラですら、カテリーナには言及していない。