文筆家にして絵師である英泉は、数多くの艶本（好色本）と春画を世に送り出しており、これを抜きにしては語れない。千代田淫乱の名で最初の艶本『絵本三世相』を発表したのが22歳の時。24歳の時には同じく『恋の操』（こいのあやつり）を発表している。当初は英山の影響を受けて可憐に描いていた美人画のほうも、この時分から英山色を脱して独自の艶を放つようになり、それに連れ、評判を取るようにもなっていた。妖艶な美人画絵師としての英泉はこの分野で磨かれていく。文化13年（1816年）の26歳の時には、北斎から譲られた号「可候」をもって、合巻『櫻曇春朧夜』（はなぐもりはるのおぼろよ）を発表。挿絵とともに本文も自ら手掛けることとなる。艶本は毎年のように作られ、さまざまな隠号をもって人気本を世に送り出すなか、傑作と名高い『春野薄雪』も文政5年（1822年）に著された。また、同じく文政5年の代表作である艶本『閨中紀聞 枕文庫』は、当時の性の医学書・百科事典にして性奥義の指南書であり、同時に、奇書の中の奇書として知られている。30歳ごろからは人情本や読本の挿絵も手掛け、曲亭馬琴の『南総里見八犬伝』の挿絵も請け負っている。しかし文政12年3月、大火による類焼で家を失った上、縁者の保証倒れにも見舞われる。そんな英泉であったが、酒と女を愛す放蕩無頼の人、奇行めいた人である。根津の花街に移って若竹屋里助と名乗り、女郎屋の経営を始めていた。
ところが20歳の時、父と継母が相次いで亡くなり、3人の妹を一人で養う身となって狂言作者の道は挫折を余儀なくされる。この時、先の水野壱岐守家に仕える多くの血族からの支援もあったが、善次郎はそれをよしとせず流浪のうえ、一時、狂言役者篠田金治（2世並木五瓶）に就いて千代田才市の名で作を為した。また深谷宿にて菊川英二に寄寓、浮世絵師菊川英山の門人格として本格的に絵筆を執ることとなる。そして、ここからが善次郎の才能の発露であり、浮世絵師渓斎英泉の始まりであった。「国春楼」および「北亭」の号をこの時に使うようになる。英泉は尾張町、浜松町、根津七軒町、根岸新田村、下谷池ノ端、日本橋坂本町2丁目（植木店）に居住、根津では若竹屋忠助と称して遊女屋を経営した他、坂本町では白粉「かをり香」を販売していた。師の英山は4歳年上でしかない兄弟子のような存在ながら、可憐な美人画で人気の絵師であった。英泉は英山宅の居候（いそうろう）となって門下で美人画を学びつつ、近在の葛飾北斎宅にも出入りし、私淑をもってその画法を学び取っていく。また宋・明の唐画を好み、書を読み耽ることを趣味とする人でもあった。なお、北斎に先駆けて日本で初めてベロ藍を用いた藍摺絵（あいずり-え）を描いたのは、英泉である。英泉の画風に学び、幕末の退廃的な美人画を得意とした絵師として、歌川国貞が挙げられる。自著『无名翁随筆』の英泉の項目には「近頃國貞も傾城畫は英泉の寫意に似せて畫し者也」記され、浮世絵関連の書籍でもしばしば踏襲される見方である。しかし、両者にはどちらがどちらを真似たのか判然としない作品や、少数ながら合作の錦絵があり、また英泉が文を、豊国襲名後の国貞が絵を担当した合巻があるなど、時々に競作と共作が入れ替わる複雑な関係だったようだ。
12歳から狩野典信の弟子という狩野白桂斎（かのうはっけいさい）に画技を学ぶ。15歳に元服を機に、16か17歳で安房国北条藩の水野忠韶の江戸屋敷に仕官するも侍奉公には不向きだったか、17歳の時に上役と喧嘩沙汰となり、讒言によって職を追われている。浪人となった善次郎は父の知り合いのつてで、市村座の狂言作者であった初代篠田金治（後の2世並木五瓶）に狂言作者見習いとして出入りすることとなり、千代田才一（才市とも）と名乗っている。
アレクサンダーは教育を受け、大望がある明るい若者だった。数学と天文学に秀でていた。母が経営していた食糧販売業に参加して成功し、1747年にはサラ・リビングストンと結婚した。サラはニューヨーク植民地の政治家フィリップ・リビングストン（1686年-1749年）の娘、かつアメリカ独立宣言に署名したフィリップ・リビングストン（1716年-1778年）やアメリカ合衆国憲法に署名したウィリアム・リビングストン(1723年-1790年）の姉妹だった。アレクサンダーの娘の一人メアリー・アレクサンダーはニューヨークの裕福な商人ロバート・ワッツと結婚した。フレンチ・インディアン戦争のとき、アレクサンダーはイギリス軍の兵站部に加わり、そこでマサチューセッツ湾植民地総督ウィリアム・シャーリーの副官になった。1756年にはロンドンに渡って、職務怠慢で告発されていたシャーリーのために証言した。ロンドンにいる間に空白になっていたスコットランドの爵位スターリング伯爵を自称した。これは祖父の初代伯爵の子孫で年長の男子だったからであり、スコットランド貴族代表議員の選挙では投票を認められた。イギリスの貴族院 (イギリス)貴族院はスターリングが子孫であるという証拠が無いためにその主張を認めようとしなかったが、アレクサンダーは終生「スターリング伯爵」を自称し続けた。この伯爵の権利は、初代伯爵の相続人男子に与えられるニューイングランド、ノバスコシアおよびセントローレンス川渓谷全体の大半を占める土地特許に対する権利を表すものだった。アレクサンダーの孫ウィリアム・アレクサンダー・デュアはこのことが伯爵位を追及した主な理由だったと記している。アレクサンダーは5代目で最後のスターリング伯爵（ヘンリー・アレクサンダー）の甥達と共同で土地の所有権を主張した。アレクサンダーはその主張が部分的に認められたことに満足して1761年にアメリカに戻り、「スターリング卿」という肩書きを使った。アレクサンダーはニュージャージー植民地の監督部長に指名され、植民地会議の議員にもなった。キングス・カレッジ（現在のコロンビア大学）の設立メンバーであり、初代理事長を務めた。アレクサンダーは社会的に認められた裕福な人物であり、父親から大きな財産を相続していた。鉱業や農業に手を出し、スコットランド領主に相応しい虚飾に満ちた人生を送った。このことは金がかかるものであり、最終的には借金を背負うようになった。ニュージャージーのバスキングリッジに大邸宅の建設を始め、それが完成したときにニューヨークの家を売却して移り住んだ。アメリカ独立戦争の間にはジョージ・ワシントンが度々そこを訪れており、アレクサンダーの娘が結婚するときはその娘を花婿に引き渡す役目を担った。