morisato/TRAIN

鉄道・電車LoRA

世界中の変なLoRA愛好家の皆様、お元気でお過ごしでしょうか？

これは「追加学習してみる実験」で作成した鉄道・電車等のLoRAです。
結論から言ってしまうと鉄道車輌や車内の学習はかなり難しく、ここにアップロードしたLoRAは期待したようなイラストを生成することがほぼ出来ません。
AI画像生成の「ノイズの海の中からなんとなくぼやっとしたイメージを再現する」という仕組み上では、パースが歪んでしまったり、勝手なアレンジが加えられたりすることがよくあります。
自動車・バイクや鉄道といった乗り物・機械系のイラスト生成は、各々をよく観察し細かな仕様の違いさえ分かってしまう熱心なファンとは相性が良くないジャンルかもしれません。

私達が使っているSD15系モデルには、海外の鉄道車輌等の風景もある程度学習されているようです。
プロンプトで"train"や"train interior"（車輌の内装：車内）と書いて画像生成すれば、車輌の外観や車内のイラストが生成できます
しかし海外っぽい車輌や車内になってしまうことが多く、日本人の私達が日常で目にするような国内の車輌や車内風景を描くことはできません
LoRA等の追加学習で日本の電車でお出かけする風景のイラストを生成することはできるのか？とりあえずやってみようということでチャレンジしたのが別途アップしている山手線235系・阪急3000系の車内風景でした。
結果としては、車内の特徴をある程度学習はしてくれるのですが、窓やドア・シート配置といった規則性は再現できないので、かなり異次元日本の風景になってしまいました

そして次に車輌の外観の学習ですが、車内と同じく、特徴をある程度は学習してくれるものの、縦や横に伸びてしまったり変形したり、あるべきパーツが無い・増殖するといった感じで、分かってる方にとってはかなり気持ち悪いイラストになってしまいます。
作成したLoRAで思ったような画像が生成できるかどうかを個人的に「打率」と呼んでいますが、その「打率」が2~3割にも届かない感じです。

大まかな特徴を追加で学習できているので、実際の車輌の写真をControlNet等で参照させれば若干は改善することができますが…
素材を用意しなくてはならないので、結構面倒じゃないかなと思ったりします

「実験してみた」ことで、出来そうな事と改善が難しそうな点がなんとなく分かってきたのが収穫かもしれません。
そのような訳で最近作成してみた色々な鉄道関係のLoRAを一旦まとめてみようと思います。皆様の研究・実験のお役に立てば幸いです。

E233_1000_SD15

京浜東北線E233系の車内風景です。シートやドア配置・袖仕切り形状等がことごとく崩壊します。こちらの作例画像では天井の照明の配置や空調のルーバー等のラインデリアの再現もおかしくなっています
e233, train interior, scenery, seat, window, door, poster (object)

E233ex_SD15

京浜東北線E233系の外観です。微妙に変形・崩壊した知らない子が多々生成されます
e233, exterior, train, train station, railroad tracks, scenery, outdoors, day, real world location,

E235＿SD15_V6

山手線E235系の車内です。シートやドア・スタンションポール・窓上サイネージモニターの配置・袖仕切り形状、ことごとく崩壊します。
e235, train interior, scenery, seat, reflection, window, reflective floor, poster (object), realistic,

Hanshin5000

阪神のジェットカー5001形の外観です。やわらか5001形になって変形しがちです
Hanshin5000, scenery, railroad tracks, train station, outdoors, train, real world location, power lines,

JNR205ex_SD15

埼京線205系の外観です。異世界205系が多々生成されます
JNR205, train, railroad tracks, scenery, real world location, outdoors, realistic, photo background, building, power lines, headlight
JNR205, train, train station, railroad tracks, scenery, real world location, outdoors, day, ceiling, ceiling light, tail lights

JNR12kei_SD15

旧国鉄12系客車の車内です。シート配置とかめちゃくちゃになりがちです
12kei, aisle, train interior, scenery, window, seat, ceiling light, indoors, sunlight, reflective floor

JNR_SUHA43_SD15

旧国鉄スハ43・スハフ42等の客車の車内・外観です。シート配置がめちゃくちゃになりがちです
suha43aisle, train interior, scenery, seat, window, sunlight, ceiling, ceiling light, indoors
suha43, railroad tracks, train station, train, scenery, outdoors, day, tree, real world location

JNR_SUHA43W_SD15

旅の風景のイラストを作れないかとスハ43・スハフ42等の客車の通路から窓側のボックスシートを見た風景だけを学習してみたものです。
モデル自体が持つ"train interior"のタグは車輌進行方向の視点が強く学習されているのでうまくいきませんでした。
suha43window, train interior, scenery, seat, window, shadow, day, sunlight, door, indoors

JNR_oha35_SD15

旧国鉄オハ35客車の車内です。スハ43より若干古い時代の車輌で近代化更新があまりなされていない木製の車内風景を学習させてみたものです。シート配置がめちゃくちゃになりがちです
oha35, train interior, scenery, window, indoors, sunlight, chair, ceiling, ceiling light, wooden floor

oha35_deck_SD15

旧客のデッキ付近の風景をイラストにできないかと作ってみたものです。うまくいきません。海外っぽくなったり家になったり崩壊しまくります
kyukyaku, vestibule, train interior, scenery, door, indoors, ceiling light, wooden floor, train
kyukyaku, scenery, train station, railroad tracks, day, outdoors, door, window, sign, sunlight, train, vestibule, outdoors
kyukyaku, train interior, scenery, vestibule, building, train station, power lines, outdoors, door, window

大阪環状線103系

大阪環状線を走っていた103系です。JR西日本の103系延命40N更新車は原型からはかなり変化していました。生成画像はそれ以上に原型からかけ離れた103系になりがちです
JRE103, train, train station, railroad tracks, outdoors, real world location, photo background, 1boy, realistic, standing, scenery, headlight
JRE103, train, train station, railroad tracks, multiple boys, vehicle focus, scenery, tail lights

大阪環状線201系

大阪環状線を走っていた201系です。異世界の201系が生成されがちです
JRE201, train, night, train station, scenery, outdoors, building, railroad tracks, headlight
JRE201, train, train station, railroad tracks, scenery, vehicle focus, outdoors, tail lights

大阪環状線323系

現在大阪環状線の主力となっている323系です。異世界323系が生成されがちです
JRE323, train, train station, pants, multiple boys, backpack, bag, railroad tracks, multiple girls, shoes, scenery, real world location, standing, headlight
JRE323, train, train station, railroad tracks, scenery, outdoors, real world location, tail lights

OsakaMetro10A

大阪市交通局（現：大阪市高速電気軌道/大阪メトロ）でかつて御堂筋線を走っていた10A系です。異世界10A系になりがちです
OsakaMetro10A, subway station, train station, train, multiple boys, bag, real world location, multiple girls, railroad tracks, pants, 6+boys, black hair, rolling suitcase, holding, outdoors, tail lights
OsakaMetro10A, subway station, train station, train, railroad tracks, hat, 1boy, scenery, realistic, uniform, railroad worker, outdoors, tail lights

OsakaMetro20

大阪メトロ中央線20系です。異世界20系になりがちです
OsakaMetro20, subway station, train, train station, scenery, railroad tracks, ceiling, ceiling light, headlight
OsakaMetro20, subway station, train, train station, multiple boys, railroad tracks, real world location, multiple girls, scenery, ceiling, ceiling light, tail lights, headlight

OsakaMetro21

大阪メトロ御堂筋線21系です。異世界21系になりがちです
OsakaMetro21, subway station, train, train station, railroad tracks, scenery, real world location, outdoors, ceiling, ceiling light, headlight
OsakaMetro21, subway station, train, train station, scenery, ceiling, tail lights

OsakaMetro22

大阪メトロ谷町線22系です。異世界22系になりがちです
OsakaMetro22, subway station, train, train station, multiple girls, pants, bag, 1boy, railroad tracks, multiple boys, ceiling, ceiling light, headlight
OsakaMetro22, subway station, train, train station, multiple boys, 6+boys, hat, real world location, scenery, shirt, night, pants, gloves, bag, holding, white shirt, uniform, railroad worker, ceiling, ceiling light, tail lights

OsakaMetro66

大阪メトロ堺筋線66系です。異世界66系になりがちです
OsakaMetro66, subway station, train, scenery, train station, outdoors, ceiling, headlight
OsakaMetro66, subway station, train, scenery, train station, tiles, tile floor, door, ceiling, ceiling light, tail lights

OsakaMetro70

大阪メトロ長堀鶴見緑地線70系です。異世界70系になりがちです
OsakaMetro70, subway station, train, scenery, train station, night, ceiling, ceiling light, headlight
OsakaMetro70, subway station, train, train station, railroad tracks, scenery, outdoors, ceiling, ceiling light, taillight

OsakaMetro80

大阪メトロ今里筋線80系です。異世界80系になりがちです
OsakaMetro80, subway station, train, scenery, ceiling, ceiling light, scenery, headlight
OsakaMetro80, subway station, train, scenery, door, train station, outdoors, light, ceiling, ceiling light, scenery, taillight

OsakaMetro400

大阪メトロ中央線400系です。近未来的なデザインが特徴です。異世界まで進化しがちです
OsakaMetro400, subway station, train station, scenery, headlight
OsakaMetro400, subway station, train station, train, scenery, taillight

OsakaMetro30000

大阪メトロ御堂筋線30000系です。よく崩壊します
OsakaMetro30000, subway station, 1boy, pants, shirt, male focus, white shirt, black pants, hat, solo, from behind, black hair, night, headlight
OsakaMetro30000, subway station, train station, scenery, night, railroad tracks, train, sign, door, real world location, ceiling, ceiling light, headlight
OsakaMetro30000, subway station, police, hat, train station, police uniform, motor vehicle, train, scenery, taillight

TokyoMetro01_SD15

営団地下鉄(現：東京地下鉄（東京メトロ）)銀座線01系です。ライト配置や前面非常ドアとか崩壊しがちです。
TokyoMetro01, subway station, train station, train, 6+boys, multiple boys, blurry, real world location, depth of field, railroad tracks, bag, multiple girls, scenery, ceiling, ceiling light, headlight
TokyoMetro01, subway station, train station, train, scenery, real world location, railroad tracks, multiple boys, multiple girls, ceiling, ceiling light, tail lights

TokyoMetro02_SD15

営団地下鉄 丸ノ内線02系です。ライト配置や前面非常ドアとか崩壊しがちです。
TokyoMetro02, subway station, train station, train, scenery, railroad tracks, real world location, realistic, night, ceiling, ceiling light, headlight
TokyoMetro02, subway station, train station, train, scenery, railroad tracks, ceiling, ceiling light, taillight

TokyoMetro03_SD15

営団地下鉄 日比谷線03系です。ライト配置や前面非常ドアとか崩壊しがちです。
TokyoMetro03, subway station, train station, train, scenery, railroad tracks, sign, real world location, bag, outdoors, day, ceiling, ceiling light, headlight
TokyoMetro03, subway station, train station, train, multiple boys, bag, scenery, railroad tracks, skirt, 6+boys, ceiling, ceiling light, tail lights

TokyoMetro05_SD15

営団地下鉄 東西線05系です。ライト配置や前面非常ドアとか崩壊しがちです。
TokyoMetro05, subway station, train station, train, railroad tracks, scenery, outdoors, bench, ceiling, ceiling light, headlight
TokyoMetro05, subway station, train station, train, railroad tracks, white shirt, pants, 1boy, shirt, black hair, scenery, male focus, hat, black pants, short sleeves, standing, real world location, black headwear, wide shot, ceiling, ceiling light, tail lights

TokyoMetro10000_SD15

東京メトロ 有楽町線・副都心線10000系です。まるみを帯びた全面形状が特徴なんですが、そのまま大崩壊した画像が生成されがちです。
TokyoMetro10000, subway station, train station, train, scenery, sign, outdoors, 1boy, jacket, pants, standing, blurry, ceiling, ceiling light, headlight
TokyoMetro10000, subway station, train station, train, railroad tracks, real world location, scenery, photo background, realistic, 1boy, vehicle focus, ceiling, ceiling light, tail lights, headlight
TokyoMetro10000, subway station, train station, train, scenery, railroad tracks, real world location, building, outdoors, day, ceiling, ceiling light, tail lights

TokyoMetro1000_SD15

東京メトロ 銀座線1000系です。レトロ感のある落ち着いたデザインなのですが、落ち着かない画像が多々生成されます
TokyoMetro1000, subway station, train station, train, scenery, sign, light, railroad tracks, ceiling, ceiling light, headlight
TokyoMetro1000, subway station, train station, multiple boys, train, hat, scenery, railroad tracks, real world location, ceiling, ceiling light, tail lights

TokyoMetro5000_SD15

営団地下鉄 東西線を走っていた5000系です。ライト配置や前面ドアとか崩壊しがちです。
TokyoMetro5000, subway station, train station, train, scenery, railroad tracks, outdoors, real world location, ceiling, ceiling light, headlight
TokyoMetro5000, subway station, train station, train, railroad tracks, black hair, 1boy, standing, 1girl, pants, shoes, wide shot, scenery, real world location, tail lights

TokyoMetro6000_SD15

営団地下鉄 千代田線を走っていた6000系です。ライト配置や前面ドアとか崩壊しがちです。
TokyoMetro6000, subway station, train station, train, railroad tracks, scenery, chinese text, real world location, headlight
TokyoMetro6000, subway station, train station, train, scenery, fence, outdoors, real world location, night, railroad tracks, ceiling, ceiling light, tail lights

TokyoMetro7000_SD15

営団地下鉄 有楽町線を走っていた7000系です。ライト配置や前面ドアとか崩壊しがちです。
TokyoMetro7000, subway station, train station, train, scenery, railroad tracks, tiles, ceiling, ceiling light, headlight
TokyoMetro7000, subway station, train station, train, railroad tracks, scenery, outdoors, real world location, day, building, tail lights

TokyoMetro8000_SD15

営団地下鉄　半蔵門線8000系です。ライト配置や前面ドアとか崩壊しがちです。
TokyoMetro8000, train, railroad tracks, real world location, outdoors, scenery, building, sky, day, power lines, headlight
TokyoMetro8000, subway station, train station, train, scenery, ceiling, ceiling light, headlight
TokyoMetro8000, subway station, train station, train, scenery, tail lights