TRAIN / README.md
morisato's picture
Update README.md
1eb85ae verified
|
raw
history blame
15.1 kB
metadata
license: unknown
language:
  - ja

鉄道・電車LoRA

世界中の変なLoRA愛好家の皆様、お元気でお過ごしでしょうか?

これは「追加学習してみる実験」で作成した鉄道・電車等のLoRAです。
結論から言ってしまうと鉄道車輌や車内の学習はかなり難しく、ここにアップロードしたLoRAは期待したようなイラストを生成することがほぼ出来ません。
AI画像生成の「ノイズの海の中からなんとなくぼやっとしたイメージを再現する」という仕組み上では、パースが歪んでしまったり、勝手なアレンジが加えられたりすることがよくあります。
自動車・バイクや鉄道といった乗り物・機械系のイラスト生成は、各々をよく観察し細かな仕様の違いさえ分かってしまう熱心なファンとは相性が良くないジャンルかもしれません。

私達が使っているSD15系モデルには、海外の鉄道車輌等の風景もある程度学習されているようです。
プロンプトで"train"や"train interior"(車輌の内装:車内)と書いて画像生成すれば、車輌の外観や車内のイラストが生成できます
しかし海外っぽい車輌や車内になってしまうことが多く、日本人の私達が日常で目にするような国内の車輌や車内風景を描くことはできません
LoRA等の追加学習で日本の電車でお出かけする風景のイラストを生成することはできるのか?とりあえずやってみようということでチャレンジしたのが別途アップしている山手線235系・阪急3000系の車内風景でした。
結果としては、車内の特徴をある程度学習はしてくれるのですが、窓やドア・シート配置といった規則性は再現できないので、かなり異次元日本の風景になってしまいました

そして次に車輌の外観の学習ですが、車内と同じく、特徴をある程度は学習してくれるものの、縦や横に伸びてしまったり変形したり、あるべきパーツが無い・増殖するといった感じで、分かってる方にとってはかなり気持ち悪いイラストになってしまいます。
作成したLoRAで思ったような画像が生成できるかどうかを個人的に「打率」と呼んでいますが、その「打率」が2~3割にも届かない感じです。

大まかな特徴を追加で学習できているので、実際の車輌の写真をControlNet等で参照させれば若干は改善することができますが…
素材を用意しなくてはならないので、結構面倒じゃないかなと思ったりします

「実験してみた」ことで、出来そうな事と改善が難しそうな点がなんとなく分かってきたのが収穫かもしれません。
そのような訳で最近作成してみた色々な鉄道関係のLoRAを一旦まとめてみようと思います。皆様の研究・実験のお役に立てば幸いです。


E233_1000_SD15

00005-lametta_v2012 - 4076518618.png 京浜東北線E233系の車内風景です。
e233, train interior, scenery, seat, window, door, poster (object)

E233ex_SD15

00005-lametta_v2012 - 1430238489.png 京浜東北線E233系の外観です。
e233, exterior, train, train station, railroad tracks, scenery, outdoors, day, real world location,

E233_SD15_V6

埼京線E233系の外観です。
E233, train, train station, railroad tracks, scenery, outdoors, power lines, day, sky, real world location, building

Hanshin5000

00001-lametta_v2012 - 469739754.png 阪神のジェットカー5001形の外観です。
Hanshin5000, scenery, railroad tracks, train station, outdoors, train, real world location, power lines,

JNR205ex_SD15

00008-lametta_v2012 - 4059319666.png 埼京線205系の外観です。
JNR205, train, railroad tracks, scenery, real world location, outdoors, realistic, photo background, building, power lines, headlight
JNR205, train, train station, railroad tracks, scenery, real world location, outdoors, day, ceiling, ceiling light, tail lights

JNR12kei_SD15

旧国鉄12系客車の車内です。
12kei, aisle, train interior, scenery, window, seat, ceiling light, indoors, sunlight, reflective floor

JNR_SUHA43_SD15

旧国鉄スハ43・スハフ42等の客車の車内・外観です。
suha43aisle, train interior, scenery, seat, window, sunlight, ceiling, ceiling light, indoors
suha43, railroad tracks, train station, train, scenery, outdoors, day, tree, real world location

JNR_SUHA43W_SD15

旅の風景のイラストを作れないかとスハ43・スハフ42等の客車の通路から窓側のボックスシートを見た風景だけを学習してみたものです。
結論からいうと、元のモデル自体が持つ"train interior"のタグは車輌進行方向の視点が強く学習されているのでうまくいきませんでした。
suha43window, train interior, scenery, seat, window, shadow, day, sunlight, door, indoors

JNR_oha35_SD15

旧国鉄オハ35客車の車内です。スハ43より若干古い時代の車輌で近代化更新があまりなされていない木製の車内風景を学習させてみたものです。
oha35, train interior, scenery, window, indoors, sunlight, chair, ceiling, ceiling light, wooden floor

oha35_deck_SD15

旧客のデッキ付近の風景をイラストにできないかと作ってみたものです。うまくいきません。
kyukyaku, vestibule, train interior, scenery, door, indoors, ceiling light, wooden floor, train
kyukyaku, scenery, train station, railroad tracks, day, outdoors, door, window, sign, sunlight, train, vestibule, outdoors
kyukyaku, train interior, scenery, vestibule, building, train station, power lines, outdoors, door, window

大阪環状線103系

大阪環状線を走っていた103系です。延命更新工事で原型からはかなり変化しています。
JRE103, train, train station, railroad tracks, outdoors, real world location, photo background, 1boy, realistic, standing, scenery, headlight
JRE103, train, train station, railroad tracks, multiple boys, vehicle focus, scenery, tail lights

大阪環状線201系

大阪環状線を走っていた201系です。
JRE201, train, night, train station, scenery, outdoors, building, railroad tracks, headlight
JRE201, train, train station, railroad tracks, scenery, vehicle focus, outdoors, tail lights

大阪環状線323系

現在大阪環状線の主力となっている323系です。
JRE323, train, train station, pants, multiple boys, backpack, bag, railroad tracks, multiple girls, shoes, scenery, real world location, standing, headlight
JRE323, train, train station, railroad tracks, scenery, outdoors, real world location, tail lights

OsakaMetro10A

大阪市交通局(現:大阪市高速電気軌道/大阪メトロ)でかつて御堂筋線を走っていた10A系です。
OsakaMetro10A, subway station, train station, train, multiple boys, bag, real world location, multiple girls, railroad tracks, pants, 6+boys, black hair, rolling suitcase, holding, outdoors, tail lights
OsakaMetro10A, subway station, train station, train, railroad tracks, hat, 1boy, scenery, realistic, uniform, railroad worker, outdoors, tail lights

OsakaMetro20

大阪メトロ中央線20系です。
OsakaMetro20, subway station, train, train station, scenery, railroad tracks, ceiling, ceiling light, headlight
OsakaMetro20, subway station, train, train station, multiple boys, railroad tracks, real world location, multiple girls, scenery, ceiling, ceiling light, tail lights, headlight

OsakaMetro21

大阪メトロ御堂筋線21系です。
OsakaMetro21, subway station, train, train station, railroad tracks, scenery, real world location, outdoors, ceiling, ceiling light, headlight
OsakaMetro21, subway station, train, train station, scenery, ceiling, tail lights

OsakaMetro22

大阪メトロ谷町線22系です。
OsakaMetro22, subway station, train, train station, multiple girls, pants, bag, 1boy, railroad tracks, multiple boys, ceiling, ceiling light, headlight
OsakaMetro22, subway station, train, train station, multiple boys, 6+boys, hat, real world location, scenery, shirt, night, pants, gloves, bag, holding, white shirt, uniform, railroad worker, ceiling, ceiling light, tail lights

OsakaMetro66

大阪メトロ堺筋線66系です。
OsakaMetro66, subway station, train, scenery, train station, outdoors, ceiling, headlight
OsakaMetro66, subway station, train, scenery, train station, tiles, tile floor, door, ceiling, ceiling light, tail lights

OsakaMetro70

大阪メトロ長堀鶴見緑地線70系です
OsakaMetro70, subway station, train, scenery, train station, night, ceiling, ceiling light, headlight
OsakaMetro70, subway station, train, train station, railroad tracks, scenery, outdoors, ceiling, ceiling light, taillight

OsakaMetro80

大阪メトロ今里筋線80系です
OsakaMetro80, subway station, train, scenery, ceiling, ceiling light, scenery, headlight
OsakaMetro80, subway station, train, scenery, door, train station, outdoors, light, ceiling, ceiling light, scenery, taillight

OsakaMetro400

大阪メトロ中央線400系です
OsakaMetro400, subway station, train station, scenery, headlight
OsakaMetro400, subway station, train station, train, scenery, taillight

OsakaMetro30000

大阪メトロ御堂筋線30000系です。
OsakaMetro30000, subway station, 1boy, pants, shirt, male focus, white shirt, black pants, hat, solo, from behind, black hair, night, headlight
OsakaMetro30000, subway station, train station, scenery, night, railroad tracks, train, sign, door, real world location, ceiling, ceiling light, headlight
OsakaMetro30000, subway station, police, hat, train station, police uniform, motor vehicle, train, scenery, taillight

TokyoMetro01_SD15

営団地下鉄(現:東京地下鉄(東京メトロ))銀座線01系です
TokyoMetro01, subway station, train station, train, 6+boys, multiple boys, blurry, real world location, depth of field, railroad tracks, bag, multiple girls, scenery, ceiling, ceiling light, headlight
TokyoMetro01, subway station, train station, train, scenery, real world location, railroad tracks, multiple boys, multiple girls, ceiling, ceiling light, tail lights

TokyoMetro02_SD15

営団地下鉄 丸ノ内線02系です
TokyoMetro02, subway station, train station, train, scenery, railroad tracks, real world location, realistic, night, ceiling, ceiling light, headlight
TokyoMetro02, subway station, train station, train, scenery, railroad tracks, ceiling, ceiling light, taillight

TokyoMetro03_SD15

営団地下鉄 日比谷線03系です
TokyoMetro03, subway station, train station, train, scenery, railroad tracks, sign, real world location, bag, outdoors, day, ceiling, ceiling light, headlight
TokyoMetro03, subway station, train station, train, multiple boys, bag, scenery, railroad tracks, skirt, 6+boys, ceiling, ceiling light, tail lights

TokyoMetro05_SD15

営団地下鉄 東西線05系です
TokyoMetro05, subway station, train station, train, railroad tracks, scenery, outdoors, bench, ceiling, ceiling light, headlight
TokyoMetro05, subway station, train station, train, railroad tracks, white shirt, pants, 1boy, shirt, black hair, scenery, male focus, hat, black pants, short sleeves, standing, real world location, black headwear, wide shot, ceiling, ceiling light, tail lights

TokyoMetro10000_SD15

東京メトロ 有楽町線・副都心線10000系です
TokyoMetro10000, subway station, train station, train, scenery, sign, outdoors, 1boy, jacket, pants, standing, blurry, ceiling, ceiling light, headlight
TokyoMetro10000, subway station, train station, train, railroad tracks, real world location, scenery, photo background, realistic, 1boy, vehicle focus, ceiling, ceiling light, tail lights, headlight
TokyoMetro10000, subway station, train station, train, scenery, railroad tracks, real world location, building, outdoors, day, ceiling, ceiling light, tail lights

TokyoMetro1000_SD15

東京メトロ 銀座線1000系です
TokyoMetro1000, subway station, train station, train, scenery, sign, light, railroad tracks, ceiling, ceiling light, headlight
TokyoMetro1000, subway station, train station, multiple boys, train, hat, scenery, railroad tracks, real world location, ceiling, ceiling light, tail lights

TokyoMetro5000_SD15

営団地下鉄 東西線を走っていた5000系です
TokyoMetro5000, subway station, train station, train, scenery, railroad tracks, outdoors, real world location, ceiling, ceiling light, headlight
TokyoMetro5000, subway station, train station, train, railroad tracks, black hair, 1boy, standing, 1girl, pants, shoes, wide shot, scenery, real world location, tail lights

TokyoMetro6000_SD15

営団地下鉄 千代田線を走っていた6000系です
TokyoMetro6000, subway station, train station, train, railroad tracks, scenery, chinese text, real world location, headlight
TokyoMetro6000, subway station, train station, train, scenery, fence, outdoors, real world location, night, railroad tracks, ceiling, ceiling light, tail lights

TokyoMetro7000_SD15

営団地下鉄 有楽町線を走っていた7000系です
TokyoMetro7000, subway station, train station, train, scenery, railroad tracks, tiles, ceiling, ceiling light, headlight
TokyoMetro7000, subway station, train station, train, railroad tracks, scenery, outdoors, real world location, day, building, tail lights

TokyoMetro8000_SD15

営団地下鉄 半蔵門線8000系です
TokyoMetro8000, train, railroad tracks, real world location, outdoors, scenery, building, sky, day, power lines, headlight
TokyoMetro8000, subway station, train station, train, scenery, ceiling, ceiling light, headlight
TokyoMetro8000, subway station, train station, train, scenery, tail lights