TRAIN / README.md
morisato's picture
Update README.md
8da29c5 verified
|
raw
history blame
No virus
14.4 kB
metadata
license: creativeml-openrail-m
language:
  - ja

#鉄道・電車LoRA 世界中の変なLoRA愛好家の皆様、お元気でお過ごしでしょうか?

これは「追加学習してみる実験」で作成した鉄道・電車等のLoRAです。
最初に結論から言ってしまうと、鉄道車輌や車内の学習はかなり難しいです。
AI画像生成の「ノイズの海の中からなんとなくぼやっとしたイメージを再現する」という仕組み上では、パースが歪んでしまったり、勝手なアレンジが加えられたりすることがよくあります。
自動車・バイクや鉄道といった乗り物・機械系のイラスト生成は、各々をよく観察し細かな仕様の違いさえ分かってしまう熱心なファンとは相性が良くないジャンルかもしれません。

私達が使っているSD15系モデルには、海外の鉄道車輌等の風景もある程度学習されているようです。
プロンプトで"train"や"train interior"(車輌の内装:車内)と書いて画像生成すれば、車輌の外観や車内のイラストが生成できます
しかし海外っぽい車輌や車内になってしまうことが多く、日本人の私達が日常で目にするような国内の車輌や車内風景を描くことはできません
LoRA等の追加学習で日本の電車でお出かけする風景のイラストを生成することはできるのか?とりあえずやってみようということでチャレンジしたのが別途アップしている山手線235系・阪急3000系の車内風景でした。
結果としては、車内の特徴をある程度学習はしてくれるのですが、窓やドア・シート配置といった規則性は再現できないので、かなり異次元日本の風景になってしまいました

そして次に車輌の外観の学習ですが、車内と同じく、特徴をある程度は学習してくれるものの、縦や横に伸びてしまったり変形したり、あるべきパーツが無い・増殖するといった感じで、分かってる方にとってはかなり気持ち悪いイラストになってしまいます。
作成したLoRAで思ったような画像が生成できるかどうかを個人的に「打率」と呼んでいますが、その「打率」が2~3割にも届かない感じです。

大まかな特徴を追加で学習できているので、実際の車輌の写真をControlNet等で参照させれば若干は改善することができますが…
素材を用意しなくてはならないので、結構面倒じゃないかなと思ったりします

「実験してみた」ことで、出来そうな事と改善が難しそうな点がなんとなく分かってきたのが収穫かもしれません。
そのような訳で最近作成してみた色々な鉄道関係のLoRAを一旦まとめてみようと思います。皆様の研究・実験のお役に立てば幸いです。


##E233_1000_SD15 京浜東北線E233系の車内風景です。
トリガー:e233, train interior, scenery, seat, window, door, poster (object),

##E233ex_SD15 京浜東北線E233系の外観です。
トリガー:e233, exterior, train, train station, railroad tracks, scenery, outdoors, day, real world location,

##E233_SD15_V6 埼京線E233系の外観です。
トリガー:E233, train, train station, railroad tracks, scenery, outdoors, power lines, day, sky, real world location, building

##Hanshin5000 阪神のジェットカー5001形の外観です。
トリガー:Hanshin5000, scenery, railroad tracks, train station, outdoors, train, real world location, power lines,

##JNR205ex_SD15 埼京線205系の外観です。
Prompt:JNR205, train, railroad tracks, scenery, real world location, outdoors, realistic, photo background, building, power lines, headlight
Prompt:JNR205, train, train station, railroad tracks, scenery, real world location, outdoors, day, ceiling, ceiling light, tail lights

##JNR12kei_SD15 旧国鉄12系客車の車内です。
Prompt:12kei, aisle, train interior, scenery, window, seat, ceiling light, indoors, sunlight, reflective floor

##JNR_SUHA43_SD15 旧国鉄スハ43・スハフ42等の客車の車内・外観です。
Prompt:suha43aisle, train interior, scenery, seat, window, sunlight, ceiling, ceiling light, indoors
Prompt:suha43, railroad tracks, train station, train, scenery, outdoors, day, tree, real world location

##JNR_SUHA43W_SD15 旅の風景のイラストを作れないかとスハ43・スハフ42等の客車の通路から窓側のボックスシートを見た風景だけを学習してみたものです。
結論からいうと、元のモデル自体が持つ"train interior"のタグは車輌進行方向の視点が強く学習されているのでうまくいきませんでした。
Prompt:suha43window, train interior, scenery, seat, window, shadow, day, sunlight, door, indoors

##JNR_oha35_SD15 旧国鉄オハ35客車の車内です。スハ43より若干古い時代の車輌で近代化更新があまりなされていない木製の車内風景を学習させてみたものです。
Prompt:oha35, train interior, scenery, window, indoors, sunlight, chair, ceiling, ceiling light, wooden floor

##oha35_deck_SD15 旧客のデッキ付近の風景をイラストにできないかと作ってみたものです。うまくいきません。
Prompt:kyukyaku, vestibule, train interior, scenery, door, indoors, ceiling light, wooden floor, train
Prompt:kyukyaku, scenery, train station, railroad tracks, day, outdoors, door, window, sign, sunlight, train, vestibule, outdoors
Prompt:kyukyaku, train interior, scenery, vestibule, building, train station, power lines, outdoors, door, window

##大阪環状線103系 大阪環状線を走っていた103系です。延命更新工事で原型からはかなり変化しています。
JRE103, train, train station, railroad tracks, outdoors, real world location, photo background, 1boy, realistic, standing, scenery, headlight
JRE103, train, train station, railroad tracks, multiple boys, vehicle focus, scenery, tail lights

##大阪環状線201系 大阪環状線を走っていた201系です。
JRE201, train, night, train station, scenery, outdoors, building, railroad tracks, headlight
JRE201, train, train station, railroad tracks, scenery, vehicle focus, outdoors, tail lights

##大阪環状線323系 現在大阪環状線の主力となっている323系です。
JRE323, train, train station, pants, multiple boys, backpack, bag, railroad tracks, multiple girls, shoes, scenery, real world location, standing, headlight
JRE323, train, train station, railroad tracks, scenery, outdoors, real world location, tail lights

##大阪市交通局10A系 かつて御堂筋線を走っていた10A系です。
OsakaMetro10A, subway station, train station, train, multiple boys, bag, real world location, multiple girls, railroad tracks, pants, 6+boys, black hair, rolling suitcase, holding, outdoors, tail lights
OsakaMetro10A, subway station, train station, train, railroad tracks, hat, 1boy, scenery, realistic, uniform, railroad worker, outdoors, tail lights

##大阪メトロ20系 中央線20系です。
OsakaMetro20, subway station, train, train station, scenery, railroad tracks, ceiling, ceiling light, headlight
OsakaMetro20, subway station, train, train station, multiple boys, railroad tracks, real world location, multiple girls, scenery, ceiling, ceiling light, tail lights, headlight

##大阪メトロ21系 御堂筋線21系です。
OsakaMetro21, subway station, train, train station, railroad tracks, scenery, real world location, outdoors, ceiling, ceiling light, headlight
OsakaMetro21, subway station, train, train station, scenery, ceiling, tail lights

##大阪メトロ22系 谷町線22系です。
OsakaMetro22, subway station, train, train station, multiple girls, pants, bag, 1boy, railroad tracks, multiple boys, ceiling, ceiling light, headlight
OsakaMetro22, subway station, train, train station, multiple boys, 6+boys, hat, real world location, scenery, shirt, night, pants, gloves, bag, holding, white shirt, uniform, railroad worker, ceiling, ceiling light, tail lights

##大阪メトロ66系 堺筋線66系です。
OsakaMetro66, subway station, train, scenery, train station, outdoors, ceiling, headlight
OsakaMetro66, subway station, train, scenery, train station, tiles, tile floor, door, ceiling, ceiling light, tail lights

##大阪メトロ70系 長堀鶴見緑地線70系です
OsakaMetro70, subway station, train, scenery, train station, night, ceiling, ceiling light, headlight
OsakaMetro70, subway station, train, train station, railroad tracks, scenery, outdoors, ceiling, ceiling light, taillight

##大阪メトロ80系 今里筋線80系です
OsakaMetro80, subway station, train, scenery, ceiling, ceiling light, scenery, headlight
OsakaMetro80, subway station, train, scenery, door, train station, outdoors, light, ceiling, ceiling light, scenery, taillight

##大阪メトロ400系 中央線400系です
OsakaMetro400, subway station, train station, scenery, headlight
OsakaMetro400, subway station, train station, train, scenery, taillight

##大阪メトロ30000系 御堂筋線30000系です。
OsakaMetro30000, subway station, 1boy, pants, shirt, male focus, white shirt, black pants, hat, solo, from behind, black hair, night, headlight
OsakaMetro30000, subway station, train station, scenery, night, railroad tracks, train, sign, door, real world location, ceiling, ceiling light, headlight
OsakaMetro30000, subway station, police, hat, train station, police uniform, motor vehicle, train, scenery, taillight

##TokyoMetro01_SD15 営団地下鉄(現:東京地下鉄(東京メトロ))銀座線01系です
TokyoMetro01, subway station, train station, train, 6+boys, multiple boys, blurry, real world location, depth of field, railroad tracks, bag, multiple girls, scenery, ceiling, ceiling light, headlight
TokyoMetro01, subway station, train station, train, scenery, real world location, railroad tracks, multiple boys, multiple girls, ceiling, ceiling light, tail lights

##TokyoMetro02_SD15 営団地下鉄 丸ノ内線02系です
TokyoMetro02, subway station, train station, train, scenery, railroad tracks, real world location, realistic, night, ceiling, ceiling light, headlight
TokyoMetro02, subway station, train station, train, scenery, railroad tracks, ceiling, ceiling light, taillight

##TokyoMetro03_SD15 営団地下鉄 日比谷線03系です
TokyoMetro03, subway station, train station, train, scenery, railroad tracks, sign, real world location, bag, outdoors, day, ceiling, ceiling light, headlight
TokyoMetro03, subway station, train station, train, multiple boys, bag, scenery, railroad tracks, skirt, 6+boys, ceiling, ceiling light, tail lights

##TokyoMetro05_SD15 営団地下鉄 東西線05系です
TokyoMetro05, subway station, train station, train, railroad tracks, scenery, outdoors, bench, ceiling, ceiling light, headlight
TokyoMetro05, subway station, train station, train, railroad tracks, white shirt, pants, 1boy, shirt, black hair, scenery, male focus, hat, black pants, short sleeves, standing, real world location, black headwear, wide shot, ceiling, ceiling light, tail lights

##TokyoMetro10000_SD15 東京メトロ 有楽町線・副都心線10000系です
TokyoMetro10000, subway station, train station, train, scenery, sign, outdoors, 1boy, jacket, pants, standing, blurry, ceiling, ceiling light, headlight
TokyoMetro10000, subway station, train station, train, railroad tracks, real world location, scenery, photo background, realistic, 1boy, vehicle focus, ceiling, ceiling light, tail lights, headlight
TokyoMetro10000, subway station, train station, train, scenery, railroad tracks, real world location, building, outdoors, day, ceiling, ceiling light, tail lights

##TokyoMetro1000_SD15 東京メトロ 銀座線1000系です
TokyoMetro1000, subway station, train station, train, scenery, sign, light, railroad tracks, ceiling, ceiling light, headlight
TokyoMetro1000, subway station, train station, multiple boys, train, hat, scenery, railroad tracks, real world location, ceiling, ceiling light, tail lights

##TokyoMetro5000_SD15 営団地下鉄 東西線を走っていた5000系です
TokyoMetro5000, subway station, train station, train, scenery, railroad tracks, outdoors, real world location, ceiling, ceiling light, headlight
TokyoMetro5000, subway station, train station, train, railroad tracks, black hair, 1boy, standing, 1girl, pants, shoes, wide shot, scenery, real world location, tail lights

##TokyoMetro6000_SD15 営団地下鉄 千代田線を走っていた6000系です
TokyoMetro6000, subway station, train station, train, railroad tracks, scenery, chinese text, real world location, headlight
TokyoMetro6000, subway station, train station, train, scenery, fence, outdoors, real world location, night, railroad tracks, ceiling, ceiling light, tail lights

##TokyoMetro7000_SD15 営団地下鉄 有楽町線を走っていた7000系です
TokyoMetro7000, subway station, train station, train, scenery, railroad tracks, tiles, ceiling, ceiling light, headlight
TokyoMetro7000, subway station, train station, train, railroad tracks, scenery, outdoors, real world location, day, building, tail lights

##TokyoMetro8000_SD15 営団地下鉄 半蔵門線8000系です
TokyoMetro8000, train, railroad tracks, real world location, outdoors, scenery, building, sky, day, power lines, headlight
TokyoMetro8000, subway station, train station, train, scenery, ceiling, ceiling light, headlight
TokyoMetro8000, subway station, train station, train, scenery, tail lights