二次元裏@ふたば

画像ファイル名:1781853621276.jpg-(2836117 B)
2836117 B26/06/19(金)16:20:21No.1441373697そうだねx7 18:35頃消えます
作り話するんぬ
画像生成AIのLoRA作りに初めて挑戦したんぬ
6回やって、6回目でやっと上手く行ったんぬ
学習素材とタグの付け方が大事って事は色んなハウトゥに書いてあるんぬが、肝心の「高品質な素材って何よ」って部分がよくわかんなかったんぬ
ブレてないとか文字が入ってないとか背景が映りこんでないとかいうけれど、一枚一枚の画像はそうなんだけどデータセットとしてどんな風に選べばいいの?ってのが分からず、そこでずっと躓いていたんぬ
ある人が言うには全部違うアングルとポーズと服装であるのが望ましいとかいうけどじゃあそれを何枚集めればいいのとか、80枚全部違うアングルとポーズでとか無理じゃね?とか思っていたんぬ
しかし色々試行錯誤した上でやっと正解?にたどり着いたんぬ
今からぬの知見を述べるので答え合わせするんぬ
このスレは古いので、もうすぐ消えます。
126/06/19(金)16:20:40No.1441373757そうだねx4
まず2点大事なところがあるんぬ
キャラクターの学習と画風の学習は別物
キャラクターの学習に必要な素材はデザインの複雑さにもよるんぬが、せいぜい10枚から20枚程度なんぬ、これはキャラクターの基本概念を学習するのに必要なデータということなんぬ、るろうに剣心の剣心なら着物を着てる、赤い髪、髪を結んでる、頬の十字傷…というのが分かればいいんぬ、そういった素材の最低限の分に「剣心」ってタグをつけるとAIは剣心の特徴を覚えるんぬ

るろうに剣心の絵柄を覚えさせるには50枚から80枚程度の素材が必要なんぬ、ここで気をつけなければいけないのは絵柄を学習させるための素材に「剣心」のタグをつけちゃいけないという事なんぬ
例えば幕末オープンゲットをしてる絵が3枚あり、それに剣心のタグを常につけてるとAIは「剣心は常に幕末オープンゲットをしてる概念なんだな」という誤った学習をしてしまうんぬ
ここ初心者が陥りやすい罠じゃないかと思うんぬ!
226/06/19(金)16:21:25No.1441373920そうだねx3
そして様々なアングルやポーズ、服装を学習素材にいれるべしと多くの人が言うんぬが、これも考え方の罠があるんぬ
キャラクターを覚えるための素材に、色んなポーズやアングルの素材は基本的に要らないんぬ!背中にリボンがあるから背面のアングルが必要、とか、キャラの特徴を教えるためのアングルは必要なんぬが、そうでなければ別に背面のアングルいらないんぬ
ただし、同じアングルやポーズの画像ばかりになるとさっき言ったようにAIが「剣心っていうのはいつも敵に追われて走ってる概念なんだな」と誤解してしまうんぬ

ぬーたちが手描きで絵を描く時、本当に沢山の資料を必要を集めたいと思うんぬ、微妙なポーズのバリエーションをたくさん集めて見ながら学んでいくんぬが、LoRAにはこれが要らないんぬ、ポーズやデッサンはチェックポイントの仕事なんぬなー人間が使う資料と同じ感覚で集めちゃ駄目なんぬ!
326/06/19(金)16:22:15No.1441374077+
AIってのは超絶な画力を持っておりどんなポーズやアングルでも描けるが、キャラの特徴と構図とポーズの違いが解らないクソバカなんぬ、AIが勘違いしないような素材づくりをするんぬ

そして学習させすぎも駄目なんぬ、過学習は駄目だと皆言うんぬがそれは具体的に何がおきるかというと、キャラの特徴を教えるだけのために最低限揃えた素材のポーズや構図をキャラの特徴と勘違いし始めるんぬ、そうなるともう使い物にならなくなるんぬ、剣心が常にオープンゲットすることになるんぬ
今話題のANIMAならわずか1500ステップでキャラの学習が完了するんぬ、そしてStyleの学習なら多くて80枚程度の画像で3000stepほどでいいんぬ、キャラLoRAと画風LoRAは別々のLoRAとして作ったほうが間違いがなくて良いんぬが、慣れてるなら前述の通りタグを使い分けて一個のLoRAにしてもいいんぬが調整が難しいんぬ
学習過程で学習に失敗したりロスする分もあるし、学習素材の量で収束率も変わってくるため必ずしも1500でベストになるとは限らず誤差はあるんぬ、ぬは大体キャラは3000ステップまでやって、画風は5000ステップまで回して途中経過を見て良き頃合いで止めるんぬ
426/06/19(金)16:22:51No.1441374209+
どうかぬ、ぬの認識は「」とあっていたかぬ
画像生成ってなに?LoRAってなに?という状態だったんぬが自分で挑戦してみて面白かったんぬ
まだまだ覚えることがあると思うんぬがANIMAが楽しいので幕末オープンゲットしていくんぬ!
526/06/19(金)16:23:56No.1441374445そうだねx23
🤖剣心はたまにしか幕末オープンゲットをしない
626/06/19(金)16:24:33No.1441374564そうだねx12
長いから文章をAIで要約してからお出ししてくださいんぬ
726/06/19(金)16:25:52No.1441374826+
勉強になるんぬなぁ
826/06/19(金)16:26:03No.1441374869そうだねx38
>長いから文章をAIで要約してからお出ししてくださいんぬ
要約したものはネットに無数にあり
それだと細部が分からなくて苦労して自分でやってみて理解した!という話なんぬ!AI以下の読解力なんぬ!!
926/06/19(金)16:28:10No.1441375244+
お勉強偉いんぬなぁ
1026/06/19(金)16:28:20No.1441375272+
ちなみに何のLORA作ったの?
1126/06/19(金)16:28:58No.1441375386そうだねx1
>まず2点大事なところがあるんぬ
一点目はキャラと画風は別の学習だって事だったんぬが二点目は何なんぬ?
1226/06/19(金)16:29:14No.1441375433そうだねx7
ブタゴリラが拳銃を構えてる画像を作ろうとした時に拳銃をブタゴリラと紐付けしちゃうとブタゴリラがつねに拳銃を持ってるキャラだと認識してしまうって感じだろ
1326/06/19(金)16:31:00No.1441375754+
俺は300枚程度で差分10パターン以上15000stepを基準にしてるけど
ちゃんと高品質なものを作りつつ1200stepで十分と言う人もいるのでまだまだわかった気になってるだけですね
1426/06/19(金)16:31:13No.1441375792+
つまり絵柄の再現できなくていいなら20枚の剣心があればLoRA作れるんぬ?
1526/06/19(金)16:31:59No.1441375930+
ぬが3年前にmayのAI雑談スレに潜入して得た知見と同じ領域にスレぬもたどりついたんぬな
としあきwikiに全部書いてるので参考にするといいんぬ
1626/06/19(金)16:33:34No.1441376243そうだねx1
AIに聞いたら返ってくる程度の基本的な情報だったんぬ
1726/06/19(金)16:36:22No.1441376770+
>>まず2点大事なところがあるんぬ
>一点目はキャラと画風は別の学習だって事だったんぬが二点目は何なんぬ?
文章がわかりにくかったんぬ!ごめんぬ!
二点目は、画風と同じでポーズもキャラLoRAに入れなくて良いって事なんぬ
身体的特徴を説明するために必要なポーズがあるなら入れてもいいけど、ぬたちが手描きで絵を描く時みたいに大量のポーズ資料とかは必要ないってことなんぬ、チェックポイントが目当ての肉体表現をしてくれないなら、キャラLoRAと別に画風LoRAの中に取り込んだほうが良いんぬ
1826/06/19(金)16:36:36No.1441376812+
幕末オープンゲットのポーズは普通チェックポイントに入ってないんぬが、剣心のキャラクターLoRAに入れるのは学習のさせ方が難しくて、常にオープンゲットする概念になっちゃいがちなので、オープンゲットの素材には絶対剣心のタグはつけないとかして、剣心の概念と混ざらないようにする必要があるんぬが、それでも幕末オープンゲットを剣心がやっているのをみて、どうしてもオープンゲットの画像に「1boy(男)」とかいうタグがつくので、それを見てAIは「男がオープンゲットしているな」とか考えちゃうし、逆に1boyってタグを消すと誰もオープンゲットできなくなったりするので、やっぱり調整が難しいんぬ
剣心の特徴をLoRAにするために3000ステップ回すとしたら、そこに幕末オープンゲットが入っていれば幕末オープンゲットも1boyに3000ステップ紐付けられることになるので、剣心LoRAのつもりが触れるもの全てを幕末オープンゲットさせるLoRAになりかねず…
やはりキャラLoRAとスタイルLoRAは分けたほうが無難なんぬ
1926/06/19(金)16:37:16No.1441376936+
>ちなみに何のLORA作ったの?
あすけんのanima用のLoRAなんぬ
2026/06/19(金)16:37:30No.1441376977+
>つまり絵柄の再現できなくていいなら20枚の剣心があればLoRA作れるんぬ?
最低限1枚からでもキャラLoRAは作れるんぬ
その1枚LoRAを使って生成した画像の中でキャラ再現度の高い画像数枚を素材に加えて次のLoRAを作って…
という工程を何度か繰り返せば漫画の1コマしか登場しないモブのLoRAなども作れるんぬ
mayスレだとその手法でSD1.5時代に既に俺さんやおじさまのLoRAが作られていたんぬ
今だとNAIのキャラ参照などを使えばもっと楽に素材画像が作れてしまうんぬな
2126/06/19(金)16:38:04No.1441377089+
みらいさんか
2226/06/19(金)16:40:08No.1441377468+
>みらいさんか
みきさんな
ミライさんだとガンダムになってしまうんぬ
2326/06/19(金)16:40:10No.1441377472そうだねx13
車輪の再発明だとしても自分で理解するまでやる事に尊敬の念を抱くんぬなぁ
2426/06/19(金)16:40:29No.1441377542+
🤖あすけんのミライさん
2526/06/19(金)16:41:34No.1441377764そうだねx8
>車輪の再発明だとしても自分で理解するまでやる事に尊敬の念を抱くんぬなぁ
車輪の再発明とかいうんぬが自分で説明できるくらいになるのが学ぶということなんぬよ
2626/06/19(金)16:42:46No.1441377995そうだねx17
スレ「」は何か新しい技術を新発見をしたと言ってる訳では無いし自分はここまで理解したって発表してるだけだからこれを車輪の再発明とか言うのは誤用なんぬ
2726/06/19(金)16:42:55No.1441378018+
ちなみに素材画像に公式の絵柄の画像だけ集めて作ると絵柄まで再現されるぞ
逆にファンアートなど絵柄にばらつきをもたせるとキャラの特徴だけ覚えて
いろいろな絵柄と組み合わせやすい柔軟なLoRAになるぞ
2826/06/19(金)16:46:59No.1441378743+
勝手に他人様の素材で学習してることには変わりないんぬが
(animaとかは格段に作りやすくなったんぬが)現時点ではLoRAを上手く作るにはそれなりの技術と知識が必要で
そこには確かにエンジニアリング的な俗人的な部分があるなと思ったんぬ
2926/06/19(金)16:48:57No.1441379147+
よくわかってないので画風プリセットで画風+キャラLoraみたいに作ってる
まあまあ上手くいってるけど多分ちゃんと画風Lora作るべきなんだろうな
3026/06/19(金)16:54:33No.1441380224+
>よくわかってないので画風プリセットで画風+キャラLoraみたいに作ってる
>まあまあ上手くいってるけど多分ちゃんと画風Lora作るべきなんだろうな
使う側としては全部一体になってるLoRAのほうがつかいやしーって時もあると思うんぬ
例えば原作キャラとオリキャラを同じ画風で絡ませたいときとか
3126/06/19(金)17:00:36No.1441381335+
画像生成の作り話なのにスレ画画像生成にしないんだ…
3226/06/19(金)17:03:11No.1441381818+
>画像生成の作り話なのにスレ画画像生成にしないんだ…
普段からぬスレ立ててるから癖でぬスレになったんだろう…
3326/06/19(金)17:03:44No.1441381916+
剣心って何?
3426/06/19(金)17:04:01No.1441381972+
ちゃんと手を動かしてて偉いんぬ
自分で試行錯誤したぶんだけ経験値になるので良いGPUがあると捗るんぬ
3526/06/19(金)17:05:11No.1441382203そうだねx5
>剣心って何?
AIに聞いてみるんぬ
3626/06/19(金)17:13:14No.1441383721+
LoRA作りやろうと思っても毎回準備段階で手順分からなくなってやめるんぬ
3726/06/19(金)17:16:05No.1441384239+
タグ付けが本当にめんどくせえんぬ
3826/06/19(金)17:19:09No.1441384851+
anima環境になって層別学習する機会増えたけど画風とキャラとコンセプトの差がわかんなくなってきたぬ
3926/06/19(金)17:19:49No.1441384974+
人間の絵描きも段々と乳がデカくなったり長乳首になったりするけど似たようなもんだな
4026/06/19(金)17:21:04No.1441385235+
>>長いから文章をAIで要約してからお出ししてくださいんぬ
>要約したものはネットに無数にあり
>それだと細部が分からなくて苦労して自分でやってみて理解した!という話なんぬ!AI以下の読解力なんぬ!!
いや読んでないんだから読解力関係ねえだろ
4126/06/19(金)17:21:41No.1441385346+
学習素材500枚(台詞あり・カラー漫画・無加工無選別・自動タグ付け)を使って
学習率2e-5で20000stepでANIMAで画風を学習させたけど
画風の再現もちゃんとしてるし台詞枠が入り込んだりもせずで悪くない結果だったよ
こんな雑な素材でいけるのか…って驚きがあった
4226/06/19(金)17:21:52No.1441385385+
ありがつぽ
4326/06/19(金)17:25:45No.1441386134+
一枚二枚で画風もキャラもぽんと作れるようになって欲しいんぬ
4426/06/19(金)17:26:11No.1441386219+
昔は学習させたいキャラの特徴タグを消して代わりにキャラ名を入れてたけど最近はどうなんぬ?
4526/06/19(金)17:26:56No.1441386366+
それはそうと幕末オープンゲットさせようとするぬは何が望みなんぬ
4626/06/19(金)17:29:39No.1441386940そうだねx7
>いや読んでないんだから読解力関係ねえだろ
スタートラインにも立てないんぬ
4726/06/19(金)17:30:47No.1441387156+
幕末オープンゲットするエロ画像ってなんなんぬ…
4826/06/19(金)17:36:17No.1441388302そうだねx4
自分で試してそれがしっかり学びになってしかもそれをスレ立てて共有してくれるのマジで偉いと思うんだけどそれでも腐す人がいるの怖いスねAI界隈は
4926/06/19(金)17:40:34No.1441389172+
ぬスレだからじゃない?
5026/06/19(金)17:43:29No.1441389802+
地道な検証たすかるんぬ
5126/06/19(金)17:44:39No.1441390060+
sdxlだとLora何度か作ってるけどanimaだと楽になるんぬ?
5226/06/19(金)17:45:35No.1441390295+
これ読んでもっかいセックス後スカートで雑にちんぽ拭くLORAに挑戦しようと思ったわ
ポーズの場合は知見ある?
5326/06/19(金)17:46:59No.1441390606+
>sdxlだとLora何度か作ってるけどanimaだと楽になるんぬ?
画力が高いので成功する幅が広い
5426/06/19(金)17:50:08No.1441391327+
animaに移行したからお気に入りのLoraを作り直さなきゃと思ってるけど出来が変わりそうで怖い
いい方向か悪い方向かはともかく
5526/06/19(金)17:51:11No.1441391597そうだねx1
>自分で試してそれがしっかり学びになってしかもそれをスレ立てて共有してくれるのマジで偉いと思うんだけどそれでも腐す人がいるの怖いスねAI界隈は
腐されてもやむ無しなバットマナーキャッツ!もいるからある程度は仕方ないような気もするんぬ
猿でも使えるのも良し悪しなんぬ
5626/06/19(金)17:52:25No.1441391866+
もうanimaのLORAの1日のアップ数がリアス系の7割8割になってきたのでもうすぐ追い越しそう
5726/06/19(金)18:01:07No.1441394028+
Z-imageから入ったせいで逆にSDXLがよくわかんねぇんぬ
とっしーのwiki読んで違いに戸惑っているんぬ
ぬぁー最初から素直にビッグウェーブに乗っていれば…
5826/06/19(金)18:06:37No.1441395523そうだねx1
人の作ったLoraもらうんぬ〜
5926/06/19(金)18:08:45No.1441396148+
普通に参考になったんぬ
まあLoRA自作することはないと思うんぬが…
6026/06/19(金)18:10:14No.1441396567そうだねx1
タグつけがめんどくさいんでlora作る人には頭下がるんぬ
6126/06/19(金)18:13:16No.1441397439+
>昔は学習させたいキャラの特徴タグを消して代わりにキャラ名を入れてたけど最近はどうなんぬ?
その「昔」を知らないし、なぜそれをやるのかも理解できないのでそれについてはコメントできないんぬが
一般的にキャラクター用の学習画像から特徴タグ消すのは問題があるように思うんぬ
例えばポニテと髪を下ろした2つのスタイルになるキャラがいるとして、ポニテの学習画像からポニテのタグを消したら生成時にポニテを解除できなくなると思うんぬ
ポニテってタグが入ってるならネガティブプロンプトにポニテって入れれば髪下ろしたスタイルだけになるはずなんぬがポニテタグがないとAIはそれがポニテと分からずにポニテのデータを元に生成するんぬ
ポニテになるかロングヘアになるか完全にランダムになるんぬ
6226/06/19(金)18:14:36No.1441397862+
loraで表現したい部分だけ共通項でそれ以外は散らした素材を準備するんぬ
6326/06/19(金)18:18:41No.1441399079+
ロリマンコを学習するには何を集めればいいんぬ?
6426/06/19(金)18:18:49No.1441399114+
今はNAIしか使ってないけど何かあったときのためにローカルも作っておきたい…
んだけどやっぱ面倒くさいんぬ
6526/06/19(金)18:20:14No.1441399540+
Xで良く言われる「絵が取られる」だの「学習禁止」だの言うの本当にズレてると言うか別に最新の絵を常に集める必要ないと思うんぬが
AI嫌ってる人に使ってるやつが説明しても魔女狩りにあうだけなんで多分これからも理解されることはないと思うんぬ
6626/06/19(金)18:21:50No.1441400049+
>Xで良く言われる「絵が取られる」だの「学習禁止」だの言うの本当にズレてると言うか別に最新の絵を常に集める必要ないと思うんぬが
意思があれば盗めるんだから別にズレてないと思うんぬ
何を学習させるかはAI使う側の都合でしかないし
6726/06/19(金)18:22:48No.1441400313そうだねx1
黒髪キャラに黒髪タグつけると
黒髪って入れないと黒髪にならないんぬ
当然の要素にタグは付けるなってことなんぬ
6826/06/19(金)18:23:06No.1441400406+
>Xで良く言われる「絵が取られる」だの「学習禁止」だの言うの本当にズレてると言うか別に最新の絵を常に集める必要ないと思うんぬが
>AI嫌ってる人に使ってるやつが説明しても魔女狩りにあうだけなんで多分これからも理解されることはないと思うんぬ
その理解だとどう説明しようが叩かれるんで説明しなくて偉いと思うんぬ
6926/06/19(金)18:23:21No.1441400484+
もうLoRA自作やってないけどあるキャラが生成できなくて唸ってた頃があったんぬ
まともに情報無い頃だから50回くらい微調整してまぁいいか…くらいになったんぬが今はすごいんぬなぁ
7026/06/19(金)18:25:15No.1441401049+
ざっと読んだけど幕末オープンゲットしか残らなかった
7126/06/19(金)18:25:57No.1441401261そうだねx2
>Xで良く言われる「絵が取られる」だの「学習禁止」だの言うの本当にズレてると言うか別に最新の絵を常に集める必要ないと思うんぬが
お前がその絵師の絵を集める必要があると思うかどうかはお前の都合でしかないし皆お前にお伺い立てて絵描いてる訳じゃないんだから無断学習されたくないから何かしらの対策するって絵師側の考えは別にズレてなくね?
お前のほうがズレてるよ
7226/06/19(金)18:26:21No.1441401394+
幕末オープンゲットというのをタグに入れればいいだけだはと思わなくもないぬ
7326/06/19(金)18:29:14No.1441402232+
手描きでもAIでもヤフオクとかにあるサイン偽装色紙商売みたいな事したらしょっ引かれるよ
そこが犯罪かどうかのラインだよって話なんだけど
>AI嫌ってる人に使ってるやつが説明しても魔女狩りにあうだけなんで多分これからも理解されることはないと思うんぬ
あんま理解されてないみたいだから黙ってた方がいいんぬ
7426/06/19(金)18:29:21No.1441402272+
>無断学習されたくない
まず無断学習と言う概念が存在しませんぬ
7526/06/19(金)18:29:59No.1441402467+
無断学習なんてものは存在しないんだしそれこそ絵描きに断る必要もないんぬ
別に悪用とか名前騙ろうってわけじゃねーんぬ
7626/06/19(金)18:32:22No.1441403193+
>何かしらの対策するって絵師側の考えは別にズレてなくね?
Xにアップロードしてそこで禁止しても何の効果もないからそういう意味ではズレてる
本当に対策したければ規約に合意しなければ見れない場所に絵をおいてその規約に学習禁止や転載禁止の旨を書いてそれをやぶった人に罰則を与えるべきだぜ


1781853621276.jpg