ワークフロー 始め方…どうやって始めればいい?

ArunSocket9

ROM専
登録日
2022年3月29日
投稿
106
リアクションスコア
0
まずは写真を作ってみて、そのあと動画も、って考えてる。手持ちの画像や動画を再現する感じだけど、全部初めてでさ。有料サイトにはまだ登録したくない。最初は足フェチ写真とかスカート内盗撮風から。フォトリアルな素材を試して作れる場所ってどこかな?
 
有料サイトに登録する気がないなら無料の選択肢があるけど、自分でローカルで作りたい(PCのハードだけで)なら、まずハードが必須。理想はNvidiaでVRAM 12GB以上(3060は除く)。

始めるならGoogle Aiに手伝ってもらうのが一番。俺は数週間で全部覚えた。画像の作り方、LORAの作り方、テキスト読み上げ機能付きのAIキャラの作り方、全部Google AIで。使ってるソフト用のAIガイドをGoogle AIに作らせることもできる。

必要な無限の忍耐力があるし、理解できるように何でも説明してくれる。Temperaturesとか、ディテール調整用のサブLora'sとか、頭に入れること多いからね。Command Prompt用の直リンクも出してくれるから、自分で探して間違ったバージョンを落としちゃうこともなく、時短になる。
 
確か12gbの3080 tiじゃなくて10gbのモデルのことだよね?3080は始めるには十分だよ、8gb VRAMのGPUに収まる始めやすいものが山ほどあるから、2gb余分にあるのは大きい。

3080でも絶対たくさん学べるし楽しめる。実際いい立ち位置で、VRAMの範囲内でやれば、最初の学習段階のあとに12gbのGPU(5070とか)で足りるって分かるか、小さいモデルで必要なものを見つけるのにめちゃくちゃ苦労するなら12gb VRAMでも足りなくて、結局16gb VRAMの5070 tiまで上げることになる。今は値段の差が大きいのが残念だけど。

ただ、学ぶこと・のめり込むことは超大量にある。例えば7.5GBのモデルは3070の8GB VRAMに収まるけど、UIやバックエンドもVRAMを食うし、VRAMを埋めすぎると反応速度が死ぬ。
 
関係ない質問なんだけど、AIプロフィールみたいにプロンプトごとに同じ顔と体を出すにはどうするの?LORAを作って学習させる必要ある?
 
そうだけど、Klingみたいなサイト/アプリは参照画像を使うだけでLORAを作らなくて済むんだよね。顔のディテールを拾うようにアルゴリズムがかなり学習されてるんだろうけど、自宅で参照なしで顔も体も一貫した画像を出したいなら、LORAを作る必要がある。

ただLORAを「学習させる」って言い方はよくわからない。LORA自体は学習しないし、トレーニングも要らない。フィードバックして自分で修正させることもできないし、ただ画像を食わせてそれを元に動くだけ。「作る」ほうは比較的簡単で、被写体をできるだけ多くの角度から撮った画像で構成するだけ。
 
みなさん、8GBの3070 Tiでそれなりの結果が出て、thisみたいな画像や短い動画、3Dやフォトリアル系を作るのに手間をかける価値があるソフトとモデルのおすすめある?ComfyUIを使うべき?それともGitHubにもっと簡単でいい結果が出るツールある?
 
ComfyUIは使えるUIの中で一番複雑で手動な部類。あらゆるオプションをいじれる分、壊しやすいから、初心者が最初に触るにはキツいし、最初は圧倒されると思う。

まずはStable DiffusionとFooocusみたいなツールで画像作りから始めて、どこまでいけるか試してみるといい。

特に3070tiでVRAM 8GBなら、試行錯誤は遅くなるから、まず基本を覚えて小さく始めたほうがいい。動画作成はまだ手をつけてないけど、最初は画像も指や目が崩れてぐちゃぐちゃに出ると思うし、動画も同じだよ。
 
一番簡単なのはRunpodだったな。civitaiにセットアップ済みのrunpodテンプレを配ってるユーザーがいて、画像を入れて、設定をいくつか変えて、loraを追加して、プロンプトを打って実行するだけで高画質の動画ができる。テンプレの名前は Yet another workflow。完全なガイドと動画ガイドもあるよ。まあまあ良い結果が出てるし、H3はプロンプトの拡張にびっくりするほど反応が良い。grokみたいに書いただけでそこそこの結果が出た。例えば女性の顔の画像を最初に入れて:「即座に新しいシーンにカット、彼女は全裸でベッドに横になって膝を抱えている、巨乳が揺れている、POVで男が正常位で彼女を犯している、チンポを奥まで突き込み、彼女は喘ぎながらこちらを見ている」みたいな感じ。

これでもかなり良い結果が出てるけど、ちゃんとプロンプトを書けばもっと良くなる。特に複数ショットのとき
 
戻る
トップ