トップ 新規 一覧 単語検索 最終更新 ヘルプ 最終更新のRSS

白猫キャラのLoRA作成 のバックアップ(No.1)


#ref(): The style ref(filename,pagename) is ambiguous and become obsolete. Please try ref(pagename/filename)

概要

  • 白猫キャラのLoRAやLyCORIS等を作る人向けの指南ページ
  • ここにあるのは公式の画像をできる限り教師画像の多様性を保持しつつ沢山集める方法だけです。同志の協力を求む。

衣装までしっかり再現したい!でも過学習はイヤ!!

  • 顔と雰囲気さえ合ってたら大丈夫→ゲーム内の立ち絵覚醒絵と表情差分集めて10枚〜集めてくるといい感じに作れるよ
  • 衣装や装飾品等までできる限り綺麗に再現したい!!→素材をできる限り多く用意すること。背景の塗りつぶしとか切り抜きとかよりとにかく素材数。これにより過学習を防止しつつキャラデザを詳細に学ばせることが出る。完璧な絵柄で全ての角度と構図のイラストを用意するのが理想だがそれはありえないので、とにかく素材数を水増しする。 AutoTagger?で付けられたタグの先頭に、キャラタグやその衣装専用のタグを、自分で作って付けること。マルゼン式タグ消去はしなくても良い。そもそも素材が多くなると非現実的となる。hair系、eyes系タグだけ消しておこう

以下に白猫公式から用意できる画像を列挙する。全てpngで用意すること。

  • ゲーム内のキャラの立ち絵と覚醒絵のスクショ ・(立ち絵は空背景と黒背景両方。そのキャラが写っている他キャラの覚醒絵もあれば切り抜いて用いる。持ってないキャラであればGame withや風味館から取ってくる。iPad白猫のスクショやGame withにある画像の一部は、左右に幅4px程度の黒い線が入る為、取り除くこと。GPT4に「あるフォルダの画像全てについて、両端から4pxずつ消すプログラムを作って」と頼めば、便利プログラム.pyを作ってくれる)
  • そのキャラの全表情差分の画像 ・(Twitterに全表情差分抽出マンがいるので拝借すること。無ければお願いする。ただしこれらの画像は解像度が低い上に変な色のノイズもあるため、ノイズ除去&拡大したものを混ぜて同時に学習させると良い。透過画像は学習にあまり良くないので、白背景やランダム背景を付けること。GPT4にランダムな非透過単色背景や白背景を付けるプログラムを作らせると楽)
  • Live2Dで動いたそのキャラのスクショ ・(水着イベントのキャラでなくとも、イベントPVや周年おせにゃん等で見られることがある。エフェクト等があっても、そのキャラが見えない程でなければ気にせず素材にしてよい)
  • イベント特設サイトで配布されている画像
  • イベント特設サイト自体に貼り付けられている画像
  • PVやおせにゃんに出てくる、立ち絵やイベント絵等が映るシーン全てのスクショ ・(基本的にゲーム内の画像より画質が良い)
  • イベントの末期に公式Twitterが投稿することがある、イベントありがとうございますのイラスト
  • SDの様々な方向からのスクショ ・(これらには全てchibi, とタグ付けして学習させれば、等頭身絵を作る際に悪影響をあまり出さず、多方向からの見た目を学ばせることができる。そうは言っても、この画像の割合を増やしすぎないように。SDがAuto Taggerでchibiとタグ付けされていない場合もあるので、Tagger後に手作業で確認するか、GPT4に確認&タグ付けプログラムを頼むこと)
  • そのキャラのグッズの写真 ・(立ち絵や覚醒絵がそのまま使われたグッズを含めるのも、ノイズの多様性になる為、過学習の防止には有効だが、キャンバスアートやグラフアートのような描き下ろしも用いると尚良し)
  • アートブックに載っているそのキャラのイラスト全ての写真 ・(印刷されたイラストはどんなデジタルデータよりも解像度が高く、コロプラ社員でない我々が見られる最高品質のイラストである。ただし絵全体をカメラで撮ることは光や影の関係で難しく、学習させるときには大きくても1000×1000程度まで縮小しなければならないため利点が少ない。 寧ろ顔、顔~胸、顔~腰、模様、特徴的な飾り、胸や尻といった人やキャラによって重要なパーツ、等を拡大してを撮ることで、ゲーム内では見られない程高精度な画像を得られる。カメラの拡大率を上げることで、手とを紙から遠ざけることができ、影の映り込みを防げる。もし裁断しスキャナーにかけるならば寄り良い結果を得られるはず。印刷ノイズがあるとtraditional mediaタグがtaggerにより付けられるので、生成時はネガに入れる)
  • アートブックや資料集に載る、キャラのラフの写真 ・(sketch、flat color等のタグが勝手に着く為、数点のラフを混ぜただけでは生成への悪影響が無い)
  • 上記全てについて、彩度を0にした絵や、左右に1°~30°程度回転させたり、切り抜いたりした画像 ・(これらの作業は、沢山作らなればいけないということも無いので、立ち絵や覚醒絵のみについて行うのが作業量として現実的だろう。前者は、monochrome, grayscaleとタグ付けされるので、もし生成時に問題があったらこれらをネガに入れる。また回転や切り抜きは、写真を撮る時に適当に手を動かしながら沢山撮るだけで良い)
  • ひこうじま公園でそのキャラが登場する全コマの写真 ・(吹き出し内のセリフは塗りつぶしてもいいし、特に何もしなくても、ここまでで既に他の素材が多いので大丈夫。デフォルメされているコマについては、chibiと手動でタグ付けする)

コメント欄

最新の10件を表示しています。 コメントページを参照

  • セツトワの画像見たとき出来が良すぎて驚いた -- 2023-07-02 (日) 20:46:05
  • 素材20枚でこのクオリティはすごい LoRA作成時のパラメータなど差し支えなければぜひ -- 2023-08-05 (土) 21:39:59
  • トワセツLoCon?は教師画像を最終的に(トリミングなどの嵩増しを含めて)3000枚用意しました。20枚ではここまでできません。ですが20枚程度でも出来る人はPixivにいるみたいです。 -- 2023-08-07 (月) 16:45:59
お名前: