- AI・人工知能のAIsmiley TOP
- ニュース
- Sakana AI、浮世絵風画像生成モデル「Evo-Ukiyoe」と浮世絵カラー化モデル「Evo-Nishikie」公開
Sakana AI、浮世絵風画像生成モデル「Evo-Ukiyoe」と浮世絵カラー化モデル「Evo-Nishikie」公開
最終更新日:2024/07/31
Sakana AIは、日本語から浮世絵風画像を生成する「Evo-Ukiyoe」と単色浮世絵を多色化する「Evo-Nishikie」を公開しました。研究や教育を目的とし、日本文化の魅力を世界に広めます。
このAIニュースのポイント
- Sakana AI、浮世絵風画像生成AI「Evo-Ukiyoe」と浮世絵カラー化AI「Evo-Nishikie」を公開
- 日本語対応画像生成モデル「Evo-SDXL-JP」を基盤とし、立命館大学ARCの浮世絵デジタル画像24,038枚を使用した大規模学習によって構築
- 日本の伝統文化の魅力を世界に広め、教育などへの活用や古典籍の新しい楽しみ方を生むAIになることが期待
Sakana AIは、日本の美を学んだAIモデル「Evo-Ukiyoe」と「Evo-Nishikie」を公開しました。「Evo-Ukiyoe」は、日本語のプロンプトを入力すると浮世絵風の画像を生成し、「Evo-Nishikie」は単色の浮世絵をカラー化します。
この2つのモデルは、Sakana AIが進化的モデルマージによって構築した日本語対応画像生成モデル「Evo-SDXL-JP」を基盤とし、立命館大学アート・リサーチセンター(ARC)所蔵の浮世絵作品のデジタル画像24,038枚を使用した大規模な学習によって構築されています。
「Evo-Ukiyoe」は桜、富士山、着物、鳥など、浮世絵でよく取り上げられる要素をプロンプトに含めると、実物の浮世絵に近い品質で画像を生成できます。江戸時代に存在しないもの(パソコンやハンバーガーなど)の生成も可能ですが、学習データセットに存在しないものを浮世絵風に生成することは難しく、全体として浮世絵らしくない画像が生成されることがあります。
「Evo-Ukiyoe」はText-to-Imageモデルで、画像データとキャプションのペアを学習データセットとします。浮世絵画像のキャプション生成には、大規模マルチモーダルモデルを使用し、Few-shot promptingが用いられました。
さらに、性別を間違えるなどの問題点は人手で修正され、プロンプト長を短くすることで、明確な特徴のみを残しつつ複雑な専門用語を削除するなどの調整が行われました。
一方で「Evo-Nishikie」は、墨一色の浮世絵(墨摺絵)を入力すると、多色摺の浮世絵(錦絵)風にカラー化することができます。これにより、古典籍の挿絵を現代の絵本のように楽しむことが可能になります。
「Evo-Nishikie」はImage-to-Imageモデルであり、プロンプトと条件画像のペアを学習データセットとします。学習プロンプトには「この画像をカラーにしてください」といった簡潔な固定プロンプトを全画像に適用することで、タスクを容易にし精度を向上しています。
条件画像には、元の画像の情報を保持しつつクリエイティブに生成する「Lineart」が使用されています。浮世絵画像の虫食いやシミなどのノイズ処理としてControlNet-AuxライブラリーのLineartDetectorとOpenCVを用い、2値化で元画像の濃淡情報を除去するという手順が用いられます。
立命館大学アート・リサーチセンターのセンター長である赤間亮氏は、「現代のアーティストや愛好者にとって、Evo-Ukiyoeは浮世絵への興味を深め、創作意欲を刺激します」とコメントし、日本の古典文化の再生と新たな活用の可能性が大きく広めるAIになることに期待を寄せています。
出典:sakana.ai
株式会社アイスマイリーが運営するAIポータルメディア「AIsmiley」は、AIの専門家によるコンテンツ配信とプロダクト紹介を行うWebメディアです。AI資格を保有した編集部がDX推進の事例や人工知能ソリューションの活用方法、ニュース、トレンド情報を発信しています。
・Facebookでも発信しています
@AIsmiley.inc
・Xもフォローください
@AIsmiley_inc
・Youtubeのチャンネル登録もお願いいたします@aiaismiley1345
業務の課題解決に繋がる最新DX・情報をお届けいたします。
メールマガジンの配信をご希望の方は、下記フォームよりご登録ください。登録無料です。
生成AIを資料請求
全て無料!
選択中の資料を請求する
AI・人工知能記事カテゴリ一覧
AI・人工知能サービス
- 生成AI
- 画像生成AI
- ChatGPT
- AI研究開発
- LLM
- DX推進
- おすすめAI企業
- チャットボット
- ボイスボット
- 音声認識・翻訳・通訳
- 画像認識・画像解析
- 顔認証
- AI-OCR
- 外観検査
- 異常検知・予知保全
- 自然言語処理-NLP-
- 検索システム
- 感情認識・感情解析
- AIモデル作成
- 需要予測・ダイナミックプライシング
- AI人材育成・教育
- アノテーション
- AI学習データ作成
- エッジAI
- IoT
- JDLA
- G検定
- E資格
- PoC検証
- RPAツール
- Salesforce Einstein
- Watson(ワトソン)
- Web接客ツール
- サプライチェーン
- メタバース
- AR・VR・デジタルツイン
- MI
- スマートファクトリー
- データ活用・分析
- 機械学習
- ディープラーニング
- 強化学習
- テレワーク・リモートワーク
- マーケテイングオートメーション・MAツール
- マッチング
- レコメンド
- ロボット
- 予測
- 広告・クリエイティブ
- 営業支援・インサイドセールス
- 省人化
- 議事録自動作成
- 配送ルート最適化
- 非接触AI
業態業種別AI導入活用事例
今注目のカテゴリー
生成AIを
資料請求
全て無料!
選択中の資料を請求する
メールマガジンの配信をご希望の方は、下記フォームよりご登録ください。登録無料です。
ニュースPVランキング
生成AI導入の課題はリテラシー不足。日本のAI活用率は世界最下位…
SUPERNOVAが生成AIサービス「Stella AI」を提供…
ホリエモンAI学校、AI運用の全てを代行する「ホリエモンAI丸投…
GovTech東京のアドバイザーに安野 貴博氏が就任。東京都のD…
関連記事
AIいちご自動収穫ロボット「ロボつみ」を用いて、都市型農業の半自動化を目指した実証実験を開始
博報堂テクノロジーズ、独自の自動アノテーションシステムを開発。工数を1/80に削減
大阪府豊中市、生成AIを活用した子育て相談チャットボットの実証実験を開始
PR TIMES、2024年急上昇キーワードTOP20を公開。「生成AI」が1位にランクイン
羽田空港でAIを活用した訪日観光客向け観光案内サービスの実証実験を開始。スタッフの業務負荷軽減に期待
Yahoo!ショッピング、生成AIがレビュー内容を軸に類似商品をレコメンドする機能を提供
AI製品・ソリューションの掲載を
希望される企業様はこちら