Apple、オープンソースの画像生成AI「Matryoshka」公開。トレーニング可能なフレームワークもGitHubで提供

最終更新日:2024/08/23

Apple 画像生成AI Matryoshka公開

Appleは、高解像度の画像生成に最適化したAIモデル「Matryoshka Diffusion Models」を公開しました。さらに、GitHubで提供されるモデルのトレーニング用Pythonパッケージ「ml-mdm」も公開しています。

このAIニュースのポイント

Apple、画像生成AI「Matryoshka Diffusion Models」を発表
モデルをトレーニングするためのPythonパッケージ「ml-mdm」をGitHubで公開
MDMは異なる解像度のモデルをマトリョーシカのように並行して生成し、高解像度の最適化を実現

Appleは8月9日、画像生成AIモデル「Matryoshka Diffusion Models」（MDM）および、モデルをトレーニングするためのPythonパッケージ「ml-mdm」を発表しました。高解像度の画像や動画を生成するためのエンドツーエンドのフレームワークとして、GitHubで公開されています。

従来の画像生成の方法では、低解像度モデルと複数のアップスケーリングモジュールを組み合わせた段階的なモデルを使用しており、高次元空間での拡散モデルの学習は計算上あるいは最適化をする上での課題を抱えていました。

これに対しMDMは、異なる解像度のモデルをマトリョーシカ構造のように並行して生成し、その情報を相互に共有します。これにより低解像度から高解像度へと学習アーキテクチャが段階的に成長し、高解像度生成の最適化が大幅に改善されます。

MDMの有効性は、ImageNetなどの標準的なデータセットだけでなく、高解像度のテキストから画像やビデオに生成できるアプリケーションなど、さまざまなベンチマークで検証されました。

その成果の一つとして、最大1024×1024ピクセルの解像度で単一のピクセル空間モデルをトレーニングさせることができ、1,200万組の画像・テキストからなるCC12Mデータセットを用いて、ゼロショット（事前学習データから、未知の概念やスタイルを生成すること）の一般化を実証しています。

MDMは画像生成における計算負荷を減らし、従来の方法よりも効率的でスケーラブルなソリューションを提供します。高品質な画像や動画を生成するための堅牢なフレームワークとして、この分野での将来の発展に大きな可能性を秘めています。

出典：Apple Machine Learning Research

AIsmiley編集部

株式会社アイスマイリーが運営するAIポータルメディア「AIsmiley」は、AIの専門家によるコンテンツ配信とプロダクト紹介を行うWebメディアです。AI資格を保有した編集部がDX推進の事例や人工知能ソリューションの活用方法、ニュース、トレンド情報を発信しています。

・Facebookでも発信しています
@AIsmiley.inc
・Xもフォローください
@AIsmiley_inc
・Youtubeのチャンネル登録もお願いいたします@aiaismiley1345

メルマガに登録する

AIサービス: 生成AI; 画像生成AI; AI研究開発

DXトレンドマガジンメールマガジン登録

業務の課題解決に繋がる最新DX・情報をお届けいたします。
メールマガジンの配信をご希望の方は、下記フォームよりご登録ください。登録無料です。

お名前 - 姓・名

お名前を入力してください

お名前 - 名

名を入力してください

メールアドレス

メールアドレスを入力してください

シェアする

AI・人工知能記事カテゴリ一覧

AI・人工知能サービス

特集

今注目のカテゴリー

ChatGPT連携サービス

チャットボット

画像認識・画像解析

需要予測

ChatGPT連携サービス

チャットボット

画像認識・画像解析

需要予測

DXトピックス

AIsmileyからご案内

FOLLOW US

SNSをフォローして、最新情報をチェックできます！

DXトレンドマガジンメールマガジン登録

メールマガジンの配信をご希望の方は、下記フォームよりご登録ください。登録無料です。

お名前 - 姓・名

お名前を入力してください

お名前 - 名

お名前 - 名を入力してください

メールアドレス

メールアドレスを入力してください

ニュースPVランキング

週間PVランキング

シャープとKDDI、シャープ堺工場跡地にAIデータセンターを構築…

JAPAN AI、自律型AIエージェント「JAPAN AI AG…

盛岡市とNEC、生成AIを活用した業務効率化の実証を開始。自治体…

OpenAI、ChatGPTにファイル管理機能「Projects…

AI活用のご相談したい企業様はこちら

03-6452-4750

AI活用を無料で相談する

AI製品・ソリューションの掲載を
希望される企業様はこちら

詳細はこちら