Appleが画像生成AIを発表「Matryoshka Diffusion Models」

Appleが2024/8/9に画像生成AI「マトリョーシカ」を発表しました。

Matryoshka Diffusion Modelsの概要

Apple社が発表した「Matryoshka Diffusion Models (MDM)」は、
画層生成のための最新のディフュージョンモデルです。
MDMは、階層的な構造を持ち、複数の異なるレベルの詳細度で画像を生成します。

このアプローチにより、画像生成の精度と柔軟性が向上し、よりリアルで細かなディテールを持つ画像を生成することができます。

特に、生成プロセスをコントロールしやすく、異なる解像度での画像生成が可能である点が特徴です。

Matryoshka Diffusion Modelsの実装方法

簡単に実装方法を紹介します。

Pythonを準備:

/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"
brew install python

GitHubリポジトリのクローン:
Terminalを開き、MDMのリポジトリをクローンします。

git clone https://github.com/apple/ml-mdm.git
cd ml-mdm

必要なPythonライブラリをインストールします。

pip install -r requirements.txt

サンプルスクリプトを使用してモデルを実行し、画像を生成します。

python scripts/sample.py --config configs/sample_config.yaml --output_dir output/