ガイド画像とビジョンiPhone1 分で読めます

このページの内容
  1. 必要なもの
  2. ステップ1:Off Grid AIをインストール
  3. ステップ2:画像モデルをダウンロード
  4. ステップ3:画像を生成
  5. 性能
  6. コツ
  7. 関連ガイド

iPhoneでStable Diffusionを動かす方法(デバイス上でAI画像生成)

Off Grid AIは、AppleのCore MLパイプラインとNeural Engine(ANE)による高速化を使い、Stable Diffusionを完全にiPhone上で動かします。GPUサーバーなし。アップロードなし。1枚ごとの料金もなし。

パイプライン:テキストプロンプト → CLIPトークナイザー → テキストエンコーダー → UNet(ノイズ除去、DPM-Solver) → VAEデコーダー → 512×512の画像。すべてデバイス上です。


必要なもの

  • iPhone 12以降(A14 Bionic以降)
  • iOS 17以降
  • 2GB以上の空き容量(パレット化モデルは約1GB、フル精度は約4GB)
  • モデルのダウンロード時に一度だけインターネット

ステップ1:Off Grid AIをインストール

App Storeでダウンロード


ステップ2:画像モデルをダウンロード

Off Grid AIを開き → Models → Imageタブ。使えるCore MLモデルは次のとおりです。

モデル サイズ おすすめの用途
SD 1.5 Palettized ~1GB 最初の一つに最適。対応するすべてのiPhoneで動作
SD 2.1 Palettized ~1GB パレット化1.5より少し高品質
SDXL iOS ~2GB 高解像度(768×768)、4ビット混合パレット化
SD 1.5 Full ~4GB Neural Engineで最速、最高品質。RAM 6GB以上が必要
SD 2.1 Base Full ~4GB 総合的に最高品質。RAM 6GB以上が必要

まずはSD 1.5 Palettizedから:約1GBで、対応するどのiPhoneでも動き、十分きれいな結果が出ます。


ステップ3:画像を生成

  1. Off Grid AIを開き → Image Generation
  2. プロンプトを入力します:a misty forest at dawn, cinematic lighting, photorealistic
  3. Generateをタップします

モデルが一歩ずつノイズを取り除く様子を、リアルタイムのプレビューで確認できます。


性能

iPhone モデル 20ステップの所要時間
iPhone 15 Pro (A17 Pro) SD 1.5 Palettized ~8–12s
iPhone 15 Pro (A17 Pro) SD 1.5 Full ~8–15s
iPhone 14 Pro (A16) SD 1.5 Palettized ~10–16s
iPhone 13 (A15) SD 1.5 Palettized ~14–20s
iPhone 12 (A14) SD 1.5 Palettized ~18–28s

注意: パレット化モデル(約1GB)は6ビット量子化を使っており、逆量子化の処理があるぶん少し遅くなります。フル精度モデル(約4GB)はNeural Engine上で速いものの、iPhone 14 Pro以降が必要です。


コツ

プロンプト強化:Off Grid AIは、読み込み中のテキストモデルで短いプロンプトを自動で広げられます。a fox in a forestと入力すれば、詳しいプロンプトはLLMが書きます。

リアルタイムプレビュー:画像ができあがっていく様子を一歩ずつ見られます。構図が違うと思ったら、最後まで待たずに途中でキャンセルできます。

ステップ数:既定は20です。パレット化モデルは25〜30ステップにすると細部がよくなります。DPM-Solverは古いスケジューラーより早く収束するので、思ったより少ないステップで十分です。


関連ガイド

役に立ちましたか?
開発者からのお知らせ