Stability AIとArmが提携: スマホでオンデバイス生成AIオーディオを実現!

Stability AIとArmが提携: スマホでオンデバイス生成AIオーディオを実現!

2025年3月3日、画像生成AIのモデル企業のパイオニア Stability AIは、CPU設計企業 Armとのパートナーシップにより、最先端の生成AIモデルをモバイルデバイスで利用可能にすることを発表しました。
Stability AIは、この提携により、業界をリードするテキスト音声生成モデル「Stable Audio Open」が、Arm CPUを搭載したスマートフォン上で、インターネット接続なしで動作するようにするとのこと。

Stability AIのCEO プレム・アッカラジュによるメッセージ映像です。

 

 

画像

主なポイント:

  • Armとの提携: Stability AIは、世界のスマートフォンの99%に搭載されているArmの技術を活用します。

  • Stable Audio Openのオンデバイス化: Stability AIは、高品質な効果音やオーディオサンプルを、インターネット接続なしで、デバイス上で直接生成可能にします。

  • 高速化: Stability AIとArmは、Arm KleidiAIライブラリとStability AIの技術により、スマートフォンでの生成時間を数分から数秒へと、30倍高速化しました。

  • MWCバルセロナで展示: Stability AIは、2025年3月3日(月)に開催されるMWCバルセロナで、この技術のデモンストレーションを実施します。

https://note.com/aicu/n/nbfabd78acb8e

技術的な進歩:

当初、Arm CPUでのオーディオ生成には240秒かかっていましたが、Stability AIは、モデルの改良とArmのソフトウェアスタック(ExecuTorch経由のKleidiAIのint8 matmulカーネルなど)の活用により、11秒のクリップの生成時間を8秒未満に短縮。Armv9 CPUでは30倍の高速化を実現しました。

画像
画像

今後の展望:

Stability AIは、オーディオだけでなく、画像、動画、3Dなど、あらゆる最先端モデルをエッジデバイスで利用可能にすることを目指していると発表しました。Armとのパートナーシップは、Stability AIにとって、高品質なメディア生成をモバイルデバイス上で直接実現するための重要な一歩であり、ビジュアルメディアの制作方法を変革する可能性を秘めています。

詳細情報: パートナーシップの詳細とデモは、それぞれの企業のウェブページで公開されています

AICUによる解説

今回の発表は、例年この時期にバルセロナで開催される世界最大級のモバイル関連技術展示会「MWC25」での発表にあわせたもので、長い時間をかけて準備されてきた提携と読みます。今までハイスペックのGPUが必要であったStable Diffusionなど生成AIモデルが、スマホ上で動くこと、これはつまりエッジコンピューティング領域への参入を意味します。AppleのApple Silicon、Apple IntelligenceといったAI機能と専用プロセッサの一社独占から、世界で最も使われているArmの参入、そして画像生成AIをはじめとするオープンなマルチモーダルAIのリーディングカンパニーであるStability AIの提携により、エッジAI市場は今後ますます拡大すると予想されています。その意味で、Stability AIによる今回の発表は非常に画期的といえるでしょう。

なお、MWC25ではAndroid XRも発表されています。Apple Visionの対抗となるハイエンドHMDですが、このような用途にもコンピュータビジョンや画像生成AIの技術、ローカルでネット接続なしに動くアシスタントとしてのAIなど一気に応用の幅が広がっていきそうですね。

 
画像

動画の中では Armの KleidiAI ライブラリのXNNPack runtime 統合についても触れています。つまり ONNX(Open Neural Network eXchange)のランタイムと XNNPACK 実行プロバイダーを使用して、AndroidやiOS デバイスと WebAssembly 上の ONNX モデルを高速化します。XNNPACKは、Armベース、WebAssembly、x86 プラットフォーム向けに高度に最適化された浮動小数点ニューラル ネットワーク推論演算子のライブラリなので、業界への影響、つまりNVIDIAのCUDAに依存したが推論モデルの活用が、一気にAndroidやiPhone、GPU非搭載PCといった分野に広がってくる可能性があります。

https://onnxruntime.ai/docs/execution-providers/Xnnpack-ExecutionProvider.html

 

今後のArmとStability AIの活躍に注目です。

https://note.com/aicu/m/m6000f560d1db

 

Originally published at https://note.com on Mar 3, 2025.

 
 

AICU Japan

AICU Inc. AIDX Lab - Koto

Comments

Related posts

Search [note.com/aicu] 2025年2月 好アクセスランキング!アイキューの総合PVも公開