MiniMax-H3オムニモーダルモデル、MLX移植版でApple Silicon上で動作
MiniMax
MiniMaxは、テキスト、画像、音声、動画を受け付けて最大15秒の動画クリップと音声を生成するオムニモーダル生成システム「MiniMax-H3」をリリースしました。Pythonパッケージにより、Apple Silicon向けのMLXへの移植が行われており、Simon Willison氏は自らのM5 Max MacBook Proでこれを動作させ、プロンプトから動画を生成できたものの、適切なガイダンスがないと音声は品質が低いと指摘しています。
MiniMaxはMiniMax-H3を公開し、これをテキスト、画像、音声、動画を受け入れ、最大15秒の動画クリップを音声付きで生成できる、汎用のオムニモーダル生成システムと説明しています。PythonパッケージがこのモデルをMLXに移植し、Apple Silicon上で実行できるようにしています。サイモン・ウィリソンは、リポジトリをクローンしてスクリプトを実行することで、彼のM5 Max MacBook Pro上でこれを正常に実行しました。このプロセスには、約115GBのモデルファイルのダウンロードが含まれ、動画生成には45分弱かかりました。結果の動画は印象的でしたが、音声は、ウィリソンが音声のプロンプトガイダンスを提供しなかったため、奇妙な音声のようなノイズと表現されました。彼は、プロンプトガイドには適切な音声生成を実現するための広範な情報が含まれているが、実験前にそれを読んでいなかったと述べています。
出典: Simon Willison —
原文
