「フロンティアラボ（最先端のAI研究機関）のオープンモデルで、ポーランド語の音声認識と音声合成が動く」。Redditのr/LocalLLaMAには、そんな驚きが投稿されていました。話題はLiquidAI/LFM3-Omni-2B-GGUFです。投稿者は、LiquidAIチームとtdakhranさんが、omniモデル向けにゼロデイ（flashのような速さ）のllama.cppリリースを急いで調整した点を高く評価しています [1]。
LFM3-Omni-2Bは、テキスト・画像・動画・音声を理解し、テキストと音声で答えるオムニモデルです。オムニとは、複数の入力と出力を1つのモデルで扱う意味です。Hugging FaceのGGUF版は、GGUF（ローカル実行向けの圧縮ファイル形式）で、CPUやGPUのローカル推論に向いています [2]。Liquid AIのドキュメントでは、音声認識、画像理解、文章生成、音声合成を別々に置く代わりに、1つのモデルで置き換える狙いが示されています [3]。音声で視覚質問応答、動画と音声の理解、マルチモーダルなツール呼び出しも仕様として挙げられています [3]。
Redditの反応が示すのは、単なる多機能さより、2Bという小ささで音声まで扱える点です。投稿者は、フロンティアラボ由来のオープンモデルとして、ポーランド語のTTSとSTTに対応した最初の例だと述べています [1]。STTは音声認識、TTSは音声合成のことです。ローカルAIでは英語以外の音声対応が薄くなりがちなので、この差は大きいようです。2Bという小さなパッケージは、オンデバイス（端末上で動く）での利用を想定しています [1][2]。
試し方も具体的です。Hugging Faceのページには、音声ファイルから文字起こしする例、画像を説明させる例、テキストから音声を作る例が載っています [2]。音声認識では「Perform ASR in <language>」のような指示をシステムプロンプトに与えます。システムプロンプトは、モデルに役割や指示を伝える設定です。音声合成では言語コードと女性または男性の声を指定できます。音声の再生設定もGGUFに保存されています [2]。量子化の型を選ぶと、画像と音声用のプロジェクタ（別モジュール）も一緒に取得できます [2]。
ただし、使える範囲には注意が必要です。llama.cppでは、LFM3-AudioとLFM3-Omniの対応がpull requestの統合待ちで、当面はそのpull requestからビルドする必要があります [2]。pull requestは開発への反映待ちの変更、ビルドは実行環境を作り直すことです。統合が完了するまでは、試す側がビルドの手間を負う形です。動画入力については、モデル自体は動画を理解する設計ですが、llama.cppではまだ使えません [2][3]。リアルタイム音声会話API（音声で会話する仕組み）は「coming soon」とされています [2]。
もう一つの制約は、このモデルがnon-reasoning、つまり深い推論を前提にしない点です。サーバーでは推論モードを切る設定が示されています [2]。ドキュメントでは、テキストだけ、音声だけ、テキストと音声を混ぜる出力のモードを選べます [3]。動画の音声を使うには、音声トラックをフレームと組み合わせる指定が必要で、省略すると画像だけになるようです [3]。Transformers、llama.cpp、SGLang（別の推論実行環境）などの利用が案内されています [3]。
検索結果を見ると、音声ベンチマーク、PCメモリ要件、モデル選択ガイド、公式ブログ、スペック、量子化ガイドなど、周辺情報も出ています [4][5][6][7][8]。量子化は、重みを圧縮してメモリを節約する仕組みです。ただ、今回の素材には具体的なベンチマーク数値や、他モデルとの速度比較は見つかりませんでした。話題の中心は、数値の勝ち負けより、2Bで音声までローカルに置けるかどうかです。
つまりLFM3-Omni-2B-GGUFは、AIの音声・画像・文章を1つの小さなモデルにまとめる実験として注目されています。この話題は、hacker好みの地道な統合の話です。音声・画像・文章のセットを1つにまとめる流れは、ローカルAIの次の入口になりそうです。llama.cppの統合が進み、動画入力やリアルタイムAPIが使えるようになれば、ローカル推論の選択肢はさらに広がりそうです [2][3]。
引用ソース
- Reddit Reddit r/LocalLLaMA: LiquidAI/LFM3-Omni-2B-GGUF — https://www.reddit.com/r/LocalLLaMA/comments/1xh1rwn/liquidailfm3omni2bgguf/
LiquidAI/LFM3-Omni-2B-GGUF
- Web記事 記事全文: LiquidAI/LFM3-Omni-2B-GGUF · Hugging Face — https://huggingface.co/LiquidAI/LFM3-Omni-2B-GGUF
GGUF version of LFM3-Omni-2B for local inference on CPUs and GPUs.
LFM3-Omni-2B is an omni-modal model that understands text, images, video and audio, and answers in text and speech. It is built for on-device use.
Find a - Web記事 記事全文: LFM3-Omni-2B – Liquid Docs — https://docs.liquid.ai/lfm/models/lfm3-omni-2b
← Back to Omni Models LFM3-Omni-2B is Liquid AI’s first omni model: a single end-to-end model that understands text, images, video, and audio, and answers in text, speech, or interleaved text and speech. It is built for
- Web記事 Web検索: Liquid AI LFM3 audio and omni evaluation: Voice Benchmark Results and … — https://benchlm.ai/voice-benchmarks/liquid-lfm3-audio-omni-evaluation
Liquid AI LFM3 audio and omni evaluation: Voice Benchmark Results and …
- Web記事 Web検索: LFM3: PC Memory Requirements, Model Selection Guide, and Local Setup — https://smartscope.blog/en/blog/lfm3-pc-memory-requirements-model-selection-guide-local-2026/
LFM3: PC Memory Requirements, Model Selection Guide, and Local Setup
- Web記事 Web検索: Liquid AI LFM3: Open 2B Models for Text, Vision, Audio – explainx.ai — https://explainx.ai/blog/liquid-ai-lfm3-open-weight-2b-family-text-vision-audio-omni-decision-models-2026
Liquid AI LFM3: Open 2B Models for Text, Vision, Audio – explainx.ai
- Web記事 Web検索: Introducing LFM3: Every Modality for Specialized Intelligence — https://www.liquid.ai/blog/lfm3
Introducing LFM3: Every Modality for Specialized Intelligence
- Web記事 Web検索: LFM3-Omni-2B Context, Specs & Sources (October 2026) — https://benchlm.ai/models/lfm3-omni-2b
LFM3-Omni-2B Context, Specs & Sources (October 2026)
※ 本記事はAIにより、Reddit・Hacker News・5ch・Xトレンドの公開投稿・トレンドを軸に、その話題をWeb検索で深掘りして集めた一次情報(記事全文・HNコメント)を併せて自動生成されました。本文中の[n]は末尾の引用ソース番号です。内容の正確性は保証されません。引用先を必ずご確認ください。
RECENT COMMENTS