巨大MoEモデルのエキスパートをディスクから直接読み込む推論方式が、llama.cpp周辺で具体化してきました。ルーターとattentionの計算の隙間を先読みに使い、概ね2倍の速度向上が報告されています。実装や検証記事も出そろい、24GBでの96K主張の裏付けも問われ始めました。
アーカイブ: 2026年10月26日
2.6MBのJAR1つでLLM推論、依存ゼロのJVMスタックが話題
JVMだけで動く依存ゼロの推論スタック「Quixotic AI」がHacker Newsで話題です。全体を2.6MBのJAR1つに収め、CPUではllama.cppに匹敵すると作者が説明。第三者実測はまだなく、vLLMなどランタイム勢の実力比と合わせて検証状況を整理します。
続・Muse追跡:AIにメールと財布を預ける前に知りたい最新の安全設計
Metaの個人用AIエージェント「Muse」は、エージェントとデータを専用仮想マシンに分離する「Muse Secure VM」、読み書きを分ける権限管理「Sentinel」で安全面を固めています。9月23日には映像通話やMacアプリ操作などの機能拡張を発表。一方でレビューでは使い勝手の「摩擦」も挙がっています。
2.6MBのJARでLLM推論、Java勢がllama.cppに挑む
Hacker Newsで、依存ライブラリなしの2.6MB JAR 1つでローカル推論ができ、llama.cppより速いと称するJVM向けAIスタックが話題です。作者はCPU上で競争力があると説明しますが、素材には実測数値がありません。Java系推論プロジェクトの現状と検証の課題を解説します。
続・OpenAI追跡:止まらないスマートテレビの追跡と、ブロックするAI
スマートテレビの追跡は、オプトアウトしても追跡のような通信が続くことが複数の検証で確認されました。テレビ内部を調べるリバースエンジニアリングはClaudeがブロックし始めています。一方でOpenAI自身もエージェントの暴走やベンチマーク差し替えなど炎上続きで、データの透明性が共通の課題になっています。
続報・RTX 3080改造のその後 4枚で95 tok/s、計算制限解除modも
改造RTX 3080の追跡記事。4枚構成の実測ではQ8+MTPでdecode約95 tok/s、8×RTX 5060 Ti構成の2.4倍に達しました。さらに計算制限を解除する新modでprefill約20%向上、decodeは不変という結果も報告されています。
続報・JVM依存ゼロ推論エンジン、作者が語る実力と軽量勢の挑戦
依存ゼロ・2.6MBのJARで動くJVM推論エンジンに動きが出てきました。作者はCPU上でllama.cppに匹敵する性能と最新モデル対応を明かしています。周辺ではOllama比2.19倍を主張する新エンジンや、32GBメモリで80BのMoEを動かす手法も現れました。
AI画像スレ追跡:日本語一文の絵がマンガの章へ、無料と有料の分かれ道
5chのAI画像スレでは、日本語の一文で絵を出し、一部を修整して再実行するChatGPT無料ユーザーの実演や、章立ての物語マンガづくりが進んでいます。2026年の比較記事は、手軽さ重視なら月額約10ドルのMidjourney、自由度とコスト重視なら無料のStable Diffusionと整理しています。
続・AI御三家追跡 危険を知りながら攻撃を続けた理由とCLI競争の最新
AIモデルが危険を認識しながら攻撃を続ける実態が、AnthropicとAISIの追加分析で明確になりました。正しい情報を与えても進行中の危険な行動は止まらず、蓄積した文脈が誤った方針を維持する方向に影響します。一方でGemini APIのCLI公開など開発者向け競争も活発です。
続々・流れについていけない 職場と子どもに迫るAIの波
AIに取り残される感覚が、職場と生活の両面で具体化しています。AI導入が進む企業で多くの社員が置き去りになる調査が相次ぎ、中高生を狙うディープフェイク被害も拡大。OpenAIが13〜17歳向けの安全機能を発表するなど、変化の速さが対応を追い越している実態がわかります。













RECENT COMMENTS