llama.cppのMoEでは、専門家を実行メモリからCPUへ逃がす仕組みが注目されています。LLaMA-MoEは動くパラメータを3.0〜3.5Bに抑え、専用フレームワークも試せる段階です。ただし実測値は乏しく、オフロード設定の重要性が際立ちます。
カテゴリー: AI
🔁 追跡:PS5LMの限界とhackerの夢、ローカルAIのその後
脱獄したPS5でAIモデルを動かす試み「PS5LM」が再び注目を集めています。小型モデルの推論やAPI対応が進む一方、メモリ制限と導入の壁が課題です。実用性やコストを巡る議論も続いています。
メールHTMLをAI前に無害化するInBoxWall
AIエージェントにメールを渡す前に、メールHTMLを無害化するローカルツールInBoxWallが公開されました。隠し文字やCSSで仕込まれた指示の埋め込みを防ぎ、安全境界をLLMの外に置く設計です。類似のローカルメールAIも注目されています。
🔁 続MeetCap:ローカル録音とAI要約の橋渡し
会議音声を手元で録り、文字起こしからAI要約、Obsidianのノートまで行うツールMeetCapがHacker Newsに投稿されました。要約は根拠づけとQAで補強するのが特徴です。実測速度の数値はまだありません。
🔁 最新:Claude CodeはPiで環境分離の先へ
Pi-cowboyがCodexやClaude Code、OpenCodeをサブエージェントとして使う試みがHacker Newsに投稿されました。公式ドキュメントは文脈節約を説明し、Pi側は並列4と可視化で対応します。環境分離のPlugin化も議論されています。
🔁 続:llama.cppがCohere2MoEをローカル推論へ
llama.cppがCohereの次世代MoE構造「Cohere2MoE」に対応しました。b9626とb9637の2段階で進み、North Mini Code 30Bのローカル推論に近づいています。実測速度の報告はまだありません。
🔁 続報:llama.cppがCohere対応を深めた最新状況
Cohereがllama.cpp対応を進め、視覚エンコーダとcohere2-MoEが扱えるようになりました。North Mini Codeは総30B・実際に動くのは3B、コンテキスト256Kです。注目は対応の広がりから、環境ごとの実測値へ移っています。
🔁 最新:ローカルLLMは貴族の遊びか 損益とVRAMで追跡
ローカルLLMを「貴族の遊び」と見る見方は、半分だけ当たっています。オープンウェイトモデルはAPI級の性能に迫りましたが、16GB VRAMの壁やライセンス、総コストの課題は残ります。性能・権利・構成の最新動向から、現実的な線引きを整理します。
🔁 追跡:AI漫画スレはプロンプト共有と評価の場へ
AI漫画スレでは、プロンプトや設定ファイルの共有が本格化し、1ページ6〜10コマ指定が守られないことが報告されています。評価の軸は生成力から再現性へ移り、エージェント名の開示要望や拒否報告など、実務的な課題が見えています。
AIエージェントの長丁場を測るTerminal Bench v4
Terminal-Bench 4.0は66タスクで、Claude Opus 5.5が64.85%と首位です。RedditではKimi K3の成績差が問われ、評価の読み方が注目されています。タスク設計と順位表の注意点を整理します。













RECENT COMMENTS