カテゴリー: AI

量子化と先読みで1GPUのMoE推論を1.5倍にする「Specter」

1枚のGPUで巨大MoEモデルを快適に動かしたい——。ローカルでAIモデルを走らせるコミュニティの共通の願いに、量子化で答えようとする研究が話題になっています。Redditのr/LocalLLaMAに投稿されたのは、推論システム「Specter」を提案する論文です[1]。量子化とは、モデル内部の数値 […]

続きを読む

その後のGemini Agent、数カ月の改修を数週間に圧縮

数カ月かかる大規模なコード改修を、AIが数週間で終わらせた——。GoogleのGeminiをめぐって、そんな実例が報告され、話題となっています。前回の記事では、エージェントの評価を反復しても見えてくる品質の壁を取り上げました。今回はその後の動きとして、実戦の大規模開発で何が起きているのかを追います。 […]

続きを読む

続・llama.cpp MoE追跡、エキスパートをディスクから流す最新段階

30B級のMoEモデルが16GBのGPUで動く——さらに、エキスパートを事前にメモリへ載せない方向まで進んできました。ローカル推論の定番llama.cppを巡るMoE(混合専門家)最適化は、いま「オフロード」から「ストリーミング」へと一歩進もうとしています。Hacker Newsでは、スマホとラップ […]

続きを読む

続報・Gemini Spark:背景で働き続けるAIの具体像と初期版の制約

航空券の値下がりを、AIが24時間体制で見張って知らせてくれる——そんな使い方が現実に近づいています。Googleは新エージェント「Gemini Spark」を、開発者向けイベント「I/O 2026」で発表しました[1]。チャットで質問して終わりではなく、頼んだ仕事を背景で続けてくれる存在です。 仕 […]

続きを読む

続・OpenClaw追跡:AIが読む説明書をAIが採点した

AIに説明書を読ませ、その説明書を別のAIに採点させると、何点になるのでしょうか。OpenClawをめぐる最新の動きは、この実験のような試みから始まっています。OpenClawは自分のコンピュータ上で動くオープンソースのAIエージェント基盤です。前回の記事では、タスク台帳と評価軸で動きが見える側面を […]

続きを読む

0.8Bの軽量OCRモデルOvisOCR3が登場、vLLM推論で実務向けに進化

スキャンした文書を渡すと、文字の内容だけでなく「どこに何が書いてあるか」までJSONで返ってくる。そんな軽量OCRモデルが、推論エンジンvLLMとの組み合わせで話題になっています。vLLMは大規模言語モデルの推論(学習済みモデルが答えを生成する処理)を高速化するオープンソース基盤です。リクエストをま […]

続きを読む

CALENDAR

2026年10月
日 月 火 水 木 金 土
 123
45678910
11121314151617
18192021222324
25262728293031

ARCHIVES

CATEGORIES