投稿者: n-kase

続・llama.cpp MoE追跡、エキスパートをディスクから流す最新段階

30B級のMoEモデルが、16GBのGPUで動くようになっています。さらに、エキスパート(専門家ネットワーク)を事前にメモリへ載せない方向まで進んできました。ローカル推論の定番llama.cppを巡るMoE最適化は、いま「オフロード(GPUに載らない重みをCPU側へ移す方式)」から「ストリーミング」 […]

続きを読む

続報・Gemini Spark:背景で働き続けるAIの具体像と初期版の制約

航空券の値下がりを、AIが24時間体制で見張って知らせる——そんな使い方が現実に近づいています。Googleは新エージェント「Gemini Spark」を、開発者向けイベント「I/O 2026」で発表しました[1]。仕組みはシンプルです。ユーザーが仕事を頼み、必要なアプリの利用を許可すると、Spar […]

続きを読む

続・OpenClaw追跡:AIが読む説明書をAIが採点した

AIに説明書を読ませ、別のAIに採点させると、何点になるのでしょうか。OpenClawをめぐる最新の動きは、この実験のような試みから始まっています。OpenClawは、自分のコンピュータ上で動くオープンソースのAIエージェント基盤です。前回の記事では、タスク台帳と評価軸で動きが見える側面を追いました […]

続きを読む

0.8Bの軽量OCRモデルOvisOCR3が登場、vLLM推論で実務向けに進化

スキャンした文書を渡すと、文字の内容だけでなく「どこに何が書いてあるか」までJSONで返ってくる。そんな軽量OCRモデルが話題になっています。鍵を握るのは推論エンジンのvLLMです。推論とは、学習済みモデルが答えを生成する処理のこと。vLLMはその処理を高速化するオープンソース基盤です。リクエストを […]

続きを読む

続報:llama.cpp MoE対応、専門家をディスクから“流す”新段階へ

30BクラスのMoEモデルが、16GBのGPUで動きます。そんな工夫が、ローカルAI推論の定番ツール・llama.cppで現実のものになっています。さらに今は、専門家の重みをディスクから“流し込む”方式まで登場しました[2]。VRAM(GPUのメモリ)節約の設定は以前お伝えしましたが、今回はその先の […]

続きを読む

続・エージェント追跡:失敗から立ち直る運用が進む

AIエージェントを一度動かすのは、もう簡単な時代です。難しいのは、失敗したあとにどう立ち直らせるかです。ハッカーニュースでは「gVisorでエージェントをサンドボックス化し、テックリードを演じる」という投稿が話題になりました[2]。gVisorは、プログラムを外部に影響が及ばない隔離環境で動かす技術 […]

続きを読む

その後のHermes追跡、毎日自己更新する設計文書と70超のツール

AIエージェントが、自分の設計図を毎日書き換え続ける——。オープンソースの「Hermes」では、そんな光景が現実になっています。前回の記事では、音声のやり取りでローカルのAIエージェントにつながる様子を追いました。今回はその後の展開として、注目が集まる「中身」に踏み込みます。テーマは内部構造と、自己 […]

続きを読む

続報:GrokBotは“動き続けるPC”だった──料金とモデル進化を追う

「チャットを閉じても、AIは働き続ける」。そんな使い方が、2026年8月11日に現実になりました。xAIがベータ版として公開した「Grok Bot」は、質問に答えるだけの対話型AIではありません。こちらが離席している間も、複数ステップの仕事を最後まで進めてくれます。いわば「常時稼働型」のAIエージェ […]

続きを読む

CALENDAR

2026年11月
日 月 火 水 木 金 土
1234567
891011121314
15161718192021
22232425262728
2930  

ARCHIVES

CATEGORIES