StrataにAbliterated版モデルを組み合わせる動きが広がっています。125B級Flashのローカル推論に、拒否挙動を削ったモデルやアラビア語・AMD対応のフォークが加わり、導入と検証の課題も見えてきました。
アーカイブ: 2026年11月8日
None推論レベル、ローカルAIで試す勇気と落とし穴
ローカルAI環境で推論レベルをNoneにすると速いものの、品質への不安は残りました。Redditではagentic tasksでmedium以上を使う声があり、hacker的な設定遊びより評価が大事だと分かりました。ローカルLLMの速度とコストも関係します。





RECENT COMMENTS