「LLM推論」の検索結果: ユーザー 0件・記事 8件
リード NVIDIAが2026年5月23日、テキスト生成AIの推論速度を従来比4倍にするとされる新モデル「Nemotron-Labs-Diffusion」を公開したと報じられている。画像生成AI(Stable Diffusionなど)で主流となっていた「拡散モデル(Diffusion Model)」の仕組みをテキスト生成に持ち込んだ点が技術的な分岐点となる。速度向上は単なるスペック競争ではなく、「...
リード NVIDIAが2026年7月7日(現地時間)、次世代GPU「Blackwell Ultra B300」の量産出荷開始をアナウンスした。LLM推論スループットは前世代H200比で最大3倍——この数字が意味するのは、クラウド事業者のコスト構造が再び大きく書き換わるという事実だ。 何が起きているのか NVIDIA公式ブログおよびInvestor Day資料によると、B300はHBM3e 192G...
リード ClaudeとGeminiに搭載された「拡張思考(Extended Thinking)」——モデルが回答を出す前に内部で思考プロセスを自律展開する機能が、2026年5月時点で開発現場の実務ツールとして本格定着しつつある。コストは最大4倍。それでも払うだけの価値があるタスクが、現場のデータから見えてきた。 何が起きているのか Anthropicが2026年4月に公開した利用統計によると、Cl...
"計算が全部狂った"——コスト急落が現場を揺らしている これ、地味だけど効くやつだと思って追いかけていたら、想定より早く臨界点を超えた。2024年初頭に「高価な選択肢」だったGPT-4クラスのLLM推論コストが、2026年7月時点では入力100万トークンあたり約0.10〜0.15ドル前後まで下がっている。2年前の単価(約30ドル)と比べると、ざっくり200分の1だ。「ユーザーあたりのAIコスト試算...
リード 「1年前の10分の1で動く」──2026年夏、LLM推論APIの価格破壊が静かに、しかし確実に加速している。OpenAI、Anthropic、Googleが2026年上半期だけで複数回の値下げを実施。入力トークン単価が軒並み0.1ドル/Mトークンを割り込む水準に達し、「コストが高くて本番に載せられない」という声が変わり始めた。 何が起きているのか 2026年6月末時点で、主要プロバイダの代...
リード 「ローカルで動かすより API のほうが速い」という常識が、2026 年夏を境に揺らいでいる。llama.cpp の最新ビルドと Ollama v0.4 系の組み合わせで、手元の民生 GPU でも毎秒 60 トークン超えが普通に出るようになってきた。これ、地味だけど効くやつだと思っている。 何が起きているのか 今月に入ってから X(旧 Twitter)では「ローカル推論が速くなった」という...
リード LLM APIの価格破壊が静かに、しかし確実に進んでいる。2025年初頭と比較すると、主要プロバイダーの標準モデルで入力トークン単価が最大90%以上低下した。「コストが課題でPoC止まり」だったプロジェクトが再浮上し始めており、開発現場の空気が変わってきた。 何が起きているのか 2026年5月末時点で、OpenAI・Anthropic・Googleの主要モデルにおける価格動向を比較すると、...
リード 「GPT-4クラスが月1万円以内で使い放題になる日が来た」——そんな投稿が今日のXで拡散された。2025年末比でLLM主力モデルのAPI単価が最大90%超下落した2026年上半期、数字は確かに劇的だ。ただ触ってみないとわからない部分も多い。背景と実装上の現実を一次データで整理する。 何が起きているのか 2026年6月時点、OpenAI・Anthropic・Googleが相次いでAPIプラン...