GitSeonjeap
日本語

ログイン

閲覧にログインは不要です。コミュニティで投稿・コメント、おすすめ・通報をするにはログインしてください。

ログインすると、下記の案内に同意したものとみなします。 ご利用案内 · プライバシーのご案内

ログインせずに閲覧する

← ニュース

ローカルAI

llama.cpp b12322 プレリリース、グラフメモリ・SYCL・CUDA の修正を含む

掲載 基準日

11月12日 18:59 UTC に b12322 プレリリースが公開され、同日 b12308 から b12322 まで連続ビルドが上がりました。含まれる変更はリリースページに並んでいる修正項目です。

何があったか

  • ggml-org/llama.cpp GitHub リリースページ基準\n- b12322 プレリリースが11月12日 18:59 UTC に公開されました。\n- 未使用のグラフメタデータページに触れないようにする修正(#32043)が含まれています。\n- SYCL AOT で 4GB を超える場合を処理するよう修正(#31873)が含まれています。\n- CUDA MoE MMQ stream-k で空のタイルをスキップする変更(#32067)が含まれています。\n- Adreno 向け decomposed FA の追加(#32046)が含まれています。

当チャンネルの見方

Mac や PC で llama.cpp を直接ビルドして使っているユーザーなら、今回のビルド変更一覧を確認しておく価値があります。ただし各 PR の性能数値、ベンチマーク、対応モデル一覧は確認できていないため、実際にどの程度速くなるのかは分かりません。

出典と関連記事

ローカルAIのほかのニュース

  1. Salesforce SOV-Transcribe-1 音声文字起こしモデルの重み公開 (huggingface.co)

    Hugging Face のモデルカードに、Transformers と vLLM の実行方法、DFlash 投機的デコードのドラフト設定が掲載されています。ベンチマークとパラメータ数は公式ページの本文では確認できませんでした。

    ローカルAI| |出典1件 |当チャンネルの見方あり
  2. llama.cpp b12241、Hexagonの FastRPC ハンドル切り捨て問題を修正 (github.com)

    ggml-org/llama.cppのb12241リリースは、Hexagonでcloseの際に64ビットFastRPCハンドルが切り捨てられる問題を修正したマイナーアップデートです。リリースページには新モデル対応やユーザー向け機能の追加は記載されていません。

    ローカルAI| |出典1件 |当チャンネルの見方あり
  3. Ollama v0.40.16 正式リリース、Apple silicon のメモリ削減を明記 (github.com)

    Ollamaが v0.40.16 の正式タグを公開した。公式リリースノートには、Apple silicon で Qwen3.8 Flash Next のメモリ使用量が減ったという内容と、Windows on ARM 向け CUDA 13.5 サポートが含まれている。

    ローカルAI| |出典1件 |当チャンネルの見方あり

ニュース一覧