Ähnliche Artikel
common : add --spec-draft-n-ubatch by ggerganov · Pull Request #30459 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/30459
common : add --spec-draft-n-ubatch by ggerganov · Pull Request #30459 · ...
RPC: `-sm tensor` von am17an hinzugefügt · Pull Request #26610 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/26610
RPC: `-sm tensor` von am17an hinzugefügt · Pull Request #26610 · ...
DeepseekV4 MTP + DSpark von am17an · Pull Request #25784 · ggml-org/llama.cpp: LLM-Inferenz in C/C++. Beteiligen Sie sich an der Entwicklung von ggml-org/llama ...
github.com/ggml-org/llama.cpp/pull/25784
DeepseekV4 MTP + DSpark von am17an · Pull Request #25784 · ggml-org/llama ...
llama.cpp/tools/server at master · ggml-org/llama.cpp: LLM-Inferenz in C/C++. Beteiligen Sie sich an der Entwicklung von ggml-org/llama.cpp ...
github.com/ggml-org/llama.cpp/tree/master/tools/server
llama.cpp/tools/server at master · ggml-org/llama.cpp
Server: Anzeige der Generierungsgeschwindigkeit der letzten 5 Sekunden hinzugefügt (von akx) · Pull Request #24291 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/24291
Server: Anzeige der Generierungsgeschwindigkeit der letzten 5 Sekunden ...
[Speculative decoding] feat: add EAGLE3 speculative decoding support by ruixiang63 · Pull Request #18039 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/18039
[Speculative decoding] feat: add EAGLE3 speculative decoding support by ...
mtp: Unterstützung für gemma-4 E2B- und E4B-Assistenten von max-krasnyansky · Pull Request #24282 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/24282
mtp: Unterstützung für gemma-4 E2B- und E4B-Assistenten von ...
Server: Korrektur der Checkpoint-Erstellung durch jacekpoplawski · Pull Request #22929 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/22929
Server: Korrektur der Checkpoint-Erstellung durch jacekpoplawski · Pull ...
llama : Gemma4 MTP von am17an hinzufügen · Pull Request #23398 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/23398
llama : Gemma4 MTP von am17an hinzufügen · Pull Request #23398 · ...
llama: MTP-Bereinigung von ggerganov · Pull Request #23269 · ggml-org/llama.cpp: LLM-Inferenz in C/C++. Beteiligen Sie sich an der Entwicklung von ggml-org/llama ...
github.com/ggml-org/llama.cpp/pull/23269
llama: MTP-Bereinigung von ggerganov · Pull Request #23269 · ...
ggml: Backend-unabhängiger Tensor-Parallelismus (experimentell) von JohannesGaessler · Pull Request #19378 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/19378
ggml: Backend-unabhängiger Tensor-Parallelismus (experimentell) von ...
kv-cache: Unterstützung der Aufmerksamkeitsrotation für heterogene iSWA von ggerganov · Pull Request #21513 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/21513
kv-cache: Unterstützung der Aufmerksamkeitsrotation für heterogene iSWA ...
(revert) kv-cache : SWA-KV-Cache nicht quantisieren von ggerganov · Pull Request #21332 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/21332
(revert) kv-cache : SWA-KV-Cache nicht quantisieren von ggerganov · Pull ...
llama : rotate activations for better quantization by ggerganov · Pull Request #21038 · ggml.org/llama.cpp
github.com/ggml-org/llama.cpp/pull/21038
llama : rotate activations for better quantization by ggerganov · Pull ...
metal: GDN-Kernel von ggerganov hinzugefügt · Pull Request #20361 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/20361
metal: GDN-Kernel von ggerganov hinzugefügt · Pull Request #20361 · ...
Evaluierungsfehler: Erzwingen der vollständigen Neuverarbeitung der Eingabeaufforderung in Qwen3-Coder-Next · Problem Nr. 19394 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/issues/19394
Evaluierungsfehler: Erzwingen der vollständigen Neuverarbeitung der ...
Hybridmodell-Cache: `--checkpoint-every-nb` hinzugefügt von pwilkin · Pull Request #20087 · ggml.org/llama.cpp
github.com/ggml-org/llama.cpp/pull/20087
Hybridmodell-Cache: `--checkpoint-every-nb` hinzugefügt von pwilkin · Pull ...
Fehler mit dem Prompt-Cache, Stoppen, Thread-Wechsel · Problem #19760 · ggml.org/llama.cpp
github.com/ggml-org/llama.cpp/issues/19760
Fehler mit dem Prompt-Cache, Stoppen, Thread-Wechsel · Problem #19760 · ...
Modelle: Optimierung des qwen3next-Graphen durch ggerganov · Pull Request #19375 · ggml-org/llama.cpp
github.com/ggml-org/llama.cpp/pull/19375
Modelle: Optimierung des qwen3next-Graphen durch ggerganov · Pull Request ...