]> git.djapps.eu Git - pkg/ggml/sources/llama.cpp/commitdiff
model-conversion : add note about verifying previous models (#18082)
authorDaniel Bevenius <redacted>
Tue, 16 Dec 2025 10:17:40 +0000 (11:17 +0100)
committerGitHub <redacted>
Tue, 16 Dec 2025 10:17:40 +0000 (11:17 +0100)
This commit adds a note to the README in the model-conversion
examples, advising developers to verify that previous versions of models
pass logits verification before adding new models from the same family.

examples/model-conversion/README.md

index 05d95d588bae7b30f481bc88326a394571678c8f..8163b306b4409111f3c25037601db0d1f1bd10ea 100644 (file)
@@ -10,6 +10,13 @@ and in some cases perplexity checked of the quantized model. And finally the
 model/models need to the ggml-org on Hugging Face. This tool/example tries to
 help with this process.
 
+> 📝 **Note:** When adding a new model from an existing family, verify the
+> previous version passes logits verification first. Existing models can have
+> subtle numerical differences that don't affect generation quality but cause
+> logits mismatches. Identifying these upfront whether they exist in llama.cpp,
+> the conversion script, or in an upstream implementation, can save significant
+> debugging time.
+
 ### Overview
 The idea is that the makefile targets and scripts here can be used in the
 development/conversion process assisting with things like: