]> git.djapps.eu Git - pkg/ggml/sources/llama.cpp/commit
ggml : group mul_mat_id rows by matrix (cpu only) (#4480)
authorslaren <redacted>
Fri, 15 Dec 2023 11:45:50 +0000 (12:45 +0100)
committerGitHub <redacted>
Fri, 15 Dec 2023 11:45:50 +0000 (12:45 +0100)
commitee4725a686643669a8587142fa068cbf29de3ce2
tree7f07dd0049f52d721e1940508a9a938c9701e0bb
parent6744dbe924a317e3e2a5a2a4a2037061b2223449
ggml : group mul_mat_id rows by matrix (cpu only) (#4480)

* ggml : group mul_mat_id rows by matrix (cpu only)

* remove mmid parameters from mm forward

* store row groups in wdata and calculate only once in GGML_TASK_INIT

ggml-ci
ggml.c