]> git.djapps.eu Git - pkg/ggml/sources/llama.cpp/commit
llama : allow getting n_batch from llama_context in c api (#4540)
authorMarcus Dunn <redacted>
Thu, 21 Dec 2023 19:57:48 +0000 (11:57 -0800)
committerGitHub <redacted>
Thu, 21 Dec 2023 19:57:48 +0000 (21:57 +0200)
commit31f27758faf4a4bd08101a57c7ec3a473f771f86
treee968fc19ea2aff2db17646dd410648dbd0e07990
parent56fa50819f7a3ca2128f63b81c17c08a4454479e
llama : allow getting n_batch from llama_context in c api (#4540)

* allowed getting n_batch from llama_context in c api

* changed to use `uint32_t` instead of `int`

* changed to use `uint32_t` instead of `int` in `llama_n_ctx`

* Update llama.h

---------

Co-authored-by: Georgi Gerganov <redacted>
llama.cpp
llama.h