]> git.djapps.eu Git - pkg/ggml/sources/llama.cpp/commit
ggml-webgpu: parameterize submission size and add iOS specific limits (#21533)
authorReese Levine <redacted>
Tue, 7 Apr 2026 17:30:01 +0000 (10:30 -0700)
committerGitHub <redacted>
Tue, 7 Apr 2026 17:30:01 +0000 (20:30 +0300)
commit957d717ce54401a28591c265d19c53ba620f4c46
treebc869050b3bd706de0ea1e2b182bb10edd2aa678
parentde1aa6fa73e135839109e09fec1a0997f4207b2a
ggml-webgpu: parameterize submission size and add iOS specific limits (#21533)

* Work towards removing bitcast

* Move rest of existing types over

* Add timeout back to wait and remove synchronous set_tensor/memset_tensor

* move to unpackf16 for wider compatibility

* cleanup

* Remove deadlock condition in free_bufs

* Start work on removing parameter buffer pools

* Simplify and optimize further

* simplify profile futures

* Fix stride

* Try using a single command buffer per batch

* formatting

* Add parameters for different browsers in-flight submissions

* Update handling of batch size too

* Throttle ios as much as possible

* Increase timeout for llvm-pipe testing
ggml/src/ggml-webgpu/ggml-webgpu.cpp