]> git.djapps.eu Git - pkg/ggml/sources/whisper.cpp/commit
ggml : remove assert for AArch64 GEMV and GEMM Q4 kernels (llama/9217)
authorCharles Xu <redacted>
Wed, 25 Sep 2024 13:12:20 +0000 (15:12 +0200)
committerGeorgi Gerganov <redacted>
Thu, 3 Oct 2024 09:22:17 +0000 (12:22 +0300)
commit1edea2eb4bdcc9e8c929a2fa089baaac7585da8e
tree3931d42a231e099d89364918eebab5f5440e0099
parent96808786b72f5ca2949f0b138a15297a326b0b02
ggml : remove assert for AArch64 GEMV and GEMM Q4 kernels (llama/9217)

* ggml : remove assert for AArch64 GEMV and GEMM Q4 kernels

* added fallback mechanism when the offline re-quantized model is not
optimized for the underlying target.

* fix for build errors

* remove prints from the low-level code

* Rebase to the latest upstream
ggml/src/ggml-aarch64.c