]> git.djapps.eu Git - pkg/ggml/sources/whisper.cpp/commitdiff
HIP: enable mul_mat_f for RDNA4 (llama/17437)
authoryulo <redacted>
Fri, 28 Nov 2025 07:24:30 +0000 (15:24 +0800)
committerGeorgi Gerganov <redacted>
Fri, 12 Dec 2025 15:53:11 +0000 (17:53 +0200)
* enable mmf for rdna4

* move some mmvf to mmf

* revert lds128 for wmma loading

* Revert "revert lds128 for wmma loading"

This reverts commit db9ae8b6b4738a5def5b393caa1611d52133e9b5.

* Revert "enable mmf for rdna4"

This reverts commit 698c9f24187b990e35c3b73a8067e5387e6ddbd4.

* Revert "move some mmvf to mmf"

This reverts commit 99b92bd6653cc8593607f641e44606391691792f.

* enable mul_mat for rdna4

---------

Co-authored-by: zhang hui <redacted>
ggml/src/ggml-cuda/mmf.cu

index 5c51a22256a4853665e4bc6f87eaac5414fc0d45..be2ad1c6b65f995d96448d4ca94c34481ca02665 100644 (file)
@@ -151,7 +151,7 @@ bool ggml_cuda_should_use_mmf(enum ggml_type type, int cc, int warp_size, const
             return false;
         }
     } else {
-        if (src1_ncols > 16 || GGML_CUDA_CC_IS_RDNA4(cc)) {
+        if (src1_ncols > 16) {
             return false;
         }
     }