]> git.djapps.eu Git - pkg/ggml/sources/ggml/commit
HIP: add mmf for CDNA (llama/18896)
authoryulo <redacted>
Thu, 29 Jan 2026 10:10:53 +0000 (18:10 +0800)
committerGeorgi Gerganov <redacted>
Fri, 30 Jan 2026 11:49:29 +0000 (13:49 +0200)
commit54f765940c8867c234f37f17567e1b2bb082cdcc
tree3ab075491ed396e1727354366d9a50e99f5bea34
parent167552e539403771edb0fc425a04a659a1792a09
HIP: add mmf for CDNA (llama/18896)

* refactor mmf rows_per_block

* speed up compile

* pass cdna compile

* fix cuda error

* clean up mmf

* f32 mmf

* clean float mma

* fix mmf error

* faster mmf

* extend tile k

* fix compile error

* Revert "extend tile k"

This reverts commit 4d2ef3d483932659801a59a5af0b6b48f6ffd5c7.

* fix smem overflow

* speed up compiling mmf

* speed up compile for hip

* 512 block for cdna

* config pad size

* fix as comment

* update select logic

* move some code to cuh

* fix as comment

* correct cdna3 config

---------

Co-authored-by: zhang hui <redacted>
src/ggml-cuda/mma.cuh
src/ggml-cuda/mmf.cu
src/ggml-cuda/mmf.cuh
src/ggml-hip/CMakeLists.txt