]> git.djapps.eu Git - pkg/ggml/sources/ggml/commit
metal : refactor kernel loading code (llama/4794)
authorGeorgi Gerganov <redacted>
Sat, 13 Jan 2024 16:03:45 +0000 (18:03 +0200)
committerGeorgi Gerganov <redacted>
Sat, 13 Jan 2024 22:06:46 +0000 (00:06 +0200)
commit4a5e71ecf6b109f8de2cdd4686e91525393859aa
treeaa7ad2daf5650ad759aa21d692dc617f45e079e3
parentbcdb75e39621690aa50da42343aee27e6624c994
metal : refactor kernel loading code (llama/4794)

* metal : detect more GPU families

* metal : refactor kernel loading

* metal : set kernel family requirements

* metal : fix kernel init + fix compile options

* metal : take into account simdgroup reduction support

* metal : print only skipped kernels

* metal : fix check for simdgroup reduction support

* metal : check for Metal 3

* metal : free allocations

* metal : normalize encoder:setComputePipelineStatus calls

ggml-ci

* metal : fix Metal3 family check

ggml-ci

* metal : check for simdgroup matrix mul. feature

ggml-ci
src/ggml-metal.m