]> git.djapps.eu Git - pkg/ggml/sources/llama.cpp/commit
metal : refactor kernel loading code (#4794)
authorGeorgi Gerganov <redacted>
Sat, 13 Jan 2024 16:03:45 +0000 (18:03 +0200)
committerGitHub <redacted>
Sat, 13 Jan 2024 16:03:45 +0000 (18:03 +0200)
commitb38b5e93ae31019e87f692b69d27124eae6aac02
treea256b52ee2f7f79181142299a59cdbcec4a6f62a
parent7dc78764e2ff86512e6e31cb0fcb8087df4b4708
metal : refactor kernel loading code (#4794)

* metal : detect more GPU families

* metal : refactor kernel loading

* metal : set kernel family requirements

* metal : fix kernel init + fix compile options

* metal : take into account simdgroup reduction support

* metal : print only skipped kernels

* metal : fix check for simdgroup reduction support

* metal : check for Metal 3

* metal : free allocations

* metal : normalize encoder:setComputePipelineStatus calls

ggml-ci

* metal : fix Metal3 family check

ggml-ci

* metal : check for simdgroup matrix mul. feature

ggml-ci
ggml-metal.m