]> git.djapps.eu Git - pkg/ggml/sources/whisper.cpp/commit
SYCL : SOFTMAX F16 mask support and other fixes (llama/11261)
authorAkarshan Biswas <redacted>
Tue, 28 Jan 2025 09:56:58 +0000 (15:26 +0530)
committerGeorgi Gerganov <redacted>
Mon, 3 Feb 2025 20:00:57 +0000 (22:00 +0200)
commit22e3df0afacf76ad98cd382cbe88055367b06dd5
treed3d8227070a5049a6c24852ff2db817ddb3cc773
parent028511d349d4394fe12b5490cb733253b00d9371
SYCL : SOFTMAX F16 mask support and other fixes (llama/11261)

Implemented ggml_sycl_op_soft_max() F16 src1(mask) support for which a pragma deprecation warning was added during #5021.
To do this, had to decouple it from ggml_sycl_op_flatten which always considered src1 to be of fp32 type(many OP functions are dependent on it).

* SYCL: SOFTMAX F16 mask support and other fixes

* test-backend-ops: Add F16 mask test cases
ggml/src/ggml-sycl/ggml-sycl.cpp
ggml/src/ggml-sycl/softmax.cpp
ggml/src/ggml-sycl/softmax.hpp