Öffentliche GPU- und NPU-Uploads
Apple M3 10-core GPU
Typ
GPU
VRAM
8 GB
Memory Bandwidth
100 GB/s
TDP
15 W
Benchmark-Ergebnisse
|
llama-7b-v2
7B
|
Q4_0 | 512 | 186.75 | 2,742.00 ms | 21 | llama.cpp | Metal | — | vor 4 Wochen hochgeladen |
|
|
Verwendeter Prompt
./llama-bench -p 512 -n 128 -ngl 99
Notizen
Apple-Silicon-Sammelthread; weitgehend einheitlich, aber nicht streng homogen
Nachweis
|
||||||||||