Öffentliche GPU- und NPU-Uploads
AMD RX 7600 XT
2048 Stream Processors
Typ
GPU
VRAM
16 GB
Memory Bandwidth
288 GB/s
TDP
190 W
Benchmark-Ergebnisse
|
Llama 2
7B
|
Q4_0 | 512 | 840.85 | 609.00 ms | 53 | llama.cpp | Vulkan | — | vor 4 Wochen hochgeladen |
|
|
Einheitlicher Test
Llama-Bench
Verwendeter Prompt
llama-bench -p 512 -n 128
Notizen
llama-bench / Vulkan scoreboard; Flash Attention deaktiviert
Nachweis
|
||||||||||
|
Llama 2
7B
|
Q4_0 | 512 | 840.85 | 609.00 ms | 53 | llama.cpp | Vulkan | — | vor 4 Wochen hochgeladen |
|
|
Einheitlicher Test
Llama-Bench
Verwendeter Prompt
llama-bench -p 512 -n 128
Notizen
llama-bench / Vulkan scoreboard; Flash Attention deaktiviert; Hinweis: Im selben Thread gibt es auch einen spaeteren zweiten Run mit 1024.38 / 56.11.
Nachweis
|
||||||||||