Aporte comunitario

Registro de rendimiento · Dense

Meta Llama 3.1 8B

Q4_K_M en AMD Radeon PRO W6800X Duo ×2 con macOS 26.5 Tahoe

RENDIMIENTO / TOKENS POR SEGUNDORDNA 2
Procesamiento612.88tok/s
#122 en el índice
Generación de tokens67tok/s
#69 en el índice

Datos de la prueba

Contexto para interpretar los resultados.

CuantizaciónQ4_K_MVariante enviada
Arquitectura de GPURDNA 2Motor Metal
Contexto de prueba512tokens de prompt
Familia del modeloDenseSigned ToshLLM app · amd-gpu · Metal
Versión de ToshLLMv0.82.3Versión de la app usada para registrar y firmar esta prueba
01

Carga estándar

Procesamiento and generation are reported separately so memory bandwidth and decode behavior stay visible.

02

Configuración incluida

La cuantización, familia de GPU, VRAM y contexto acompañan el resultado; no quedan ocultos tras una puntuación única.

03

Procedencia conservada

Este resultado sigue identificado como aporte comunitario.