Aporte comunitario

Registro de rendimiento · Dense

LLaMA V2 7B

Q4_0 en Apple M1 con macOS 26.5.2 Tahoe

RENDIMIENTO / TOKENS POR SEGUNDOApple Silicon
Procesamiento128.09tok/s
#299 en el índice
Generación de tokens12.75tok/s
#298 en el índice

Datos de la prueba

Contexto para interpretar los resultados.

CuantizaciónQ4_0Variante enviada
Arquitectura de GPUApple SiliconMotor Metal
Contexto de prueba512tokens de prompt
Familia del modeloDenseSigned ToshLLM app · standard-auto · Metal
Versión de ToshLLMv0.82.3Versión de la app usada para registrar y firmar esta prueba
01

Carga estándar

Procesamiento and generation are reported separately so memory bandwidth and decode behavior stay visible.

02

Configuración incluida

La cuantización, familia de GPU, VRAM y contexto acompañan el resultado; no quedan ocultos tras una puntuación única.

03

Procedencia conservada

Este resultado sigue identificado como aporte comunitario.