Aporte comunitario

Registro de rendimiento · MoE

Nomic Embed Text V2 MoE

Q8_0 en AMD Radeon Pro 560X con macOS 15.7.9 Sequoia

RENDIMIENTO / TOKENS POR SEGUNDOGCN / Vega
Procesamiento1378.77tok/s
#40 en el índice
Generación de tokens167.97tok/s
#11 en el índice

Datos de la prueba

Contexto para interpretar los resultados.

CuantizaciónQ8_0Variante enviada
Arquitectura de GPUGCN / VegaMotor Metal
Contexto de prueba512tokens de prompt
Familia del modeloMoESigned ToshLLM app · amd-gpu · Metal
Versión de ToshLLMv0.87.1Versión de la app usada para registrar y firmar esta prueba
01

Carga estándar

Procesamiento and generation are reported separately so memory bandwidth and decode behavior stay visible.

02

Configuración incluida

La cuantización, familia de GPU, VRAM y contexto acompañan el resultado; no quedan ocultos tras una puntuación única.

03

Procedencia conservada

Este resultado sigue identificado como aporte comunitario.