Aporte comunitario

Registro de rendimiento · MoE

Ornith 1.5 35B-A3B

Q4_K_M en AMD Radeon Pro 5500M con macOS 15.7.9 Sequoia

RENDIMIENTO / TOKENS POR SEGUNDORDNA 1
Procesamiento138.68tok/s
#290 en el índice
Generación de tokens13.06tok/s
#294 en el índice

Datos de la prueba

Contexto para interpretar los resultados.

CuantizaciónQ4_K_MVariante enviada
Arquitectura de GPURDNA 1Motor Metal
Contexto de prueba512tokens de prompt
Familia del modeloMoESigned ToshLLM app · ncmoe 30 · amd-gpu · Metal
Versión de ToshLLMv0.87.3Versión de la app usada para registrar y firmar esta prueba
01

Carga estándar

Procesamiento and generation are reported separately so memory bandwidth and decode behavior stay visible.

02

Configuración incluida

La cuantización, familia de GPU, VRAM y contexto acompañan el resultado; no quedan ocultos tras una puntuación única.

03

Procedencia conservada

Este resultado sigue identificado como aporte comunitario.