SSealbook

FMInference/FlexLLMGen

Running large language models on a single GPU for throughput-oriented scenarios.

deep-learninggpt-3high-throughputlarge-language-modelsmachine-learningoffloadingopt

Licencia y mantenimiento

Apache-2.0 es una licencia permisiva: uso comercial libre con atribución.

Último cambio de código hace 24 meses. Archivado: solo lectura, sin más actualizaciones.