Skip to main content

vllm-project/llm-compressor

SkillsMP a collecté 3 skills depuis vllm-project/llm-compressor. Ouvrez un skill pour examiner sa source et ses détails.

Dernière activité source enregistrée
Catalogue SkillsMP mis à jour
skills collectés
3
Étoiles GitHub
3 752
Forks GitHub
643

Skills dans ce dépôt

1 catégories métier · 33% classifié

Affichage de 3 skills collectés sur 3.

métier
non classé
description

Generate a working FP8 quantization example script and save a compressed-tensors checkpoint. Triggers on: "fp8", "FP8_DYNAMIC", "FP8_BLOCK", "MXFP8", "fp8 example", "quantize to fp8".

Langue du texte source : anglais

mis à jour
métier
non classé
description

Generate a working NVFP4 (W4A4) quantization example script and save a compressed-tensors checkpoint. Triggers on: "nvfp4", "NVFP4", "fp4", "nvfp4 example", "quantize to nvfp4", "w4a4".

Langue du texte source : anglais

mis à jour
métier
Développeurs de logiciels
description

Create and manage tiny models for testing and development. Includes utilities for saving tiny models, inspecting tensors, and finetuning workflows.

Langue du texte source : anglais

mis à jour
Affichage de 3 skills collectés sur 3.