メニュー
Tencent AngelSlim — accessible, comprehensive, and efficient toolkit for large model compression. Quantization (FP8/INT4/NVFP4/1.25-bit), pruning, speculative decoding (Eagle3), and diffusion model compression.
デフォルトでは、最初にソースを確認する Prompt が選択されています。直接コマンドに切り替えるか、ローカルコピーをダウンロードすることもできます。
インストールを決める前に、SKILL.md と SkillsMP に表示されている付属ファイルをお読みください。
Codex または Claude でインストール この Prompt をコピーして Codex、Claude、または他のアシスタントに貼り付けると、Skill ページを確認してインストールできます。
直接コマンドでは確認用 Prompt が省略されます。実行前にソースを確認してください。
npx skills add https://github.com/mkurman/zorai --skill angelslimコマンドは1行のまま表示されます。コピー前に横へスクロールして全体を確認してください。
ローカルで確認しますか？SkillsMP が現在取得できるファイルをダウンロードできます。
SOC 職業分類に基づく
SKILL.md を表示中
| name | angelslim |
| description | Tencent AngelSlim — accessible, comprehensive, and efficient toolkit for large model compression. Quantization (FP8/INT4/NVFP4/1.25-bit), pruning, speculative decoding (Eagle3), and diffusion model compression. |
| tags | ["angelslim","model-compression","quantization","pruning","speculative-decoding","tencent","zorai"] |
AngelSlim integrates mainstream compression algorithms into a unified framework with one-click access. Supports FP8/INT8/INT4/NVFP4/1.25-bit quantization, pruning, Eagle3 speculative decoding, and diffusion model compression for LLMs, VLMs, and audio models.
uv pip install angelslim
import angelslim as slim
# FP8 static quantization
model = slim.quantize(model, dtype="fp8_static", qconfig="default")
# INT4 GPTQ
model = slim.quantize(model, dtype="int4_gptq", dataset="wikitext2")
| Method | Precision | Best For |
|---|---|---|
| FP8-Static/Dynamic | 8-bit | General LLM deployment |
| INT4 GPTQ/AWQ/GPTAQ | 4-bit | Memory-constrained serving |
| NVFP4 | 4-bit (NVIDIA) | Blackwell GPUs |
| Sherry | 1.25-bit | Extreme compression |
| STQ1_0 | 1.25-bit | On-device deployment |
# Train Eagle3 draft model
slim.eagle3.train(model, draft_model_config)
# Inference with Eagle3
output = model.generate_with_eagle3(input_ids, max_new_tokens=256)