Skip to main content

guoqingbao/xinfer

SkillsMP a collecté 3 skills depuis guoqingbao/xinfer. Ouvrez un skill pour examiner sa source et ses détails.

Dernière activité source enregistrée
Catalogue SkillsMP mis à jour
skills collectés
3
Étoiles GitHub
309
Forks GitHub
43

Skills dans ce dépôt

1 catégories métier · 100% classifié

Affichage de 3 skills collectés sur 3.

métier
Développeurs de logiciels
description

Adapt and port new LLM model architectures to this xinfer project. Use when the user asks to add, port, support, or adapt a new model (e.g. Llama, Gemma, Qwen, GPT-OSS, DeepSeek, or any HuggingFace architecture) including safetensors and GGUF formats, Dense…

Langue du texte source : anglais

mis à jour
métier
Développeurs de logiciels
description

Check model compatibility with xinfer before loading. Validates config.json, weight tensor shapes and naming, quantization format correctness, and multi-rank (tensor-parallel) divisibility. Use when the user asks to check, validate, audit, or verify a model…

Langue du texte source : anglais

mis à jour
métier
Développeurs de logiciels
description

Test LLM models served by xinfer for correctness, output quality, and performance. Use when the user asks to test, benchmark, validate, or verify models — either from a local folder path or HuggingFace model IDs. Supports all xinfer-compatible formats: BF16,…

Langue du texte source : anglais

mis à jour
Affichage de 3 skills collectés sur 3.