Skip to main content

tenstorrent/tt-inference-server

SkillsMP a collecté 4 skills depuis tenstorrent/tt-inference-server. Ouvrez un skill pour examiner sa source et ses détails.

Dernière activité source enregistrée
Catalogue SkillsMP mis à jour
skills collectés
4
Étoiles GitHub
71
Forks GitHub
34

Skills dans ce dépôt

1 catégories métier · 100% classifié

Affichage de 4 skills collectés sur 4.

métier
Développeurs de logiciels
description

Checklist for adding or modifying code in the workflow engine (run_workflows.py plus the llm_module/report_module/test_module/workflow_module packages) — new models, workflows, media runners, spec tests, report kinds, or CLI flags — and wiring it back to the…

Langue du texte source : anglais

mis à jour
métier
Développeurs de logiciels
description

Checklist for onboarding a new LLM to the cpp_server inference backend so it serves through Dynamo — registering the model type, fetching tokenizer files, tokenizer static data (eos/stop/think tokens), and Dynamo discovery (reasoning + tool-call parsers,…

Langue du texte source : anglais

mis à jour
métier
Développeurs de logiciels
description

Capture on-CPU and off-CPU flamegraphs of the running tt_media_server_cpp main (Drogon) and worker processes using Linux perf + Brendan Gregg's FlameGraph. Use when the user asks to profile the C++ server, find a performance bottleneck, identify slow code…

Langue du texte source : anglais

mis à jour
métier
Développeurs de logiciels
description

Trigger Tenstorrent Blaze media server and tt-metal upstream Docker image builds with gh. Use when the user asks to build Blaze and Metal Docker images, run the tt-shield media server image workflow, or build tt-metal images from the tt-llm-engine submodule…

Langue du texte source : anglais

mis à jour
Affichage de 4 skills collectés sur 4.