Skip to main content

tenstorrent/tt-inference-server

SkillsMP hat 4 Skills aus tenstorrent/tt-inference-server gesammelt. Öffne einen Skill, um Quelle und Details zu prüfen.

Letzte erfasste Quellaktivität
SkillsMP-Katalog aktualisiert
gesammelte Skills
4
GitHub-Stars
71
GitHub-Forks
34

Skills in diesem Repository

1 Berufskategorien · 100% klassifiziert

Es werden 4 von 4 gesammelten Skills angezeigt.

Beruf
Softwareentwickler
Beschreibung

Checklist for adding or modifying code in the workflow engine (run_workflows.py plus the llm_module/report_module/test_module/workflow_module packages) — new models, workflows, media runners, spec tests, report kinds, or CLI flags — and wiring it back to the…

Quellsprache: Englisch

Aktualisiert
Beruf
Softwareentwickler
Beschreibung

Checklist for onboarding a new LLM to the cpp_server inference backend so it serves through Dynamo — registering the model type, fetching tokenizer files, tokenizer static data (eos/stop/think tokens), and Dynamo discovery (reasoning + tool-call parsers,…

Quellsprache: Englisch

Aktualisiert
Beruf
Softwareentwickler
Beschreibung

Capture on-CPU and off-CPU flamegraphs of the running tt_media_server_cpp main (Drogon) and worker processes using Linux perf + Brendan Gregg's FlameGraph. Use when the user asks to profile the C++ server, find a performance bottleneck, identify slow code…

Quellsprache: Englisch

Aktualisiert
Beruf
Softwareentwickler
Beschreibung

Trigger Tenstorrent Blaze media server and tt-metal upstream Docker image builds with gh. Use when the user asks to build Blaze and Metal Docker images, run the tt-shield media server image workflow, or build tt-metal images from the tt-llm-engine submodule…

Quellsprache: Englisch

Aktualisiert
Es werden 4 von 4 gesammelten Skills angezeigt.