Skip to main content

pytorch/torchtitan

SkillsMP 已收集 pytorch/torchtitan 中的 4 个 Skill。打开任一 Skill 可查看来源和详情。

最近记录的来源活动
SkillsMP 收录数据更新
已收集 skills
4
GitHub 星标
5,664
GitHub Forks
963

这个仓库中的 skills

1 个职业分类 · 已分类 100%

已展示 4 / 4 个已收集 Skill。

职业分类
软件开发工程师
描述

Add a new HF MoE model to the transformers_modeling_backend experiment. Use when the user provides a HuggingFace model ID and wants to integrate it with Titan's MoE, or invokes /add_moe_model.

原文语言:英语

更新
职业分类
软件开发工程师
描述

Profiler-driven hill-climbing to close the inference throughput gap between TorchTitan's unified model (running inside vLLM) and vLLM's native model. Benchmark with generate.py --benchmark, climb optimization rungs (compile / cudagraph / fused kernels),…

原文语言:英语

更新
职业分类
软件开发工程师
描述

Capture and compare per-op activations between two TorchTitan runs to spot numerics divergence (eager vs aot_fx_trace, FSDP vs no-FSDP, before vs after a refactor). Use when the user wants to debug bitwise / numeric drift in training, or invokes…

原文语言:英语

更新
职业分类
软件开发工程师
描述

Bisect PyTorch commits to find the regression that breaks TorchTitan. Use when the user wants to bisect PyTorch or invokes /torch_bisect.

原文语言:英语

更新
已展示 4 / 4 个已收集 Skill。