Skip to main content

research-deepspeed

Expert guidance for distributed training with DeepSpeed - ZeRO optimization stages, pipeline parallelism, FP16/BF16/FP8, 1-bit Adam, sparse attention

Quellinformationen

Repository
GrayCodeAI/starling
Letzte Quellaktivität
13. Juli 2026 um 09:28
Erkannte Sprache von SKILL.md
Englisch
Sterne
2
Forks
0

Installationsoptionen

Standardmäßig ist der Prompt ausgewählt, der zuerst die Quelle prüft. Sie können zu einem direkten Befehl wechseln oder eine lokale Kopie herunterladen.

Quelldateien prüfen

Lesen Sie SKILL.md und alle von SkillsMP angezeigten Begleitdateien, bevor Sie sich für eine Installation entscheiden.

Datei-Explorer
3 Dateien

SKILL.md wird angezeigt

SKILL.md
Quellanweisungen · Schreibgeschützte Vorschau
name
research-deepspeed
description
Expert guidance for distributed training with DeepSpeed - ZeRO optimization stages, pipeline parallelism, FP16/BF16/FP8, 1-bit Adam, sparse attention
license
MIT
tags
["deepspeed","distributed-training","zero","pipeline-parallelism","mixed-precision"]
version
1.0.0
author
Orchestra Research
dependencies
["deepspeed","torch","transformers","accelerate"]
<!-- hawk-progressive-disclosure:v1 body-sha256=50a9f023fbfaa4d0b3bd16637553166c08d32c9b90a893ec51e9d5ff5266c1e4 parts=2 --> # Progressive disclosure index The complete skill instructions are preserved in the ordered references below. Open the part whose headings match the current task; read all parts in order when the task spans sections or requires the complete procedure. ## Detailed instructions - [Part 1: Deepspeed Skill → When to Use This Skill](references/progressive-disclosure-part-001.md) — original lines 1–54 — @ref(progressive-disclosure-part-001.md) - [Part 2: Example Code Patterns → Reference Files](references/progressive-disclosure-part-002.md) — original lines 55–128 — @ref(progressive-disclosure-part-002.md)
Auf GitHub ansehen