Skip to main content

sedpack

Creates, writes, inspects, and iterates multi-shard machine learning and side-channel analysis datasets using the sedpack library (sedpack.io). Use when creating a sedpack Dataset, defining Metadata, DatasetStructure, or Attribute schemas, writing examples with dataset.filler(), DatasetFiller, or dataset.write_multiprocessing(), iterating data for JAX, PyTorch, Keras, TensorFlow, or NumPy (as_numpy_iterator, as_numpy_iterator_concurrent, as_numpy_iterator_async, as_numpy_iterator_rust, as_numpy_iterator_rust_batched, as_tfdataset), filtering or balancing shards via custom_metadata, or converting raw datasets (HDF5, NPZ, traces) into sedpack format. Don't use for modifying sedpack's internal Rust or FlatBuffers compiler implementation unless high-level API semantics are needed.

Informations de source

Dépôt
google/sedpack
Dernière activité de la source
9 novembre 2026 à 10:22
Langue détectée de SKILL.md
anglais
Étoiles
39
Forks
14

Options d'installation

Le prompt qui vérifie d'abord la source est sélectionné par défaut. Vous pouvez passer à une commande directe ou télécharger une copie locale.

Vérifiez les fichiers source

Lisez SKILL.md et les fichiers associés affichés par SkillsMP avant de décider de l'installer.

Affichage de SKILL.md

SKILL.md
Instructions source · Aperçu en lecture seule
namesedpack
descriptionCreates, writes, inspects, and iterates multi-shard machine learning and side-channel analysis datasets using the sedpack library (sedpack.io). Use when creating a sedpack Dataset, defining Metadata, DatasetStructure, or Attribute schemas, writing examples with dataset.filler(), DatasetFiller, or dataset.write_multiprocessing(), iterating data for JAX, PyTorch, Keras, TensorFlow, or NumPy (as_numpy_iterator, as_numpy_iterator_concurrent, as_numpy_iterator_async, as_numpy_iterator_rust, as_numpy_iterator_rust_batched, as_tfdataset), filtering or balancing shards via custom_metadata, or converting raw datasets (HDF5, NPZ, traces) into sedpack format. Don't use for modifying sedpack's internal Rust or FlatBuffers compiler implementation unless high-level API semantics are needed.