Skip to main content

abhiram1809/inference-god-mode

جمع SkillsMP عدد ١ من skills من abhiram1809/inference-god-mode. افتح أي skill لمراجعة مصدره وتفاصيله.

آخر نشاط مصدر مسجل
آخر تحديث لفهرس SkillsMP
skills مجمعة
١
نجوم GitHub
٠
تفرعات GitHub
٠

التثبيت بمساعدة مساعد ذكي

انسخ هذا الطلب إلى المساعد الذكي الذي تستخدمه.

المنشورات

عرض الكل →
Abhi
Abhi
@abhiram_ai_guy
خبر إطلاق مهارةتحسين أداء استدلال نماذج اللغة
ملخص المنشور · الإنجليزية

A skill for tuning self-hosted LLM inference around the model, hardware, API requirements, and serving workload, including parallelism, KV tiers, and prefill/decode separation.

Skills في هذا المستودع

التصنيف قيد الانتظار

عرض ١ من أصل ١ skills مجمعة.

المهنة
غير مصنف
الوصف

Plan, deploy, benchmark, and tune self-hosted open-weight LLM inference on one machine or Kubernetes GPU clusters, including quantization, full-context capacity, OpenAI or Anthropic APIs, cache-aware routing, and prefill/decode disaggregation.

لغة النص الأصلي: الإنجليزية

آخر تحديث
عرض ١ من أصل ١ skills مجمعة.