Depo ayrıntısı

kyegomez/Latent-MoE

Implementation of LatentMoE,Toward Optimal Accuracy per FLOP and Parameter in Mixture of Experts (Elango et al., NVIDIA 2026) — in Pytorch. A single-file, dependency-light layer you can drop in place of a standard MoE FFN.

Python Apache-2.0 21 Temmuz 2026 son push 22 Temmuz 2026 1 fork

ai attention cuda k3 kimi llm llms ml moe moe-infrastructure moe-model pytorch research transformer

GitHub'da aç Site

Yıldız

23+3 · 37 gün

Commit · 28g

—

son 28 günde

Yazar · 28g

—

farklı katkıcı

Detaylı değerlendirme

Bu repo için detaylı değerlendirme henüz yapılmadı. Analiz, Ayarlar'daki uyum profilini hesaba katarak "bu işime yarar mı" sorusunu cevaplıyor. Bir kez çalışır; günlük koşular buna dokunmaz. Saatlik sınır var — bir kaynaktan en fazla 3 analiz.