ashutoshsinghpr7/wikiskill
WikiSkill (arXiv:2608.27454) for Hermes Agent — self-evolving agent skills via a persistent knowledge wiki. Faithful Algorithm 1 implementation with real agent runs, isolated skill gating, and a documented live run log.
Hızlı değerlendirme
Özet
WikiSkill, agent oturumlarından kalıcı wiki bilgisi derleyip skill değişikliklerini doğrulama testleriyle kabul veya geri alan bir Python aracıdır.
Profiline uyum
Agent deneyimlerini kalıcı bilgiye dönüştürme yaklaşımı, kullandığınız AI agent ve RAG mimarileriyle dolaylı biçimde örtüşüyor.
Neden yükseliyor
Agent'lar için kalıcı bilgi ve self-improvement ilgisinin yüksek olduğu bir dönemde, araştırma makalesindeki döngüyü gerçek agent çalıştırmalarıyla uygulanabilir bir araca dönüştürdüğünü öne sürüyor. 29 günlük yaşına göre 250 yıldız ve son 28 günde 22 commit dikkat çekici; ancak yalnızca 2 farklı yazar var ve yıldızlar kullanım ya da etkinin kanıtı değil.
Problem
Agent deneyiminden edinilen derslerin oturumlar arasında kaybolması ve skill güncellemelerinin gerçek performans artışı sağlamadan benimsenebilmesi sorunlarını ele alıyor.
Çözüm
Görevleri mevcut skill setiyle çalıştırıyor, JSONL trace'lerini Wiki Maintainer agent ile wiki sayfalarına dönüştürüyor ve Skill Proposer'ın önerdiği değişikliği held-out görevlerde test ediyor. Doğrulama skoru önceki en iyi skoru aşarsa değişikliği tutuyor; aksi durumda skill değişikliğini geri alıp wiki'yi koruyor. Hermes Agent referans backend'i; README ayrıca Claude Code, Codex ve GitHub Copilot CLI desteği belirtiyor.
Yenilik
Temel fikir araştırma makalesinden geliyor; ayırt edici katkı, wiki bakımı, skill önerisi ve performans gating adımlarını Hermes Agent üzerinde gerçek çalıştırmalarla birleştiren uygulama. Bunun araştırma yaklaşımından bağımsız yeni bir yöntem olduğuna dair verilen bilgilerde kanıt yok.
Teknolojiler
- Python
- Hermes Agent
- Claude Code
- Codex
- GitHub Copilot CLI
- JSONL
- Git
Riskler
- Proje çok yeni; son 28 günde 22 commit'e rağmen katkı iki farklı yazarla sınırlı, uzun dönemli bakım ve kararlılık kanıtı henüz yok.
- README'deki faithful implementation ve production-minded nitelemeleri proje iddiası; bağımsız değerlendirme veya geniş kapsamlı sonuç verisi sunulmuyor.
- Gating sonuçları görev kümesine ve kullanılan modele bağlı olabilir; küçük bir benchmark'taki skor artışı farklı işlere genellenmeyebilir.
- Gerçek agent çalıştırmaları için Hermes Agent profili ve uygun model erişimi gerekiyor; maliyet, süre ve sonuçların tekrarlanabilirliği uygulamada değerlendirilmelidir.
- README, PyPI paketlemesinde önceki sürümlerde framework skills'in eksik olabildiğini belirtiyor; kurulum ve workspace sürüm uyumluluğu kontrol edilmeli.
Detaylı değerlendirme
Bu repo için detaylı değerlendirme henüz yapılmadı. Analiz, Ayarlar'daki uyum profilini hesaba katarak "bu işime yarar mı" sorusunu cevaplıyor. Bir kez çalışır; günlük koşular buna dokunmaz. Saatlik sınır var — bir kaynaktan en fazla 3 analiz.