Spark-To-Paper-Skills/paperjury
Pre-submission AI review stress-test for research papers. A Claude Code skill: review, verdict, revise, verify.
Hızlı değerlendirme
Özet
PaperJury, Claude Code içinde araştırma makalelerini LaTeX üzerinde gözden geçirip sınırlı ve kontrollü düzeltmeler önermek için kullanılan bir skill'dir.
Profiline uyum
Akademik LaTeX makalelerini gözden geçirmeye odaklanıyor ve profilinizde böyle bir ihtiyaç bulunmuyor.
Neden yükseliyor
117 günde 1207 yıldız alması; arXiv makalesi, dogfood örneği ve sayısal baseline karşılaştırmalarıyla dikkat çekiyor. Ancak son 28 günde commit ve farklı yazar olmaması, yükselişin güncel geliştirme etkinliğiyle desteklendiğine dair kanıt sunmuyor.
Problem
AI incelemesi hatalı veya kanıtsız eleştiriler üretebilir ya da yazarın onayı olmadan riskli değişiklikler yapabilir; araştırmacıların gönderim öncesi bu riskleri yönetmesi gerekir.
Çözüm
İnceleme, karar verme, düzeltme ve doğrulama adımlarını bir döngüye bağlar; anlamsal değerlendirmeyi agent'lara, durum yönetimi, oylama kuralları, patch uygulama ve durdurma koşullarını deterministik koda bırakır. Riskli veya yazardan bilgi gerektiren konuları kullanıcıya devreder.
Yenilik
AI değerlendirmesiyle deterministik güvenlik ve değişiklik kontrollerini aynı iş akışında birleştirmesi dikkat çekici; ancak bu yaklaşımın alan genelinde yeni bir kategori oluşturduğuna veya geniş ölçekte benimsendiğine dair kanıt yok.
Teknolojiler
- JavaScript
- Claude Code
- LaTeX
- LLM agents
Riskler
- README'de bildirilen değerlendirme 12 held-out makaleyle sınırlı; sonuçların daha geniş veri ve bağımsız tekrarlarla doğrulanması gerekir.
- Claude Code'a bağımlı bir skill; başka agent ortamlarında doğrudan çalıştığı varsayılmamalı.
- README, örnek başına 2.47 saat ve 6.76M token maliyeti bildiriyor; iş akışı zaman ve kullanım maliyeti açısından ağır olabilir.
- Son 28 günde commit veya farklı yazar görünmüyor; bu, bakımın güncelliği açısından belirsizlik yaratıyor.
- Proje, README'de de belirtildiği üzere peer review veya yazarın bilimsel muhakemesinin yerine geçmez.
Detaylı değerlendirme
Bu repo için detaylı değerlendirme henüz yapılmadı. Analiz, Ayarlar'daki uyum profilini hesaba katarak "bu işime yarar mı" sorusunu cevaplıyor. Bir kez çalışır; günlük koşular buna dokunmaz. Saatlik sınır var — bir kaynaktan en fazla 3 analiz.