ant-research/4DAnyone
[SIGGRAPH Asia 2026] 4DAnyone: Create Anyone in 4D from a Casual Monocular Video
Hızlı değerlendirme
Özet
4DAnyone, tek bir monocular videodan farklı kamera açılarında zamansal olarak tutarlı videolar üretip 4D Gaussian Splatting için girdi sağlar.
Profiline uyum
Video üretimiyle yüzeysel olarak sosyal medya içeriklerine bağlanıyor, ancak 4D insan rekonstrüksiyonu profildeki tanıtım ihtiyacından uzak.
Neden yükseliyor
48 günde 1.384 yıldız almış; README'de esnek kamera düzenleri, 4DAnyone-Turbo, GUI ve RTX 4090'da paylaşılan inference ölçümleri öne çıkarılıyor. Ancak son 28 günde 26 commit'in tek yazardan gelmesi, ilginin bağımsız geliştirici etkinliğiyle aynı şey olmadığını gösteriyor.
Problem
Tek kamera videosunda görünmeyen açılar ve sahne hareketi hakkında yeterli bilgi bulunmadığından, serbest bakış açılı 4D içerik üretmek zordur.
Çözüm
Girdi videosundan hareket bilgisi çıkarır ve seçilen kamera düzenleri için çoklu görünüm videoları üretir; kamera parametreleri veya sabit kamera gerektirmediğini belirtiyor. Üretilen videolar daha sonra 4DGS rekonstrüksiyonunda kullanılabilir.
Yenilik
Tek monocular videodan, kamera parametreleri olmadan birden fazla hedef görünüm için zamansal olarak tutarlı video üretip bunu 4DGS iş akışına bağlaması belirgin yaklaşım. Yenilik ve kalite iddialarını bağımsız olarak doğrulayacak karşılaştırmalı kanıt bu girdide yok.
Teknolojiler
- Python
- GVHMR
- 4D Gaussian Splatting
- Gradio
- Rerun
- FlashAttention-3
- SageAttention
- SMPL-X
Riskler
- Son 28 gündeki 26 commit tek yazardan; sürdürülebilir bakım ve dış katkı konusunda kanıt sınırlı.
- README'deki performans değerleri proje tarafından raporlanıyor; bağımsız benchmark bilgisi verilmemiş.
- Girdi için tek kişi, net görüntü, sınırlı kamera hareketi, 1080p veya üstü çözünürlük ve en az 121 frame gibi koşullar belirtilmiş.
- RTX 4090 için yaklaşık 22 GB CUDA memory bildirilmesi, inference'ın kaynak ihtiyacının hâlâ yüksek olduğunu gösteriyor.
- Üretilen çoklu görünüm videoları tek başına tamamlanmış 4DGS rekonstrüksiyonu değil; aşağı akışta ek işleme gerekiyor.
Detaylı değerlendirme
Bu repo için detaylı değerlendirme henüz yapılmadı. Analiz, Ayarlar'daki uyum profilini hesaba katarak "bu işime yarar mı" sorusunu cevaplıyor. Bir kez çalışır; günlük koşular buna dokunmaz. Saatlik sınır var — bir kaynaktan en fazla 3 analiz.