4d human

Manusia dalam 4D: Merekonstruksi dan Melacak Manusia dengan Transformer Universitas California, Berkeley mempresentasikan sebuah pendekatan yang dapat merekonstruksi manusia dalam 3D dan melacak pergerakan mereka dalam waktu pada sebuah video dengan cara yang akurat. Pendekatan yang diberi nama 4D Humans: Reconstructing and Tracking Humans with Transformers. Dalam hal ini, mereka menawarkan model anatomi manusia interaktif bernama 4D Anatomy yang memungkinkan digital dissection manusia secara detail dan real. Setiap model yang dihasilkan merupakan hasil pemindaian dari manusia yang telah diproses oleh mesin dan menghasilkan detail geometri yang akurat untuk dapat digunakan dalam Visual Effects, permainan digital, dan teknologi Virtual Reality (VR) serta Augmented Reality (AR). Pendekatan yang dibuat oleh Shubham Goel dan Georgios Pavlakos ini digunakan pada berbagai tugas terkait manusia 4D, seperti dalam merekonstruksi gerakan tubuh, memproses gerakan, hingga memprediksi gerakan yang akan datang. Terdapat pula model manusia 4D yang telah dibuat dengan teknologi pemindaian volumetrik untuk visualisasi di berbagai bidang seperti VFX, game, VR, AR, hingga teknologi metaverse. Pendekatan ini sepenuhnya menggunakan teknologi Transformer dalam merecovery mesh manusia yang bergerak. Manfaat pendekatan ini diantaranya dapat membantu dalam mendeteksi posisi manusia secara akurat meskipun terdapat banyak orang dalam satu rekaman dengan melacak posisi dan identitas setiap orang dalam kondisi tertutup dan dapat menjaga hubungan antara satu orang dengan orang lain. Demi memudahkan pengguna dalam membuat karakter digital, terdapat MetaHuman yang menyajikan pipeline lengkap untuk membuat manusia digital tanpa perlu menggunakan waktu yang lama. Manusia digital yang tercipta dapat digunakan dalam Job 3D, dan siap digunakan secara real-time dalam Unreal Engine. Peningkatan detil geometri pada manusia 4D terbaru ini menggunakan model parameter SMPL yang telah dikembangkan secara luas. Representasi H4D dapat memperlihatkan model yang limpyas dan efisien dalam merepresentasikan manusia secara dinamis. Dalam hal ini, H4D menggolongkan manusia dalam struktur komponen dengan representasi multiscale.