Program
Rilisan bulan Desember ini dalam pembuatan video berbasis AI terasa tak ada habisnya—setelah Sora dan Veo 2, sorotan kini beralih ke Genesis.
Genesis adalah mesin fisika AI yang mampu menghasilkan simulasi yang sangat realistis. Kecepatannya mengesankan dan dapat membuat dunia 4D yang interaktif. Penggunaan utamanya mencakup robotika dan eksperimen fisika.
Dalam blog ini, saya akan memberikan gambaran umum tentang Genesis, menampilkan beberapa contoh, dan membandingkannya dengan alat pembuatan video lain seperti Sora. Untuk mempelajari cara menyiapkan Genesis, baca panduan langkah demi langkah untuk menyiapkan Genesis.
Apa Itu Genesis?
Genesis adalah platform fisika yang dibuat untuk berbagai penggunaan, termasuk robotika, AI yang berinteraksi dengan dunia nyata, dan AI yang bekerja dengan objek fisik. Genesis merupakan hasil kolaborasi besar antara lebih dari 20 laboratorium riset selama dua tahun.

Kontributor inti. Sumber gambar: Genesis
Berbeda dengan pembuat video biasa, Genesis dirancang khusus sebagai mesin fisika. Ia menggabungkan berbagai alat fisika (seperti benda kaku, fluida, dan material lunak) ke dalam satu sistem. Ini membuatnya mampu menangani berbagai simulasi dunia nyata. Kita dapat menggunakan Genesis sebagai:
- Mesin fisika: Simulator fisika yang sangat canggih yang dapat menangani semua jenis material dan peristiwa fisik, dibangun ulang sepenuhnya dari awal.
- Simulator robotika: Ringan, sangat cepat, mudah digunakan dengan Python, dan ideal untuk mensimulasikan robot.
- Sistem rendering: Membuat visual realistis dengan sangat cepat dan berkualitas tinggi.
- Generator data: Dapat mengambil deskripsi bahasa alami dan mengubahnya menjadi berbagai jenis data.
Dibandingkan dengan platform simulasi lama, berikut beberapa fitur utama Genesis:
- Kecepatan luar biasa: Genesis sangat cepat, mensimulasikan lebih dari 43 juta frame per detik (FPS) untuk lengan robot di RTX 4090. Itu 430.000 kali lebih cepat dari waktu nyata! Genesis adalah mesin fisika tercepat di dunia, hingga 80 kali lebih cepat daripada simulator lain seperti Isaac Gym atau Mujoco, tanpa mengorbankan akurasi.
- Bekerja di mana saja: Berjalan di Linux, MacOS, dan Windows, serta mendukung berbagai perangkat keras, termasuk CPU, GPU Nvidia, GPU AMD, dan Apple Metal.
- Sistem fisika serba ada: Genesis menggabungkan banyak alat fisika dalam satu sistem, mensimulasikan benda kaku, cairan, gas, objek deformasi, dan lainnya. Ia dapat menangani berbagai material dan cara interaksinya.
- Mendukung semua robot: Lengan robot, drone, robot lunak, mesin berkaki.. Apa pun namanya, Genesis bekerja dengan beragam objek dan mendukung tipe berkas populer seperti .xml, .obj, .stl, dan lainnya.
- Didukung Python: Genesis sepenuhnya dibangun dalam Python, yang sederhana untuk digunakan dan disesuaikan.
Contoh Video Genesis
Genesis dapat mensimulasikan hal-hal seperti pergerakan objek, gerakan karakter, dan interaksi dengan akurasi luar biasa. Mari kita lihat beberapa contoh yang dibagikan tim Genesis.
Menciptakan dunia dinamis 4D
Genesis menggunakan mesin fisika canggih dan alat AI untuk membangun dunia virtual yang detail dan realistis yang mencakup pergerakan dan interaksi dalam 4 dimensi. Dunia ini dapat digunakan untuk membuat video, animasi, dan data lain yang akurat untuk simulasi. Ia bahkan dapat menghasilkan pergerakan kamera dan aksi objek yang terasa alami dan konsisten.
Gerak karakter
Genesis dapat membuat animasi detail untuk karakter. Contohnya:
Sebuah figur Wukong kecil berlari melintasi meja, melompat ke udara, dan berhenti sejenak di tengah lompatan saat kamera berputar mengelilinginya sebelum ia mendarat.
Pembuatan kebijakan robotik
Genesis membantu robot mempelajari keterampilan dan melakukan tugas secara otomatis dalam berbagai skenario. Berikut salah satu contohnya:
Lengan robot memanaskan makanan di microwave
Pembuatan skena 3D interaktif
Genesis dapat membuat ruang 3D yang detail, seperti:
Interior rumah dengan ruang tamu, dapur, ruang kerja, dan kamar tidur
Pembuatan objek dunia terbuka
Genesis menghasilkan objek realistis dengan bagian yang dapat bergerak (objek berartikulasi) yang melampaui aset siap pakai pada umumnya.
Simulasi robot lunak
Genesis mensimulasikan robot lunak atau hibrida (bagian luar lunak dengan kerangka kaku), seperti:
Seekor cacing yang bergerak dengan sifat mirip otot.
Ucapan, animasi, dan emosi
Genesis dapat membuat animasi wajah yang dipasangkan dengan ucapan, menampilkan transisi antara emosi seperti netral, marah, dan bahagia.
Mulai Menggunakan Genesis
Sambil saya menyiapkan tutorial pengkodean terperinci tentang Genesis yang akan segera saya publikasikan, bagian ini hanya membahas dasar-dasarnya.
Untuk memasang Genesis, jalankan pip install genesis-world di terminal Anda.
Anda perlu memastikan sudah memiliki Python 3.9 atau lebih baru dan memasang PyTorch. Untuk menyiapkannya, ikuti petunjuk di situs web PyTorch.
Dokumentasi Genesis adalah sumber yang membantu yang menunjukkan cara menggunakan semua fitur alat simulasi fisika ini. Dimulai dengan menjelaskan apa itu Genesis, mengapa dibuat, dan bagaimana menyiapkannya. Lalu, memandu Anda melalui fitur dasar seperti membuat visual, mengendalikan robot, dan menjalankan beberapa simulasi sekaligus.
Anda juga akan menemukan alat untuk tugas seperti merencanakan gerakan robot, bekerja dengan robot lunak, dan menggunakan reinforcement learning untuk mengajarkan robot cara bergerak. Untuk pengguna tingkat lanjut, panduan ini mencakup topik seperti penanganan tumbukan, menggunakan simulasi untuk melakukan penyesuaian, dan bekerja dengan drone.
Genesis vs. Sora vs. Veo 2
Sekarang mari bandingkan Genesis, Sora, dan Veo 2 dan lihat bagaimana perbedaannya:
Tujuan dan fokus
- Genesis: Alat untuk mensimulasikan fisika, dirancang untuk aplikasi robotika dan AI.
- Sora: Model yang membuat video dari prompt teks, berfokus pada visual yang imajinatif atau realistis.
- Veo 2: Pembuat video tingkat lanjut yang menggabungkan visual berkualitas tinggi dengan fisika yang realistis.
Fitur utama
- Resolusi dan durasi:
- Genesis tidak menghasilkan video tetapi berfokus pada simulasi fisika.
- Sora membuat video hingga 1080p dan sepanjang 20 detik.
- Veo 2 mendukung resolusi hingga 4K dan video berdurasi lebih dari 2 menit.
- Simulasi fisika:
- Genesis unggul dalam simulasi fisika yang cepat dan akurat.
- Sora memiliki pemahaman fisika yang terbatas.
- Veo 2 memodelkan fisika seperti fluida dan interaksi objek.
- Visual:
- Genesis memprioritaskan akurasi fisik dibandingkan tampilan visual.
- Sora membuat visual hiperrealistis atau imajinatif.
- Veo 2 menghasilkan video yang sangat realistis dengan lebih sedikit kesalahan dibandingkan Sora.
- Kendali pengguna:
- Genesis memungkinkan kendali detail atas simulasi fisika.
- Sora menggunakan prompt teks untuk membuat video.
- Veo 2 menawarkan kendali kamera yang presisi dan efek sinematik.
Kekuatan
- Genesis: Simulasi fisika yang sangat cepat, menggabungkan banyak alat fisika, dan berbasis Python sehingga mudah digunakan.
- Sora: Unggul untuk penceritaan kreatif dan imajinatif.
- Veo 2: Terbaik untuk video realistis, kendali kuat atas adegan, dan penanganan gerakan manusia yang unggul.
Aplikasi
- Genesis: Digunakan dalam robotika, gim, dan riset AI yang memerlukan fisika akurat.
- Sora: Sempurna untuk industri kreatif seperti produksi video dan hiburan.
- Veo 2: Ideal untuk pembuatan film, pembuatan konten, dan video ilmiah dengan detail tinggi.
|
Fitur |
Genesis |
Sora |
Veo 2 |
|
Tujuan |
Simulasi fisika untuk robotika, embodied AI, dan physical AI |
Pembuatan video dari teks |
Pembuatan video berkualitas tinggi dengan simulasi fisika |
|
Resolusi & Durasi |
Tidak berlaku (berfokus pada simulasi, bukan pembuatan video) |
Hingga 1080p, klip 20 detik |
Hingga resolusi 4K, klip 2+ menit |
|
Simulasi Fisika |
Simulasi fisika yang akurat dan berkecepatan tinggi |
Pemahaman fisika terbatas |
Pemodelan fisika tingkat lanjut, termasuk fluida dan interaksi objek |
|
Kualitas Visual |
Berfokus pada akurasi fisik, bukan estetika visual |
Visual hiperrealistis atau imajinatif |
Realistis tinggi dengan lebih sedikit artefak |
|
Kendali Pengguna |
Sangat dapat disesuaikan untuk simulasi fisika |
Pembuatan video dari teks |
Kendali kamera presisi dan efek sinematik |
|
Keunggulan Unik |
Kecepatan simulasi ultra-cepat (43 juta FPS), kerangka fisika terpadu, berbasis Python |
Unggul dalam penceritaan kreatif |
Kepatuhan prompt superior, sinematografi lebih baik, penanganan gerakan manusia lebih baik |
|
Aplikasi |
Pelatihan robotika, fisika gim, riset AI yang memerlukan pemodelan fisika akurat |
Industri kreatif, produksi video |
Pembuatan film, visualisasi ilmiah, pembuatan konten |
|
Terbaik Untuk |
Simulasi akurat dan riset AI |
Penceritaan kreatif |
Pembuatan video yang realistis dan berkualitas tinggi |
Apa Berikutnya untuk Genesis?
Tim Genesis sedang mengerjakan beberapa fitur baru menarik yang akan segera tersedia. Ini termasuk modul sensor sentuh yang menggunakan fisika, simulasi yang ditingkatkan untuk objek kaku, dan rendering bertiling untuk mempercepat proses. Mereka juga menambahkan alat untuk membuat gerakan karakter dan kamera, skena interaktif, animasi wajah, serta gerakan robot seperti berjalan atau menangani objek. Lingkungan virtual berskala besar juga akan ditingkatkan dengan fitur simulasi baru untuk hasil yang lebih realistis.
Beberapa fitur belum dikerjakan. Ini termasuk dukungan untuk rendering di Windows, antarmuka yang ramah pengguna, lebih banyak jenis material untuk simulasi, dan opsi sensor baru.
Kesimpulan
Genesis tak diragukan lagi mewakili kemajuan besar dalam simulasi fisika dan AI generatif. Saya terkesan dengan kecepatan, akurasi, dan adaptabilitasnya di berbagai kasus penggunaan.
Meskipun beberapa fitur masih dalam pengembangan, potensi alat sumber terbuka ini tidak terbantahkan. Saya percaya pendekatan Genesis yang ramah pengguna dan komitmennya terhadap peningkatan berkelanjutan akan membuat simulasi fisika tingkat lanjut dapat diakses oleh khalayak yang lebih luas.
Ana Rojo Echeburúa adalah spesialis AI dan data dengan gelar PhD di Bidang Matematika Terapan. Ia senang mengubah data menjadi wawasan yang dapat ditindaklanjuti dan memiliki pengalaman luas dalam memimpin tim teknis. Ana menikmati bekerja langsung dengan klien untuk menyelesaikan masalah bisnis mereka dan menciptakan solusi AI yang inovatif. Dikenal karena keterampilan pemecahan masalah dan komunikasi yang jelas, ia sangat antusias terhadap AI, terutama AI generatif. Ana berkomitmen pada pembelajaran berkelanjutan dan pengembangan AI yang etis, serta menyederhanakan masalah kompleks dan menjelaskan teknologi dengan cara yang mudah dipahami.

