Princeton Infinigen Matrix dibuka! Pencipta AI mencipta alam semula jadi 100%, sangat hidup sehingga ia meletup

Neo mendapati bahawa dunia yang dia tinggali adalah tidak nyata, tetapi realiti simulasi yang direka dengan teliti.

Dan adakah anda, seketika, berfikir bahawa dunia yang kita diami adalah dunia matriks simulasi?

Dan kini, matriks dibuka secara rasmi.

Tenanglah, bumi yang telah lama didiami manusia ini, segala yang ada di alam ini adalah dunia ilusi.

Matahari terbit di atas glasier artik. Terdapat pelbagai jenis ikan pelik dan terumbu karang berwarna-warni di dunia bawah air.

Salji berterbangan di pergunungan, dan helang melayang di langit yang luas. Di padang pasir yang terik, ular berbahaya berulang-alik dengan bebas.

Pokok-pokok kecil di tepi sungai itu terbakar dan dipenuhi asap.

Lautan dan anak sungai yang jernih, kura-kura malas berjemur di pantai, banyak pepatung di udara bermain.

Perubahan cahaya dan bayang-bayang dalam gua.

Titisan hujan yang turun dan daun maple yang gugur ditiup angin membuatkan masa terhenti secara tiba-tiba.

Semua yang anda lihat direka bentuk oleh kecerdasan buatan. Simulasi mereka sangat realistik sehingga mereka disalah anggap sebagai realiti itu sendiri.

Pasukan yang membuka pintu kepada matriks ini adalah dari Princeton, dan penyelidikan serta-merta menyebabkan kekecohan di Internet.

Netizen berkata satu demi satu bahawa kita hidup dalam matriks!

Dalam kertas kerja, penyelidik memperkenalkan "Infinigen" ialah penjana prosedur untuk adegan 3D realistik dunia semula jadi.

Infinigen adalah prosedur sepenuhnya, dari bentuk hingga tekstur, semuanya dijana dari awal melalui peraturan matematik rawak.

Malah, ia boleh diubah tanpa henti, meliputi tumbuh-tumbuhan, haiwan, rupa bumi, api dan awan di alam semula jadi , hujan dan salji dan fenomena semula jadi yang lain.

Kertas terkini telah diterima oleh CVPR 2023.

Alamat kertas: https://arxiv.org/pdf/2306.09310.pdf

Infinigen dibina pada alat grafik sumber terbuka dan bebas, Infinigen juga merupakan sumber terbuka.

Perlu dinyatakan bahawa sepasang imej 1080p boleh dijana dalam masa 3.5 jam!

Infinite CV Data Generator

Infinigen yang dicadangkan oleh Princeton University boleh disesuaikan dengan mudah untuk menjana pelbagai realiti tugas tertentu.

adalah seperti berikut, meniru kepelbagaian dalam alam semula jadi.

Dan fungsi utamanya ialah ia boleh digunakan sebagai penjana data latihan tanpa had untuk pelbagai jenis komputer tugas penglihatan.

Antaranya, termasuk pengesanan sasaran, segmentasi semantik, anggaran pose, pembinaan semula 3D, sintesis paparan dan penjanaan video.

Selain itu, ia juga boleh digunakan untuk membina persekitaran simulasi untuk melatih robot fizikal, serta maya yang terkandung ejen.

Sudah tentu, pencetakan 3D, pembangunan permainan, realiti maya, penghasilan filem dan penciptaan kandungan umum semuanya tersedia.

Seterusnya, mari kita lihat bagaimana sistem Infinigen direka.

Pratonton Pengisar.

Penyelidik terutamanya menggunakan Blender untuk membangunkan peraturan prosedur Blender ialah perisian pemodelan 3D sumber terbuka yang menyediakan pelbagai alat primitif dan praktikal.

Pengisar mewakili pemandangan sebagai hierarki objek yang diletakkan.

Pengguna mengubah suai perwakilan ini dengan menukar objek, menambah primitif dan mengedit jerat.

Blender menyediakan import/eksport format fail 3D yang paling biasa.

Akhir sekali, segala-galanya dalam Blender boleh diautomasikan melalui API Pythonnya, atau dengan menyemak kod sumber terbukanya.

Penterjemah Nod.

Sebagai sebahagian daripada Infinigen, penyelidik telah membangunkan satu set alat baharu untuk mempercepatkan pemodelan prosedur penyelidik.

Contoh yang ketara ialah Penukar Nod penyelidik, yang secara automatik menukar graf nod kepada kod Python, seperti yang ditunjukkan.

Kod yang terhasil adalah lebih umum dan membolehkan penyelidik merawak struktur graf dan bukannya hanya parameter input.

Alat ini menjadikan gambar rajah nod lebih ekspresif dan membolehkan penyepaduan mudah dengan peraturan atur cara lain yang dibangunkan secara langsung dalam Python atau C++.

Ia juga membenarkan bukan pengaturcara menyumbang kod Python kepada Infinigen dengan membuat graf nod.

Subsistem penjana. Infinigen terdiri daripada penjana, yang merupakan program kebarangkalian, masing-masing khusus dalam menjana subkelas aset (seperti gunung atau ikan).

Setiap penjana mempunyai set parameter peringkat tinggi (seperti ketinggian keseluruhan gunung) yang mencerminkan pengguna- darjah kebebasan luaran yang boleh dikawal.

Secara lalai, penyelidik mengambil sampel secara rawak parameter ini berdasarkan pengedaran yang ditala untuk mencerminkan alam semula jadi, tanpa input pengguna.

Walau bagaimanapun, pengguna juga boleh mengatasi sebarang parameter menggunakan API Python penyelidik untuk mencapai kawalan terperinci ke atas penjanaan data.

Gambar di bawah adalah adegan rawak yang hanya mengandungi rupa bumi. Para penyelidik memilih 13 imej pelbagai jenis pemandangan semula jadi.

Ia adalah: gunung, sungai yang semakin meningkat, gunung bersalji, matahari terbit di pantai, bawah air, gunung ais Arktik, padang pasir, gua, ngarai dan pulau terapung.

Gambar di bawah ialah gambar yang dijana secara rawak yang mensimulasikan kebakaran, termasuk asap, air terjun dan adegan letusan gunung berapi.

Daun, bunga, cendawan, pokok pain.

Pokok, kaktus, pokok renek.

Hidupan laut.

Pelbagai jenis permukaan.

Gambar di bawah menunjukkan generasi makhluk.

Penyelidik secara automatik menjana genom yang berbeza (a), bahagian badan (b), penyambungan bahagian badan (c), rambut (d) dan postur badan (e).

Di sebelah kanan gambar adalah karnivor, herbivor, burung, kumbang dan ikan yang dihasilkan secara rawak yang dipaparkan oleh penyelidik.

Dalam rajah di bawah, penyelidik menyusun susun atur adegan rawak (a).

Pengkaji menjana semua kandungan imej yang diperlukan (b, untuk memaparkan warna setiap muka jejaring) dan menggunakan bahan dan anjakan yang diprogramkan (c).

Akhir sekali, tunjukkan imej sebenar (d).

Imej di bawah menunjukkan penskalaan resolusi dinamik.

Para penyelidik menunjukkan tiga visualisasi grid dekat dengan jarak kamera yang berbeza tetapi kandungan yang sama.

Walaupun peleraian grid berbeza, tiada perubahan dapat dilihat pada imej akhir.

Hasil eksperimen

Untuk menilai Infinigen, penyelidik menghasilkan 30K pasangan imej, Imej ini mempunyai asas kebenaran untuk pemadanan stereo yang diperbetulkan.

Para penyelidik mula melatih RAFTStereo pada imej ini dan membandingkan keputusan pada set pengesahan dan set ujian Middlebury.

Kod penyelidikan baru sahaja dikeluarkan hari ini , telah mengumpul 99 bintang.

Dejà vu "Westworld"

Saintis NVIDIA Jim Fan berkata demikian apabila kita berada dalam realiti Apabila tiada data latihan yang baik, simulasi ialah "lombong emas" seterusnya.

Di sini, Infinigen ialah set data realistik sumber terbuka, dijana secara program, realistik untuk penglihatan 3D. Kualitinya menakjubkan! Tiada dua dunia yang sama.

▸ Setiap butiran kecil adalah rawak dan boleh disesuaikan, malah lipatan pada kelopak!

▸ Pelbagai objek dan pemandangan dalam alam semula jadi: tumbuhan, haiwan, rupa bumi, awan, hujan dan salji;

▸ Anotasi automatik kebenaran tanah: aliran optik, aliran pemandangan 3D, kedalaman, vektor normal permukaan, pembahagian panorama, sempadan tertutup.

▸ Ditulis dalam Blender.

Sesetengah netizen berkata bahawa ini benar-benar membuka mata saya. Menjana dunia 3D secara prosedural dalam Blender. Tanpa menggunakan AI, anda boleh mencipta mana-mana dunia yang anda boleh bayangkan.

Gabungkan alatan seperti Daz3D untuk mencipta aksara, Makmal Sekatan untuk mencipta kotak langit dan Convai untuk mencipta NPC.

Yang lain berkata Infinigen akan memainkan peranan dalam penyelidikan penglihatan komputer kecerdasan buatan.

Dia percaya kecerdasan buatan akan mengendalikan segala-galanya pada masa hadapan.

Contohnya kita nak buat kampung dengan air terjun dalam hutan berkabus.

Kami memberitahu AI untuk menulis penerangan terperinci tentang hutan dan menghantarnya kepada penjana dunia 3D.

Selepas dunia dijana, anda boleh menambah watak ke kampung. Mereka ini akan dikawal oleh kecerdasan buatan dan mereka akan mempunyai interaksi, perbualan dan kenangan.

Sejenis tangkapan Westworld.

Selain itu, beberapa netizen mengatakan bahawa generasi prosedural telah wujud selama 20 tahun (saya telah melakukannya selama 15 tahun). "No Man's SKy" ialah contoh teknologi yang hebat dari 5 tahun lalu.

Kemuncak Infinigen ialah ia menjana data berlabel. Data ini boleh digunakan untuk melatih AI. Itu gila.

Sesetengah netizen membayangkan dalam masa terdekat ini, permainan akan menjadi gila... "Independent" pembangunan permainan Pemain akan dapat melancarkan beberapa kandungan mewah yang gila.

Generasi Infinigen sangat realistik sehingga sesetengah orang menyangka ia dijana oleh Unreal Engine.

Pengenalan Pengarang

Alexander Raistrick

Alexander Raistrick ialah pelajar kedoktoran tahun kedua di Jabatan Sains Komputer di Princeton University, dan penyelianya ialah Jia Deng.

Lahav Lipson

Lahav Lipson ialah Pelajar kedoktoran tahun tiga di Universiti Princeton.

Penyelidikannya memfokuskan pada membina rangkaian dalam untuk penglihatan 3D, memanfaatkan andaian yang kukuh tentang geometri epipolar untuk mencapai generalisasi dan ketepatan ujian yang lebih baik.

Zeyu Ma

Zeyu Ma is Calon kedoktoran tahun ketiga di Makmal Visi dan Pembelajaran di Universiti Princeton. Beliau menerima ijazah sarjana muda dalam kejuruteraan elektronik dari Universiti Tsinghua pada 2020. Penyelidikan semasa memfokuskan pada pembinaan semula 3D berbilang paparan dan penjanaan data prosedur.

Atas ialah kandungan terperinci Princeton Infinigen Matrix dibuka! Pencipta AI mencipta alam semula jadi 100%, sangat hidup sehingga ia meletup. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!