Seorang lagi pemain tahap Sora akan datang ke jalanan! Kami membandingkannya dengan Sora dan Keling.

Apabila Sora gagal keluar, lawan OpenAI menggunakan senjata mereka untuk memusnahkan jalanan.

Sora benar-benar akan dicuri jika ia tidak dibuka untuk digunakan!

Hari ini, pemula San Francisco Luma AI memainkan kad truf dan melancarkan generasi baharu model penjanaan video AI Dream Machine. Percuma dan tersedia untuk semua orang.

Menurut laporan, model ini boleh menjana video realistik berkualiti tinggi berdasarkan penerangan teks ringkas, dengan kesan yang setanding dengan Sora.

Sebaik sahaja berita itu keluar, sebilangan besar pengguna menyerbu ke laman web rasmi untuk mencubanya.

Walaupun pihak rasmi mendakwa model itu boleh menjana 120 bingkai video dalam masa dua minit sahaja, ramai pengguna telah menunggu berjam-jam di laman web rasmi berikutan lonjakan trafik.

Barkley Dai, ketua pertumbuhan produk Luma, terpaksa menyiarkan di Discord untuk menjelaskan -

"Kami sedang menghadapi permintaan yang besar dan sedang berusaha keras untuk meningkatkan keupayaan pemprosesan kami. Semua tugas penjanaan video akan dikekalkan, seperti yang diperlukan Tunggu dalam barisan untuk seketika Setelah kami meningkatkan kapasiti pemprosesan, saya akan memberitahu anda di sini!"

Sejauh manakah Mesin Impian?

Sesetengah netizen berkata Luma kini merupakan raja baharu dalam bidang video AI.

Sesetengah netizen berkata, "Kami tidak lagi memerlukan Sora!"

Namun, ada netizen yang mengadu selepas membuat 8 video, sistem tersebut menggesa "melebihi had penggunaan maksimum" dan tidak menjelaskan berapa lama mereka perlu menunggu sebelum membuat video baharu.

Netizen menjadi gila

Dalam beberapa hari yang lalu, kalangan video AI telah menjadi gila.

Pertama, Kuaishou Keling membuka beta tertutup, dengan lebih daripada 50,000 orang beratur, Kemudian Luma melancarkan ciri pembunuhnya, Dream Machine, yang percuma untuk semua orang.

Berbanding dengan model video AI yang lain, Dream Machine mempunyai ciri-ciri berikut:

1 Pantas, 120 bingkai boleh dijana dalam 120 saat,

2 Kemahiran fotografi tahap filem dan ketegangan dramatik;

Para pegawai Luma dan netizen telah bekerjasama satu demi satu untuk menyampaikan jamuan visual yang indah.

Sebagai contoh, video yang dihasilkan teks ini menunjukkan sebuah kereta meluncur laju di jalan raya. Sama ada pemanduan atau peralihan kamera, semuanya lancar dan seperti hidup.

Kamera rendah ke tanah menjejaki sekumpulan hamster kecil jauh ke dalam lubang mereka. Adegan ini serupa dengan video semut Sora, tetapi Dream Machine menggunakan fungsi video Tusheng, yang biasanya dikenali sebagai "kusyen".

Seorang lelaki botak yang memakai kemeja-T oren bergerak di sekeliling bilik.

Ini adalah gambar pemandangan runtuhan. Tali yang dibuang, papan kayu di atas tanah dan grafiti di dinding kelihatan semula jadi dan realistik.Dalam gambar, seorang wanita muda sedang menari sambil melambai-lambai skirt, pergerakannya licin dan mengalir, seperti blockbuster iklan mewah. Walau bagaimanapun, satu-satunya kelemahan ialah skirt dan rambut akan berubah bentuk. Sesetengah netizen malah menghasilkan adegan aksi tembak membunuh. Netizen @ai_mov_director juga menggunakannya untuk menghasilkan filem berdurasi 1 minit - "Break The Tie".

Selain menjana video realistik, Dream Machine juga boleh mencuba gaya yang berbeza.

Contohnya, gaya anime Jepun: Gaya Disney:

Secara keseluruhannya, Dream Machine patut dipuji dari segi kesetiaan dan kelancaran video, tetapi ia tidak sempurna.

Julien Vallee yang pernah mengarahkan iklan untuk Apple, Samsung, Google dan jenama terkenal lain berkata Dream Machine boleh meniru pergerakan kamera semula jadi, terutamanya apabila merakam secara pegang tangan, kesannya sangat realistik. Walau bagaimanapun, seperti model lain, ia memerlukan beberapa percubaan dan kesilapan untuk menghasilkan tangkapan yang hebat.

Vincent Video Circle Battle

2024 ialah tahun pilihan raya, dan OpenAI telah menyembunyikan Sora agar tidak menimbulkan masalah.

Apabila "ribuan panggilan" Sora tidak keluar, pihak lawan menggunakan senjata besar mereka untuk memusnahkan jalanan.

Medan video AI sedang mengalami perubahan pesat.

Oleh kerana kedua-dua Dream Machine dan Keling berada di bawah panji-panji "bertanding melawan Sora", maka kami hanya menyediakan arena dan membiarkan Dream Machine, Keling dan Sora bersaing di pentas yang sama.

Prompt 1:video dekat fotorealistik dua kapal lanun bertempur antara satu sama lain semasa mereka belayar di dalam secawan kopi.

sora:

dream mesin:

keling:

prompt 2: rakaman malam ketam pertapa menggunakan mentol lampu sebagai shells.

perkataan cina 2: sojourn night pukulan ketam menggunakan mentol sebagai cangkerang.

Sora:

Mesin Idaman:

Keling:

Prompt 3: tangkapan makro daun yang menunjukkan kereta api kecil bergerak melalui uratnya. . Dia pakai jaket kulit hitam, gaun merah panjang, dan but hitam, dan membawa dompet hitam Dia memakai cermin mata hitam dan gincu merah Dia berjalan dengan yakin dan bersahaja pejalan kaki berjalan-jalan.

Kata Prompt Bahasa Cina 4: Seorang wanita bergaya berjalan di jalanan Tokyo, yang penuh dengan lampu neon hangat dan papan tanda bandar yang terang. Dia memakai jaket kulit hitam, skirt merah panjang, but hitam, dan memegang dompet hitam. Dia memakai cermin mata hitam dan gincu merah. Dia berjalan dengan yakin dan mudah. Jalan-jalannya basah dan memantulkan cahaya, mencipta kesan cermin lampu berwarna. Ramai pejalan kaki berjalan-jalan.

Sora：

Mesin Impian：

Keling：

Mesin Penjagaan yang hebat di dalam arkitek, pengesanan plastik dan kerusi prompt 5: .

Petua Cina 5: Ahli arkeologi menemui kerusi plastik biasa di padang pasir Mereka dengan teliti menggali dan membersihkannya.

sora:

dream Machine:

keling:

Prompt 6: Retreiver Labrador Hacker Komputer Memakai sweatshirt berkerudung hitam yang duduk di hadapan komputer dengan silau skrin terpancar pada muka anjing itu semasa dia menaip dengan sangat pantas.

Kata gesaan Cina 6: Penggodam komputer Labrador retriever memakai baju peluh bertudung hitam duduk di hadapan komputer dan semasa dia menaip dengan cepat, skrin silau itu mengenai muka anjing itu. .

Sora:

Mesin Idaman:

Keling:

Apakah asal usul syarikat yang dipimpin oleh NVIDIA ini?

Dream Machine telah menjadi popular, dan syarikat di belakangnya, Luma AI, juga telah mencuri tumpuan.

Luma AI diasaskan pada 2021 dan pada mulanya merupakan sebuah syarikat teknologi yang memfokuskan pada penjanaan kandungan 3D.

CEO Amit Jain ialah jurutera sistem penglihatan komputer di Apple, dan CTO Alex Yu ialah pelajar siswazah di University of California, Berkeley (dia melepaskan PhDnya untuk memulakan Luma AI). Kedua-duanya telah membuat pencapaian dalam bidang penglihatan 3D, pembelajaran mesin, grafik masa nyata dan bidang lain.

Khabarnya syarikat ini telah melalui beberapa pusingan pembiayaan.

Pembiayaan Siri A diterajui oleh Amplify Partners, Nventures (cabang pelaburan Nvidia) dan General Catalyst, mengumpul sejumlah AS$20 juta pembiayaan Siri B diterajui oleh firma modal teroka terkemuka Silicon Valley Andreessen Horowitz dan Nvidia; , mengumpul US$43 juta Dolar. Sehingga kini, syarikat itu telah mengumpulkan lebih daripada $70 juta dalam pembiayaan dan bernilai antara $200 juta dan $300 juta.

November lalu, Luma AI melancarkan Vincent 3D model Genie pada pelayan Discord. Kemudian, versi 1.0 telah dilancarkan, yang meningkatkan masa lukisan daripada lebih daripada 20 saat kepada kurang daripada 10 saat.

Tak sangka kali ini Luma AI terus beralih ke bidang video AI.

Menurut laman web rasmi, pasukan teras Luma AI hanya mempunyai 34 orang, dan jika dilihat dari namanya, 5 daripadanya adalah berbangsa Cina.

Pengasas bersama dan CTO Alex Yu, lulus dari University of California, Berkeley pada 2021. Dalam tempoh ini, beliau menjalankan penyelidikan NeRFs bersama Profesor Angjoo Kanazawa di Makmal Penyelidikan Kepintaran Buatan Berkeley.

Angela Dong lulus dari University of California, Berkeley pada tahun yang sama Dia telah menjalani latihan di syarikat seperti Drive.ai, Lyft Level 5 dan Zipline, dan kemudian menyertai Cruise sebagai jurutera simulasi, memfokuskan pada mencipta data sintetik. untuk latihan model persepsi. Pada masa ini, dia bekerja sebagai Jurutera Pembelajaran Mesin di Luma.

Ketua Saintis Jiaming Song lulus dari Universiti Tsinghua dengan ijazah sarjana muda dan ijazah sarjana dan kedoktoran dari Universiti Stanford. Sebelum menyertai Luma AI, beliau berkhidmat sebagai saintis penyelidikan dalam pasukan penyelidikan Pembelajaran dan Persepsi NVIDIA dan pasukan penyelidik Deep Imagination.

Selain itu, Quei-An Chen dan Paul Yoo berkhidmat sebagai saintis penyelidikan di Luma.

(Quei-An Chen di sebelah kiri, Paul Yoo di sebelah kanan)

Antaranya, Quei-An Chen terlibat secara mendalam dalam bidang NeRF dan telah menjadi terkenal kerana melancarkan banyak projek sumber terbuka yang popular pada Github seperti Medan Aliran Pemandangan Neural dan Instant-NGP. Sebelum menyertai Luma, beliau mengusahakan pelbagai projek teknologi penglihatan 3D di DENSO dan LINE.

^Pautan:

^{https://lumalabs.ai/dream-machine/creations}

Atas ialah kandungan terperinci Seorang lagi pemain tahap Sora akan datang ke jalanan! Kami membandingkannya dengan Sora dan Keling.. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!