Adakah industri anotasi pemanduan autonomi akan ditumbangkan oleh model dunia pada 2024?

1. Masalah yang dihadapi oleh anotasi data (terutamanya berdasarkan tugasan BEV)

Dengan peningkatan tugas berasaskan transformer BEV, pergantungan kepada data menjadi semakin berat dan berat Anotasi tugasan berasaskan BEV juga menjadi semakin penting . Pada masa ini, sama ada anotasi halangan bersama 2D-3D, garisan lorong berdasarkan klip awan titik yang dibina semula atau anotasi tugas Occpuancy, ia masih terlalu mahal (berbanding dengan tugas anotasi 2D, ia jauh lebih mahal). Sudah tentu, terdapat juga banyak kajian anotasi separa automatik atau automatik berdasarkan model besar dalam industri. Sebaliknya, kitaran pengumpulan data untuk pemanduan autonomi adalah terlalu panjang dan melibatkan beberapa siri isu pematuhan data. Sebagai contoh, jika anda ingin mengumpul adegan di mana trak katil rata melintasi kamera, atau adegan di mana bilangan lorong di bandar berubah daripada lebih kepada kurang, atau daripada kurang kepada lebih, anda memerlukan kakitangan pengumpulan untuk membina khas seperti itu. satu adegan.

Adakah 2.24 akan menjadi momen singulariti untuk model dunia?

Konsep model dunia merangkumi julat yang luas dan boleh dianggap sebagai simulasi sensor. Pada Hari AI Tesla, saya menyaksikan buat pertama kalinya kesan gangguan teknologi simulasi pada anotasi data. . Memandangkan semakin ramai penyelidik melabur dalam bidang ini, kami melihat banyak hasil penyelidikan yang cemerlang. Sistem simulasi pemanduan autonomi UniSim mempunyai fungsi seperti main semula, kawalan tingkah laku objek dinamik, dan paparan paparan bebas Fungsi ini sangat diingini untuk setiap penyelidik model yang sedang berlatih.

Anda juga boleh mensimulasikan lidar.

Untuk butiran, lihat: https://zhuanlan.zhihu.com/p/636695025 Terdapat lebih banyak kajian serupa ke arah ini.

NeuRAD: Rendering Neural untuk Pemanduan Autonomi

DrivingGaussian: Percikan Gaussian Komposit untuk Adegan Pemanduan Autonomi Dinamik Sekeliling Kebanyakan kaedah di atas adalah agak berat dan berkaitan dengan keseluruhan talian paip Nerf. Terdapat hala tuju lain, hala tuju penyelidikan berdasarkan penyebaran. Kajian yang baik juga telah dilakukan.

BEVControl: Mengawal Elemen Paparan Jalan dengan Tepat dengan Konsistensi Pelbagai perspektif melalui Reka Letak Lakaran BEV