


Bagaimana untuk menyelesaikan masalah ekor panjang dalam senario pemanduan autonomi?
Dalam temu bual semalam, saya ditanya sama ada saya pernah melakukan sebarang soalan berkaitan ekor panjang, jadi saya fikir saya akan memberikan ringkasan ringkas.
Masalah ekor panjang kereta pandu sendiri merujuk kepada kes tepi dalam kereta pandu sendiri, iaitu, senario yang mungkin dengan kebarangkalian yang rendah untuk berlaku. Masalah ekor panjang yang dirasakan adalah salah satu sebab utama pada masa ini mengehadkan domain reka bentuk operasi kenderaan autonomi pintar satu kenderaan. Seni bina asas dan kebanyakan isu teknikal pemanduan autonomi telah diselesaikan, dan baki 5% masalah ekor panjang secara beransur-ansur menjadi kunci untuk menyekat pembangunan pemanduan autonomi. Masalah ini termasuk pelbagai senario yang berpecah-belah, situasi yang melampau dan tingkah laku manusia yang tidak dapat diramalkan.
Senario Tepi dalam Pemanduan Berautonomi
"Ekor panjang" merujuk kepada kes tepi dalam kenderaan autonomi (AV Edge) adalah senario yang mungkin berlaku dengan kebarangkalian yang rendah. Peristiwa yang jarang berlaku ini sering terlepas dalam set data kerana ia berlaku kurang kerap dan lebih unik. Walaupun manusia secara semula jadi mahir dalam mengendalikan kes tepi, perkara yang sama tidak boleh dikatakan untuk AI. Faktor-faktor yang boleh menyebabkan pemandangan tepi termasuk: trak atau kenderaan berbentuk khas dengan tonjolan, kenderaan membuat selekoh tajam, memandu dalam sesak orang ramai, pejalan kaki bersiar-siar, cuaca melampau atau keadaan pencahayaan yang buruk, orang memegang payung, orang di dalam kereta Kemudian memindahkan kotak, pokok tumbang di tengah jalan, dsb.Example:
- Putar filem telus di hadapan kereta, adakah objek telus akan diiktiraf, dan akan kenderaan itu melambatkan? belon terapung di tengah jalan? Kereta tanpa pemandu L4 cenderung untuk mengelakkan perlanggaran Dalam kes ini, mereka akan mengambil tindakan mengelak atau menggunakan brek untuk mengelakkan kemalangan yang tidak perlu. Belon adalah objek lembut dan boleh melepasi terus tanpa sebarang halangan.
- Kaedah untuk menyelesaikan masalah ekor panjang
Data sintetik adalah konsep yang besar, dan data persepsi (nerf, kamera/sensor sim) hanyalah salah satu cabang yang lebih cemerlang. Dalam industri, data sintetik telah lama menjadi jawapan standard dalam sim tingkah laku ekor panjang. Data sintetik, atau pensampelan isyarat jarang, adalah salah satu penyelesaian pertama kepada masalah ekor panjang. Keupayaan long-tail ialah hasil daripada keupayaan generalisasi model dan jumlah maklumat yang terkandung dalam data.
Penyelesaian Tesla:
Gunakan data sintetik untuk menjana pemandangan tepi untuk menambah set data
Prinsip enjin data: Pertama, mengesan ketidaktepatan dalam model sedia ada, dan kemudian gunakan kes Kelas ini yang ditambahkan pada ujian unitnya . Ia juga mengumpul lebih banyak data tentang kes serupa untuk melatih semula model. Pendekatan berulang ini membolehkannya menangkap sebanyak mungkin kes tepi. Cabaran utama dalam mencipta kes tepi ialah kos mengumpul dan melabel kes tepi adalah agak tinggi, dan yang lain ialah tingkah laku pengumpulan mungkin sangat berbahaya atau bahkan mustahil untuk dicapai.
Penyelesaian NVIDIA:
NVIDIA baru-baru ini mencadangkan pendekatan strategik yang dipanggil "Latihan Tiruan" (gambar di bawah). Dalam pendekatan ini, kes kegagalan sistem dunia sebenar dicipta semula dalam persekitaran simulasi dan kemudian digunakan sebagai data latihan untuk kenderaan autonomi. Kitaran ini diulang sehingga prestasi model menumpu. Matlamat pendekatan ini adalah untuk meningkatkan keteguhan sistem pemanduan autonomi dengan mensimulasikan senario kerosakan secara berterusan. Latihan simulasi membolehkan pembangun memahami dengan lebih baik dan menyelesaikan senario kegagalan yang berbeza dalam dunia sebenar. Di samping itu, ia boleh menjana sejumlah besar data latihan dengan cepat untuk meningkatkan prestasi model. Dengan mengulangi kitaran ini,
Dalam adegan sebenar berikut, disebabkan lori terlalu tinggi (atas) dan bahagian kenderaan yang menonjol menghalang kenderaan belakang (bawah), rangka kenderaan hilang apabila model itu berada. output dan menjadi pemandangan tepi Selepas penambahbaikan melalui NVIDIA Model boleh menghasilkan kotak sempadan yang betul dalam kes tepi ini.
Sesetengah pemikiran:
S: Adakah data sintetik berharga?
A: Nilai di sini terbahagi kepada dua jenis Yang pertama adalah keberkesanan ujian, iaitu, menguji sama ada beberapa kekurangan dalam algoritma pengesanan boleh ditemui dalam adegan yang dihasilkan digunakan Sama ada latihan algoritma juga boleh meningkatkan prestasi dengan berkesan. S: Bagaimana untuk menggunakan data maya untuk meningkatkan prestasi? Adakah perlu menambah data palsu pada set latihan? Adakah menambahkannya akan menyebabkan regresi prestasi? J: Soalan ini sukar dijawab, begitu banyak penyelesaian berbeza untuk meningkatkan ketepatan latihan telah dihasilkan:- Latihan hibrid: Tambahkan perkadaran data maya yang berbeza kepada data sebenar untuk meningkatkan prestasi
- Pembelajaran Pemindahan: Gunakan data sebenar untuk pralatih model, kemudian Pegunkan lapisan tertentu, dan kemudian tambahkan data bercampur untuk latihan.
- Pembelajaran Peniruan: Ia juga adalah wajar untuk mereka bentuk beberapa senario ralat model dan menjana beberapa data dengan itu secara beransur-ansur meningkatkan prestasi model. Dalam pengumpulan data sebenar dan latihan model, beberapa data tambahan juga dikumpul dalam cara yang disasarkan untuk meningkatkan prestasi.
Beberapa sambungan:
Untuk menilai secara menyeluruh keteguhan sistem AI, ujian unit mesti merangkumi kedua-dua kes am dan edge. Walau bagaimanapun, sesetengah kes kelebihan mungkin tidak tersedia daripada set data dunia sebenar sedia ada. Untuk melakukan ini, pengamal AI boleh menggunakan data sintetik untuk ujian.
Salah satu contoh ialah ParallelEye-CS, set data sintetik digunakan untuk menguji kecerdasan visual kenderaan autonomi. Faedah mencipta data sintetik berbanding menggunakan data dunia sebenar ialah kawalan berbilang dimensi ke atas pemandangan untuk setiap imej.
Data sintetik akan berfungsi sebagai penyelesaian yang berdaya maju untuk kes tepi dalam model AV pengeluaran. Ia menambah set data dunia sebenar dengan kes tepi, memastikan AV kekal teguh walaupun dalam kejadian luar biasa. Ia juga lebih berskala, kurang terdedah kepada ralat dan lebih murah daripada data dunia sebenar.
Atas ialah kandungan terperinci Bagaimana untuk menyelesaikan masalah ekor panjang dalam senario pemanduan autonomi?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Alat AI Hot

Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool
Gambar buka pakaian secara percuma

Clothoff.io
Penyingkiran pakaian AI

AI Hentai Generator
Menjana ai hentai secara percuma.

Artikel Panas

Alat panas

Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6
Alat pembangunan web visual

SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas

Ditulis di atas & pemahaman peribadi pengarang Gaussiansplatting tiga dimensi (3DGS) ialah teknologi transformatif yang telah muncul dalam bidang medan sinaran eksplisit dan grafik komputer dalam beberapa tahun kebelakangan ini. Kaedah inovatif ini dicirikan oleh penggunaan berjuta-juta Gaussians 3D, yang sangat berbeza daripada kaedah medan sinaran saraf (NeRF), yang terutamanya menggunakan model berasaskan koordinat tersirat untuk memetakan koordinat spatial kepada nilai piksel. Dengan perwakilan adegan yang eksplisit dan algoritma pemaparan yang boleh dibezakan, 3DGS bukan sahaja menjamin keupayaan pemaparan masa nyata, tetapi juga memperkenalkan tahap kawalan dan pengeditan adegan yang tidak pernah berlaku sebelum ini. Ini meletakkan 3DGS sebagai penukar permainan yang berpotensi untuk pembinaan semula dan perwakilan 3D generasi akan datang. Untuk tujuan ini, kami menyediakan gambaran keseluruhan sistematik tentang perkembangan dan kebimbangan terkini dalam bidang 3DGS buat kali pertama.

Semalam semasa temu bual, saya telah ditanya sama ada saya telah membuat sebarang soalan berkaitan ekor panjang, jadi saya fikir saya akan memberikan ringkasan ringkas. Masalah ekor panjang pemanduan autonomi merujuk kepada kes tepi dalam kenderaan autonomi, iaitu, kemungkinan senario dengan kebarangkalian yang rendah untuk berlaku. Masalah ekor panjang yang dirasakan adalah salah satu sebab utama yang kini mengehadkan domain reka bentuk pengendalian kenderaan autonomi pintar satu kenderaan. Seni bina asas dan kebanyakan isu teknikal pemanduan autonomi telah diselesaikan, dan baki 5% masalah ekor panjang secara beransur-ansur menjadi kunci untuk menyekat pembangunan pemanduan autonomi. Masalah ini termasuk pelbagai senario yang berpecah-belah, situasi yang melampau dan tingkah laku manusia yang tidak dapat diramalkan. "Ekor panjang" senario tepi dalam pemanduan autonomi merujuk kepada kes tepi dalam kenderaan autonomi (AVs) kes Edge adalah senario yang mungkin dengan kebarangkalian yang rendah untuk berlaku. kejadian yang jarang berlaku ini

0. Ditulis di hadapan&& Pemahaman peribadi bahawa sistem pemanduan autonomi bergantung pada persepsi lanjutan, membuat keputusan dan teknologi kawalan, dengan menggunakan pelbagai penderia (seperti kamera, lidar, radar, dll.) untuk melihat persekitaran sekeliling dan menggunakan algoritma dan model untuk analisis masa nyata dan membuat keputusan. Ini membolehkan kenderaan mengenali papan tanda jalan, mengesan dan menjejaki kenderaan lain, meramalkan tingkah laku pejalan kaki, dsb., dengan itu selamat beroperasi dan menyesuaikan diri dengan persekitaran trafik yang kompleks. Teknologi ini kini menarik perhatian meluas dan dianggap sebagai kawasan pembangunan penting dalam pengangkutan masa depan satu. Tetapi apa yang menyukarkan pemanduan autonomi ialah memikirkan cara membuat kereta itu memahami perkara yang berlaku di sekelilingnya. Ini memerlukan algoritma pengesanan objek tiga dimensi dalam sistem pemanduan autonomi boleh melihat dan menerangkan dengan tepat objek dalam persekitaran sekeliling, termasuk lokasinya,

Ramalan trajektori memainkan peranan penting dalam pemanduan autonomi Ramalan trajektori pemanduan autonomi merujuk kepada meramalkan trajektori pemanduan masa hadapan kenderaan dengan menganalisis pelbagai data semasa proses pemanduan kenderaan. Sebagai modul teras pemanduan autonomi, kualiti ramalan trajektori adalah penting untuk kawalan perancangan hiliran. Tugas ramalan trajektori mempunyai timbunan teknologi yang kaya dan memerlukan kebiasaan dengan persepsi dinamik/statik pemanduan autonomi, peta ketepatan tinggi, garisan lorong, kemahiran seni bina rangkaian saraf (CNN&GNN&Transformer), dll. Sangat sukar untuk bermula! Ramai peminat berharap untuk memulakan ramalan trajektori secepat mungkin dan mengelakkan perangkap Hari ini saya akan mengambil kira beberapa masalah biasa dan kaedah pembelajaran pengenalan untuk ramalan trajektori! Pengetahuan berkaitan pengenalan 1. Adakah kertas pratonton teratur? A: Tengok survey dulu, hlm

Tajuk asal: SIMPL: ASimpleandEfficientMulti-agentMotionPredictionBaselineforAutonomousDriving Paper pautan: https://arxiv.org/pdf/2402.02519.pdf Pautan kod: https://github.com/HKUST-Aerial-Robotics/SIMPL Unit pengarang: Universiti Sains Hong Kong dan Teknologi Idea Kertas DJI: Kertas kerja ini mencadangkan garis dasar ramalan pergerakan (SIMPL) yang mudah dan cekap untuk kenderaan autonomi. Berbanding dengan agen-sen tradisional

Ditulis di hadapan & titik permulaan Paradigma hujung ke hujung menggunakan rangka kerja bersatu untuk mencapai pelbagai tugas dalam sistem pemanduan autonomi. Walaupun kesederhanaan dan kejelasan paradigma ini, prestasi kaedah pemanduan autonomi hujung ke hujung pada subtugas masih jauh ketinggalan berbanding kaedah tugasan tunggal. Pada masa yang sama, ciri pandangan mata burung (BEV) padat yang digunakan secara meluas dalam kaedah hujung ke hujung sebelum ini menyukarkan untuk membuat skala kepada lebih banyak modaliti atau tugasan. Paradigma pemanduan autonomi hujung ke hujung (SparseAD) tertumpu carian jarang dicadangkan di sini, di mana carian jarang mewakili sepenuhnya keseluruhan senario pemanduan, termasuk ruang, masa dan tugas, tanpa sebarang perwakilan BEV yang padat. Khususnya, seni bina jarang bersatu direka bentuk untuk kesedaran tugas termasuk pengesanan, penjejakan dan pemetaan dalam talian. Di samping itu, berat

Pada bulan lalu, atas sebab-sebab yang diketahui umum, saya telah mengadakan pertukaran yang sangat intensif dengan pelbagai guru dan rakan sekelas dalam industri. Topik yang tidak dapat dielakkan dalam pertukaran secara semula jadi adalah hujung ke hujung dan Tesla FSDV12 yang popular. Saya ingin mengambil kesempatan ini untuk menyelesaikan beberapa buah fikiran dan pendapat saya pada masa ini untuk rujukan dan perbincangan anda. Bagaimana untuk mentakrifkan sistem pemanduan autonomi hujung ke hujung, dan apakah masalah yang sepatutnya dijangka diselesaikan hujung ke hujung? Menurut definisi yang paling tradisional, sistem hujung ke hujung merujuk kepada sistem yang memasukkan maklumat mentah daripada penderia dan secara langsung mengeluarkan pembolehubah yang membimbangkan tugas. Sebagai contoh, dalam pengecaman imej, CNN boleh dipanggil hujung-ke-hujung berbanding kaedah pengekstrak ciri + pengelas tradisional. Dalam tugas pemanduan autonomi, masukkan data daripada pelbagai penderia (kamera/LiDAR

Pengesanan objek ialah masalah yang agak matang dalam sistem pemanduan autonomi, antaranya pengesanan pejalan kaki adalah salah satu algoritma terawal untuk digunakan. Penyelidikan yang sangat komprehensif telah dijalankan dalam kebanyakan kertas kerja. Walau bagaimanapun, persepsi jarak menggunakan kamera fisheye untuk pandangan sekeliling agak kurang dikaji. Disebabkan herotan jejari yang besar, perwakilan kotak sempadan standard sukar dilaksanakan dalam kamera fisheye. Untuk mengurangkan perihalan di atas, kami meneroka kotak sempadan lanjutan, elips dan reka bentuk poligon am ke dalam perwakilan kutub/sudut dan mentakrifkan metrik mIOU pembahagian contoh untuk menganalisis perwakilan ini. Model fisheyeDetNet yang dicadangkan dengan bentuk poligon mengatasi model lain dan pada masa yang sama mencapai 49.5% mAP pada set data kamera fisheye Valeo untuk pemanduan autonomi
