Meta melancarkan chatbot dengan 175 bilion parameter yang boleh berkomunikasi dengan manusia juga! Ia boleh mengelakkan masalah permainan buruk.

​Baru-baru ini, Meta telah membuat satu lagi langkah besar.

Mereka mengeluarkan chatbot terbaharu yang dibangunkan - BlenderBot3, dan data penggunaan pengguna yang dikumpul secara terbuka sebagai maklum balas.

Dikatakan bahawa anda boleh berbual dengan BlenderBot3 tentang apa sahaja, ia adalah chatbot peringkat SOTA.

Adakah ia benar-benar bijak?

Gambar di atas adalah rekod sembang antara netizen dan BlenderBot. Seperti yang anda lihat, ia sebenarnya hanya berbual.

Pengguna berkata dia akan berlatih yoga dan bertanya kepada BlenderBot apa yang dia mahu lakukan. Robot itu berkata dia sedang menulis buku kesembilan.

BlenderBot 3 yang menakjubkan

Bot sembang terbaharu ini dicipta oleh Makmal Penyelidikan Kepintaran Buatan Meta dan merupakan robot parameter 175B Meta yang pertama. Semua bahagian model, kod, set data, dll., semuanya terbuka dan tersedia untuk semua orang.

Meta berkata bahawa pada BlenderBot3, pengguna boleh bersembang tentang sebarang topik di Internet.

BlenderBot3 menggunakan dua teknologi pembelajaran mesin terkini yang dibangunkan oleh Meta - SeeKeR dan Pengarah, dan menggunakan ini untuk mewujudkan model dialog yang membolehkan robot belajar daripada interaksi dan maklum balas.

Kurt Shuste, seorang jurutera penyelidik yang mengambil bahagian dalam pembangunan BlenderBot3, berkata, "Meta komited untuk mengeluarkan semua data yang kami kumpulkan secara terbuka semasa menunjukkan chatbot ini, dengan harapan kami dapat meningkatkan kecerdasan buatan perbualan." terma kandungan, Lihat, BlenderBot3 bukanlah baharu sepenuhnya. Model asasnya masih merupakan model bahasa yang besar, dan LLMS, yang merupakan perisian penjanaan teks yang sangat berkuasa (walaupun ia mempunyai beberapa kelemahan).

Seperti semua perisian penjanaan teks, BlenderBot3 pada mulanya dilatih pada set data teks yang besar Pada set data ini, BlenderBot boleh melombong pelbagai corak statistik dan kemudian menjana bahasa.

Sama seperti GPT-3 buruk yang kami katakan.

Selain perkara di atas, BlenderBot3 juga mempunyai beberapa sorotan.

Berbeza dengan chatbot sebelum ini, apabila bersembang dengan BlenderBot, pengguna boleh mengklik pada jawapan yang diberikan oleh robot untuk melihat sumber ayat di Internet. Dengan kata lain, BlenderBot3 boleh memetik sumber.

Walau bagaimanapun, terdapat isu yang sangat kritikal di sini. Iaitu, apabila mana-mana chatbot dikeluarkan kepada umum, ini bermakna sesiapa sahaja boleh berinteraksi dengannya. Apabila pangkalan orang mengujinya meningkat, pasti akan ada gelombang orang yang ingin "merosakkannya".

Ini juga menjadi tumpuan penyelidikan seterusnya pasukan Meta.

Ia adalah perkara biasa untuk chatbots rosak.

Pada 2016, Microsoft mengeluarkan chatbot yang dipanggil Tay di Twitter Sesiapa yang telah mengikuti Tay mesti masih kagum.

Selepas beta awam bermula, Tay mula belajar daripada interaksi dengan pengguna. Tidak menghairankan, ia tidak mengambil masa yang lama sebelum Tay, di bawah pengaruh sekumpulan kecil pengacau, mula mengeluarkan satu siri kenyataan yang berkaitan dengan perkauman, anti-Semitisme, dan kebencian terhadap perempuan.

Microsoft melihat bahawa keadaan tidak baik dan membawa Tay ke luar talian dalam masa kurang daripada 24 jam.

Meta berkata sejak Tay menemui Waterloo, dunia AI telah berkembang dengan pesat. BlenderBot mempunyai pelbagai jaminan keselamatan yang sepatutnya menghalang Meta daripada mengikuti laluan Microsoft.

Eksperimen awal menunjukkan bahawa apabila lebih ramai orang boleh mengambil bahagian dalam interaksi dengan model, robot boleh mempelajari lebih lanjut daripada pengalaman perbualan. Apabila masa berlalu, BlenderBot3 akan menjadi lebih selamat.

Nampaknya Meta telah melakukan kerja yang cukup baik dalam hal ini.

Mary Williamson, pengurus kejuruteraan penyelidikan di Facebook Artificial Intelligence Research (FAIR), berkata, “Perbezaan paling kritikal antara Tay dan BlenderBot3 ialah Tay direka untuk belajar dalam masa nyata daripada interaksi pengguna, manakala BlenderBot ialah Model statik. "

Ini bermakna BlenderBot dapat mengingati apa yang dikatakan pengguna dalam perbualan (malah ia akan mengekalkan maklumat ini melalui kuki penyemak imbas jika pengguna keluar dari program dan kembali pada masa yang lain), tetapi data ini hanya akan digunakan untuk menambah baik sistem.

Williamson berkata, “Hari ini, kebanyakan chatbot berorientasikan tugasan Ambil robot perkhidmatan pelanggan yang paling mudah sebagai contoh, tetapi ia sebenarnya hanyalah pokok dialog yang diprogramkan secara perlahan-lahan keperluan pengguna, dan akhirnya perlu menyambung secara manual "

Kejayaan sebenar ialah membenarkan robot bercakap dengan bebas seperti manusia. Inilah yang Meta mahu lakukan. Selain meletakkan BlenderBot 3 dalam talian, Meta juga telah mengeluarkan kod asas, set data latihan dan varian model yang lebih kecil. Penyelidik boleh meminta akses melalui borang di sini.

Atas ialah kandungan terperinci Meta melancarkan chatbot dengan 175 bilion parameter yang boleh berkomunikasi dengan manusia juga! Ia boleh mengelakkan masalah permainan buruk.. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!