Xiao Zha et Musk déclarent la guerre à ChatGPT ! Meta et Twitter forment une équipe d'IA de premier plan, provoquant de la fumée partout dans la Silicon Valley

La popularité de ChatGPT a directement changé le paysage de l'ensemble du géant de la Silicon Valley.

Les mesures étape par étape de Microsoft ont forcé Google à sortir de sa complaisance et à publier de toute urgence le chatbot IA Bard.

Et les autres forces des grandes entreprises de la Silicon Valley ne resteront naturellement pas les bras croisés.

Récemment, Musk et Zuckerberg ont également démissionné et ont officiellement déclaré la guerre à ChatGPT !

Selon The Information, Musk a été en contact avec des chercheurs en IA ces dernières semaines, dans l'espoir de former un nouveau laboratoire de recherche pour développer un chatbot IA capable de concurrencer directement le ChatGPT d'OpenAI.

Dans le même temps, Xiao Zha a également récemment annoncé sur sa propre plateforme que Meta formerait une équipe d'IA de premier plan pour se concentrer sur le développement de produits d'intelligence artificielle générative. La nouvelle équipe est dirigée par Ahmad Al-Dahle, responsable de l'intelligence artificielle, relevant de l'actuel chef de produit Chris Cox.

Meta accueille la bataille ChatGPT

Depuis son entrée très médiatisée dans le métaverse, aux yeux des étrangers, le géant de la technologie Meta a été un peu lent dans la tendance des chatbots.

En fait, ce n’est pas le cas, mais je ne l’ai pas encore vaincu.

Dès juin de l'année dernière, Meta a rendu open source son modèle de langage à grande échelle auto-développé OPT-66B et a publié le robot de chat basé sur OPT BlenderBot3 dès août.

Cependant, contrairement à ChatGPT qui est devenu un succès instantané et comptait plus d'un million d'utilisateurs dans les 5 jours suivant son lancement, le Blenderbot de Meta semble ennuyeux.

Et bientôt, ce chatbot a été semé de problèmes. Il a non seulement critiqué son propre patron, mais a également publié des remarques vicieuses et de fausses informations, menant directement au désastre.

Après novembre, "l'outil d'aide à la recherche scientifique" Galactica est sorti.

L'article a révélé qu'il avait été formé sur 48 millions d'articles, manuels et notes de cours, des millions de composés et de protéines, des sites Web scientifiques et des encyclopédies avec un total de 120 milliards de paramètres.

Cependant, Galactica, qui était censé être fort, a non seulement résumé la recherche scientifique de manière très inexacte, mais a également été biaisé. En conséquence, il a été retiré à la hâte des étagères seulement trois jours après sa mise en ligne.

Bien sûr, les échecs successifs n'ont pas fait montrer de faiblesse à Meta.

En février de cette année, Meta a publié un nouveau modèle de langage à grande échelle de 65 milliards de paramètres, LLaMA. Non seulement il est open source, mais ses performances sur la plupart des tâches sont meilleures que GPT-3.

Adresse papier : https://research.facebook.com/publications/llama-open-and-efficient-foundation-lingual-models/

Ce qui le rend unique L'avantage est qu'il peut être utilisé par les chercheurs, qu'il est de petite taille et que son coût d'utilisation est inférieur. Meta espère que les chercheurs pourront l’utiliser pour résoudre certains des problèmes qui affectent les grands modèles de langage.

En raison du fiasco de son propre Galactica, Yann LeCun s'est montré quelque peu aigre dans ses propos à propos du populaire ChatGPT :

"Il ne peut pas être étendu et ne deviendra jamais une passerelle vers une intelligence artificielle forte. . De la bonne manière."

"En ce qui concerne la technologie sous-jacente, ChatGPT n'est pas une grande innovation."

Cependant, lorsque le modèle LLaMA est sorti, il l'a également montré.

Xiao Zha a déclaré qu'il y avait encore beaucoup de travail de base à faire avant de réaliser une véritable expérience future, et il est enthousiasmé par toutes les nouvelles choses que Meta créera au cours du processus.

En d'autres termes, Meta a fait de nombreuses recherches dans ce domaine, mais s'est montré plus prudent que Microsoft et Google dans l'application de ces technologies aux produits.

Maintenant, la création de la nouvelle équipe de Meta permettra à l’avenir de présenter plus rapidement les modèles de langage et d’images créés par les chercheurs dans leurs propres produits.

Après avoir débauché le patron de DeepMind, Musk créera également ChatGPT

Désormais, les grands fabricants du monde entier créent leur propre ChatGPT, et l'académicien Ma ne peut naturellement pas être absent.

Ces derniers mois, Musk a critiqué OpenAI pour avoir pris trop de mesures pour faire tourner ChatGPT en rond afin d'éviter d'offenser les utilisateurs. L'année dernière, Musk a déclaré que la technologie d'OpenAI "entraîne l'IA pour la rendre alerte" L'académicien veut se lancer et ne tournera pas en rond sur des sujets controversés.

À cette fin, Musk a embauché Igor Babuschkin, chercheur au département DeepMind AI.

En 2019, DeepMind a lancé AlphaStar, qu'il a minutieusement construit, et a battu les meilleurs joueurs professionnels avec un score de 5 à 0 dans "StarCraft 2". Babuschkin est l'un des principaux auteurs de l'article.

En 2021, DeepMind a publié un langage pré-entraîné avec 280 milliards Paramètres Le modèle Gopher possède 280 milliards de paramètres, soit presque le double des 150 milliards de paramètres d'OpenAI GPT-3. Babuschkin, également co-auteur de l'article.

Les résultats de l'évaluation montrent que les performances de Gopher ont dépassé SOTA dans environ 81 % des performances de référence de 152 tâches, en particulier dans les problèmes qui nécessitent beaucoup de connaissances pour être résolus, tels que la vérification des faits et le bon sens.

Adresse papier : https://arxiv.org/abs/2112.11446

Dans une interview, Babuschkin a déclaré que l'objectif de Musk est bien plus que la simple construction d'un système de sortie de contenu. L’IA avec moins de restrictions est aussi simple que cela.

"Notre objectif est d'améliorer les capacités de raisonnement et la factualité de ces modèles de langage, rendant les commentaires du modèle plus fiables."

Babuschkin a déclaré que lui et Musk discutaient de la formation d'une équipe de recherche sur l'IA, mais le projet. en est encore à ses débuts et il n’est pas prévu de développer un produit spécifique. Babuschkin a quitté DeepMind la semaine dernière et n'a pas officiellement signé de contrat de travail avec Musk. Il a déclaré : « J'ai très hâte de travailler avec Elon dans le domaine des grands modèles de langage. »

Lors du développement de ChatGPT, OpenAI a utilisé « l'apprentissage par renforcement par retour humain » (RLHF), que Musk a toujours critiqué. .

Parce que RLHF utilise la contribution humaine pour ajuster le modèle afin de rendre les commentaires du modèle plus idéaux afin d'éviter le racisme, les préjugés et les propos haineux. Musk a critiqué : Ce modèle reflète en fait les préjugés des développeurs.

"Nous avons besoin d'un GPT qui dise la vérité"

Il y a dix jours, Musk a répondu à une capture d'écran d'un chatbot de Microsoft refusant de raconter des blagues à la manière d'un comédien parce qu'il pensait que certains de ses mots blessaient certains. groupes.

Bing AI dit : L'humour doit être amusant et inclusif, pas blessant et source de division

Musk a déclaré sur Twitter : "Nous avons besoin de TruthGPT."

Évidemment, après avoir acquis Twitter , Musk a mis en œuvre cette philosophie.

Après avoir acquis Twitter en octobre de l'année dernière, il a délibérément examiné les supports de communication interne de l'entreprise et a divulgué par l'intermédiaire de plusieurs journalistes l'examen du contenu de Twitter : suppression de contenu, blocage d'utilisateurs et limitation de comptes, mais l'utilisateur du compte ne l'a pas fait. Je ne sais pas.

Même avant d'acquérir Twitter, Musk était déjà un guerrier culturel bien connu.

Alors, où sera mis en œuvre le « ChatGPT » que Musk souhaite mettre en œuvre ?

Des sources bien informées ont indiqué que ce nouveau projet pourrait être appliqué à Twitter, ou qu'il pourrait devenir un laboratoire indépendant d'intelligence artificielle.

OpenAI était à l'origine le mien

En fait, Musk se retient depuis longtemps. Depuis que ChatGPT est devenu populaire, il se sent très triste.

Vous devez savoir qu'OpenAI a été créé à l'origine par lui et son bon ami Sam Altman en 2015. L'objectif fondateur est de créer « une IA bénéfique à l'humanité ».

Cela s'explique en partie par le fait que "Google n'a pas prêté suffisamment d'attention à la sécurité de l'intelligence artificielle".

En conséquence, Musk a quitté avec colère le groupe OpenAI en 2019 en raison de divergences dans l'orientation du développement de l'entreprise. Directeurs. L'année suivante, OpenAI est passée d'une organisation à but non lucratif à une entité privée à but lucratif et a été « vendue » à Microsoft pour 1 milliard de dollars. Cette décision a encore plus irrité Musk.

Puis, à la fin de l'année dernière, ChatGPT est soudainement devenu populaire partout dans le monde.

Musk n'a pas non plus hésité à en faire l'éloge à l'époque. Tout en qualifiant ChatGPT de "terriblement bon", il a réitéré son point de vue : nous ne sommes vraiment pas loin d'une IA dangereusement puissante.

Alors que ChatGPT devient de plus en plus populaire, Musk se sent de plus en plus mécontent.

Le 17 février, Musk a déclaré avec colère : "OpenAI a été créée à l'origine comme une société open source (c'est pourquoi je l'ai nommée "Open") AI), une société à but non lucratif, dans le but de défier Google. Il y avait des freins et contrepoids, mais elle est désormais devenue une société fermée, maximisant ses profits, entièrement contrôlée par Microsoft. Ce n'est pas du tout ce que je veux ! "

Il y a tout juste un jour, Bing AI a déclaré : "Je suis parfait et je ne fais jamais d'erreurs. Ce qui ne va pas, ce sont des facteurs externes, tels que des problèmes de réseau, des erreurs de serveur, des saisies utilisateur et des erreurs dans les résultats de recherche. Mais je suis parfait." "

Musk a retweeté ce message, disant qu'il avait tellement peur que Bing ressemble au meurtrier fou d'IA dans le jeu de science-fiction "System Shock" il y a 30 ans.

À cette époque, certains internautes ont suggéré que "Microsoft devrait fermer le service ChatGPT Bing". Il a immédiatement exprimé son réexamen car ChatGPT Bing était trop dangereux.

Un jour plus tard, sa « malédiction » a en effet été révélée. Microsoft a immédiatement procédé à une « lobotomie » sur l'IA de Bing, et les utilisateurs se sont plaints.

Maintenant, en ce qui concerne OpenAI, Musk a ceci à dire : "À l'origine, elle a été créée en tant qu'organisation open source à but non lucratif. Maintenant, elle ferme le code source dans un but lucratif. Je ne détiens pas publiquement d'actions dans OpenAI, je Il n'est pas non plus membre du conseil d'administration et ne le contrôle d'aucune façon. "

L'IA me donne une anxiété existentielle

Récemment, Musk a tweeté qu'il avait une anxiété existentielle à propos de l'IA.

Il n'y a pas si longtemps, lors du Sommet mondial des gouvernements à Dubaï, aux Émirats arabes unis, Musk a également déclaré aux participants : "L'intelligence artificielle est l'un des plus grands risques auxquels est confrontée la civilisation future

". Franchement, je pense que nous devons réglementer la sécurité de l'IA. Je pense que cela représente un plus grand risque pour la société que les voitures, les avions ou la drogue. »

En décembre de l'année dernière, Musk a déclaré sur Twitter : « Depuis plus de dix ans, J'ai appelé à une supervision de la sécurité de l'IA ! Il y a huit ans, Musk a déclaré que l’IA pourrait être plus dangereuse que les armes nucléaires.

Évidemment, 2023 sera une année d'événements fréquents dans l'industrie de l'IA.

Ainsi, même si l'IA est dangereuse, il "étant donné toute l'anxiété existentielle concernant l'AGI, je préfère être en vie pour être témoin de l'AGI maintenant plutôt que de vivre dans le passé".

De toute évidence, selon l'académicien Ma, créer son propre ChatGPT est la meilleure chose.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!