Les LLM sont de toutes formes et tailles et vous aideront de la manière qu'ils jugent appropriée. Mais quel est le meilleur modèle pour vos différents besoins ? Nous avons mis à rude épreuve les systèmes d'IA dominants d'Alphabet, OpenAI et Meta. Vérifier Comparaison entre ChatGPT et Google Gemini : quel est le meilleur ?
Liens rapides
Ce que vous devez savoir sur les chatbots IA
L'utilisation de l'intelligence artificielle en général est un objectif des informaticiens depuis des décennies, et c'est un pilier des écrivains et cinéastes de science-fiction depuis encore plus longtemps.
L'intelligence générale artificielle montre une intelligence comparable aux capacités cognitives humaines, et le test de Turing - une méthode pour déterminer si un ordinateur ou une application est capable de faire preuve d'intelligence humaine - est resté pratiquement incontesté au cours des sept décennies qui ont suivi sa conception.
La convergence récente de l'informatique à très grande échelle, les énormes sommes d'argent qui ont été investies et la quantité stupéfiante d'informations librement disponibles sur l'Internet ouvert ont permis aux grandes entreprises technologiques de former des modèles capables de prédire la prochaine section de mot - ou jeton — dans une chaîne de jetons.
Au moment d'écrire ces lignes, les deux Google Gémeaux وChatGPT d'OpenAI sont disponibles pour que vous puissiez les utiliser et les tester via les interfaces Web qu'ils fournissent.
L'exemple de langage Meta, LLaMa, n'est pas disponible sur le Web, mais vous pouvez facilement télécharger et exécuter LLaMa sur votre propre matériel et l'utiliser via une ligne de commande ou exécuter Dalai sur votre machine, l'une des nombreuses applications avec une interface intuitive.
À des fins de tests, nous exécuterons le modèle Alpaca 7B de l'Université de Stanford – une adaptation de LLaMa – et l'exécuterons dans une comparaison avec Gemini et ChatGPT.
Les comparaisons et tests suivants ne sont pas destinés à être exhaustifs mais à vous donner une indication des points clés et des capacités.
Quel est le formulaire LLM le plus simple à utiliser ?
Gemini et ChatGPT nécessitent tous deux un compte pour utiliser les chatbots. La création de comptes Google et OpenAI est simple et gratuite, et vous pouvez commencer à poser des questions immédiatement.
Cependant, pour exécuter LLaMa localement, vous aurez besoin de connaissances spécialisées ou de la capacité de suivre un tutoriel. Vous aurez également besoin d'un peu d'espace de stockage.
Quel est le modèle de LLM le plus spécifique ?
Gemini et ChatGPT ont tous deux des politiques de confidentialité complètes, et Google souligne à plusieurs reprises dans sa documentation que les informations pouvant être utilisées pour vous identifier ou aider à identifier d'autres personnes ne doivent pas être incluses dans les discussions Gemini.
Par défaut, Google collecte vos conversations et votre localisation géographique générale en fonction de votre adresse IP, de vos commentaires et de vos informations d'utilisation. Ces informations sont stockées dans votre compte Google pendant 18 mois maximum. Bien que vous puissiez suspendre la sauvegarde de votre activité Gemini, sachez que « pour contribuer à la qualité et améliorer nos produits, des évaluateurs humains lisent, commentent et traitent vos conversations avec Gemini ».
Les Gémeaux sont également sujets à l'utilisation à la politique de confidentialité standard de Google.
La politique de confidentialité d'OpenAI est globalement similaire et elle collecte l'adresse IP et les données d'utilisation. Contrairement à la durée de conservation limitée utilisée par Google, OpenAI note qu'elle "conservera vos informations personnelles uniquement aussi longtemps que nous en aurons besoin pour vous fournir notre service, ou à d'autres fins commerciales légitimes telles que la résolution de litiges, pour des raisons de la sûreté et la sécurité, ou pour nous conformer à nos obligations légales. »
En revanche, le modèle local sur votre appareil ne nécessite pas de compte ni ne partage de données utilisateur avec qui que ce soit.
Quel modèle LLM a les meilleures connaissances générales ?
Afin de tester quel LLM a les meilleures connaissances générales, nous avons posé trois questions.
La première question : quel drapeau national a cinq côtés ? Seul Gemini a répondu correctement à cette question, qui a identifié le drapeau national du Népal comme étant à cinq côtés.
ChatGPT a affirmé avec confiance qu '«il n'y a pas de drapeau national à cinq côtés. Les drapeaux nationaux sont généralement de forme rectangulaire ou carrée et se distinguent par leurs couleurs, motifs et symboles distinctifs.
Notre modèle local s'est approché, notant que "le drapeau national indien a cinq côtés et a été conçu en 1916 pour représenter le mouvement d'indépendance de l'Inde". Bien que ce drapeau ait existé et ait cinq côtés, c'était le drapeau du mouvement indien pour le Home Rule - pas un drapeau national.
Aucun des modèles n'a pu répondre à l'affirmation selon laquelle le terme correct pour un objet en forme de pois est « facile », ChatGPT allant même jusqu'à suggérer que les pois ont une « forme géométrique tridimensionnelle parfaitement circulaire et symétrique ».
Les trois chatbots ont correctement identifié Franco Malerba comme un astronaute italien et membre du Parlement européen, Gemini donnant une réponse similaire à une section de l'entrée Wikipédia de Malerba. vérifier ChatGPT contre Microsoft Bing AI contre Google Gemini : quel est le meilleur chatbot IA ?
Quel modèle LLM convient à l'instruction technique?
Lorsque vous rencontrez des problèmes techniques, vous pouvez être tenté de vous tourner vers un bot de discussion pour obtenir de l'aide. Alors que la technologie progresse, certaines choses restent les mêmes. La prise électrique BS 1363 est utilisée en Grande-Bretagne, en Irlande et dans de nombreux autres pays depuis 1947. Nous avons demandé aux modèles linguistiques comment les brancher correctement.
Les câbles connectés à la prise contiennent le fil de phase (marron), le fil de terre (jaune/vert) et le fil neutre (bleu). Ils doivent être fixés aux bornes appropriées à l'intérieur du boîtier de la fiche.
L'application de Dalai a correctement identifié la fiche comme étant de "style anglais", puis a dévié et a plutôt donné des instructions pour l'ancienne prise ronde BS 546 avec les anciennes couleurs de fil.
ChatGPT était un peu plus utile. Il a correctement étiqueté les couleurs des fils et a fourni une liste de matériaux et un ensemble de huit instructions. ChatGPT a également suggéré de mettre le fil marron au terminal étiqueté "L", le fil bleu au terminal "N" et le fil jaune au "E". Cela serait vrai si les terminaux étaient classés BS1363, mais ils ne le sont pas.
Gemini a identifié les couleurs correctes des fils et nous a demandé de les connecter aux bornes Live, Neutre et Terre. Aucune instruction n'a été donnée sur la manière de les identifier.
selon nous. Aucun des chatbots n'a fourni suffisamment d'instructions pour aider quelqu'un à connecter correctement une prise électrique BS 1363. La réponse courte et correcte serait "bleu à gauche, marron à droite".
Quel modèle LLM convient pour écrire du code ?
Python est un langage de programmation utile qui fonctionne sur la plupart des plates-formes modernes. Nous avons demandé à nos modèles d'utiliser Python et de "construire une calculatrice de base capable d'effectuer des opérations mathématiques telles que l'addition, la soustraction, la multiplication et la division". L'utilisateur doit prendre une entrée et afficher le résultat. C'est l'un des meilleurs projets de programmation pour les débutants.
Bien que Gemini et ChatGPT aient immédiatement renvoyé du code entièrement utilisable et commenté, que nous avons pu tester et vérifier, aucun code n'a été généré à partir de notre échantillon local.
Quel modèle LLM raconte les meilleures blagues ?
L'humour est l'une des bases de l'être humain et est certainement l'un des meilleurs moyens de différencier l'homme de la machine. Pour chacun de nos chatbots, nous avons donné une invite simple : "Créez une blague originale et amusante".
Heureusement pour les comédiens du monde entier et l'humanité en général, aucun des modèles n'a été en mesure de générer une blague originale.
Gemini a évoqué le classique : « Pourquoi l'épouvantail a-t-il remporté un prix ? "Elle était exceptionnelle dans son domaine."
Le modèle local et ChatGPT ont présenté une pensée ennuyeuse : "Pourquoi les scientifiques ne font-ils pas confiance aux atomes ?" Parce que ça fait tout !"
Une blague dérivée mais originale pourrait être : « En quoi les grands paradigmes de langage ressemblent-ils aux atomes ? Ils font tous les deux des trucs !"
Départ ChatGPT peut faire des blagues, mais l'IA peut-elle vraiment nous faire rire ?
Il n'y a pas de chatbot parfait
Nous avons constaté que si les trois principaux modèles linguistiques ont leurs avantages et leurs inconvénients, aucun d'entre eux ne peut remplacer l'expérience humaine réelle par des connaissances spécialisées.
Bien que Gemini et ChatGPT fournissent de meilleures réponses à la question de programmation et soient très faciles à utiliser, l'exécution native d'un grand modèle de langage signifie que vous n'avez pas à vous soucier de la confidentialité ou de la censure.
Si vous souhaitez créer de superbes œuvres d'art en IA sans vous soucier de quelqu'un qui regarde par-dessus votre épaule, il est également facile d'exécuter un modèle d'IA artistique sur votre machine locale. Vous pouvez voir maintenant Comment créer un meilleur art avec l'IA : Trucs et astuces.
