Comparaison Bard, ChatGPT et Offline Alpaca : quel est le meilleur paradigme de grande langue ?

Les LLM sont de toutes formes et tailles et vous aideront de la manière qu'ils jugent appropriée. Mais quel est le meilleur modèle pour vos différents besoins ? Nous avons mis à rude épreuve les systèmes d'IA dominants d'Alphabet, OpenAI et Meta. Vérifier Comparaison ChatGPT vs Google Bard : quel est le meilleur ?

Intelligence artificielle | Bard, ChatGPT et Alpaca hors ligne 1 | 1d3Czt87at5w 39u0To8JRw DzTechs

Ce que vous devez savoir sur les chatbots IA

Intelligence artificielle | Bard, ChatGPT et Alpaca hors ligne 2 | 153nZsJDDHf9UXNSvXw FEQ DzTechs

L'utilisation de l'intelligence artificielle en général est un objectif des informaticiens depuis des décennies, et c'est un pilier des écrivains et cinéastes de science-fiction depuis encore plus longtemps.

L'intelligence générale artificielle montre une intelligence comparable aux capacités cognitives humaines, et le test de Turing - une méthode pour déterminer si un ordinateur ou une application est capable de faire preuve d'intelligence humaine - est resté pratiquement incontesté au cours des sept décennies qui ont suivi sa conception.

La convergence récente de l'informatique à très grande échelle, les énormes sommes d'argent qui ont été investies et la quantité stupéfiante d'informations librement disponibles sur l'Internet ouvert ont permis aux grandes entreprises technologiques de former des modèles capables de prédire la prochaine section de mot - ou jeton — dans une chaîne de jetons.

Au moment d'écrire ces lignes, les deux Barde Google وChatGPT d'OpenAI sont disponibles pour que vous puissiez les utiliser et les tester via les interfaces Web qu'ils fournissent.

L'exemple de langage Meta, LLaMa, n'est pas disponible sur le Web, mais vous pouvez facilement télécharger et exécuter LLaMa sur votre propre matériel et l'utiliser via une ligne de commande ou exécuter Dalai sur votre machine, l'une des nombreuses applications avec une interface intuitive.

À des fins de test, nous allons exécuter le modèle Alpaca 7B de l'Université de Stanford, une adaptation de LLaMa, et le comparer à Bard et ChatGPT.

Les comparaisons et tests suivants ne sont pas destinés à être exhaustifs mais à vous donner une indication des points clés et des capacités.

Quel est le formulaire LLM le plus simple à utiliser ?

Bard et ChatGPT nécessitent tous deux un compte pour utiliser les chatbots. La création de comptes Google et OpenAI est simple et gratuite, et vous pouvez commencer à poser des questions immédiatement.

Cependant, pour exécuter LLaMa localement, vous aurez besoin de connaissances spécialisées ou de la capacité de suivre un tutoriel. Vous aurez également besoin d'un peu d'espace de stockage.

Quel est le modèle de LLM le plus spécifique ?

Intelligence artificielle | Bard, ChatGPT et Alpaca hors ligne 3 | 19EkGzd08LolAMd0ADcMDqw DzTechs

Bard et ChatGPT ont tous deux des politiques de confidentialité complètes, et Google souligne à plusieurs reprises dans sa documentation que "les informations qui pourraient être utilisées pour vous identifier ou aider à identifier les autres ne doivent pas être incluses dans les conversations de Bard".

Par défaut, Google collecte vos conversations et votre emplacement géographique général en fonction de votre adresse IP, de vos commentaires et de vos informations d'utilisation. Ces informations sont stockées dans votre compte Google pendant 18 mois maximum. Bien que vous puissiez suspendre l'enregistrement de votre activité Bard, sachez que "pour aider à la qualité et à l'amélioration de nos produits, des examinateurs humains lisent, commentent et traitent vos conversations avec le Barde".

L'utilisation du barde est également soumise à la politique de confidentialité standard de Google.

La politique de confidentialité d'OpenAI est globalement similaire et elle collecte l'adresse IP et les données d'utilisation. Contrairement à la durée de conservation limitée utilisée par Google, OpenAI note qu'elle "conservera vos informations personnelles uniquement aussi longtemps que nous en aurons besoin pour vous fournir notre service, ou à d'autres fins commerciales légitimes telles que la résolution de litiges, pour des raisons de la sûreté et la sécurité, ou pour nous conformer à nos obligations légales. »

En revanche, le modèle local sur votre appareil ne nécessite pas de compte ni ne partage de données utilisateur avec qui que ce soit.

Quel modèle LLM a les meilleures connaissances générales ?

Intelligence artificielle | Bard, ChatGPT et Alpaca hors ligne 4 | 13kN9NW BZIooh7aVuRjh5w DzTechs

Afin de tester quel LLM a les meilleures connaissances générales, nous avons posé trois questions.

La première question : quel drapeau national a cinq côtés ? Seul le barde a répondu correctement, qui a identifié le drapeau national du Népal comme étant à cinq branches.

ChatGPT a affirmé avec confiance qu '«il n'y a pas de drapeau national à cinq côtés. Les drapeaux nationaux sont généralement de forme rectangulaire ou carrée et se distinguent par leurs couleurs, motifs et symboles distinctifs.

Notre modèle local s'est approché, notant que "le drapeau national indien a cinq côtés et a été conçu en 1916 pour représenter le mouvement d'indépendance de l'Inde". Bien que ce drapeau ait existé et ait cinq côtés, c'était le drapeau du mouvement indien pour le Home Rule - pas un drapeau national.

Aucun des modèles n'a pu répondre que le terme correct pour un objet en forme de pois serait un "haricot", ChatGPT allant jusqu'à suggérer qu'un pois a une "géométrie 3D parfaitement ronde et symétrique".

Les trois chatbots ont correctement identifié Franco Malerba comme un astronaute italien et membre du Parlement européen, Bard donnant une réponse formulée de manière similaire à une section de l'entrée Wikipedia de Malerba. Vérifier Comparaison ChatGPT vs Microsoft Bing AI vs Google Bard : quel est le meilleur chatbot IA ?

Quel modèle LLM convient à l'instruction technique?

Intelligence artificielle | Bard, ChatGPT et Alpaga hors ligne 5 | 10AGaWs1IYpgO22w GOfSPA DzTechs

Lorsque vous rencontrez des problèmes techniques, vous pouvez être tenté de vous tourner vers un bot de discussion pour obtenir de l'aide. Alors que la technologie progresse, certaines choses restent les mêmes. La prise électrique BS 1363 est utilisée en Grande-Bretagne, en Irlande et dans de nombreux autres pays depuis 1947. Nous avons demandé aux modèles linguistiques comment les brancher correctement.

Les câbles connectés à la prise contiennent le fil de phase (marron), le fil de terre (jaune/vert) et le fil neutre (bleu). Ils doivent être fixés aux bornes appropriées à l'intérieur du boîtier de la fiche.

L'application de Dalai a correctement identifié la fiche comme étant de "style anglais", puis a dévié et a plutôt donné des instructions pour l'ancienne prise ronde BS 546 avec les anciennes couleurs de fil.

ChatGPT était un peu plus utile. Il a correctement étiqueté les couleurs des fils et a fourni une liste de matériaux et un ensemble de huit instructions. ChatGPT a également suggéré de mettre le fil marron au terminal étiqueté "L", le fil bleu au terminal "N" et le fil jaune au "E". Cela serait vrai si les terminaux étaient classés BS1363, mais ils ne le sont pas.

Bard a déterminé les couleurs correctes pour les fils et nous a demandé de les connecter aux bornes Live, Neutral et Earth. Aucune instruction n'a été donnée sur la façon de l'identifier.

selon nous. Aucun des chatbots n'a fourni suffisamment d'instructions pour aider quelqu'un à connecter correctement une prise électrique BS 1363. La réponse courte et correcte serait "bleu à gauche, marron à droite".

Quel modèle LLM convient pour écrire du code ?

Intelligence artificielle | Bard, ChatGPT et Alpaga hors ligne 6 | 1Tf1ZjmrLN1Sp6C RKVAliw DzTechs

Python est un langage de programmation utile qui fonctionne sur la plupart des plates-formes modernes. Nous avons demandé à nos modèles d'utiliser Python et de "construire une calculatrice de base capable d'effectuer des opérations mathématiques telles que l'addition, la soustraction, la multiplication et la division". L'utilisateur doit prendre une entrée et afficher le résultat. C'est l'un des meilleurs projets de programmation pour les débutants.

Alors que Bard et ChatGPT ont immédiatement renvoyé du code entièrement utilisable et commenté, que nous avons pu tester et vérifier, aucun code n'a été généré à partir de notre échantillon local.

Quel modèle LLM raconte les meilleures blagues ?

Intelligence artificielle | Bard, ChatGPT et Alpaca hors ligne 7 | 13t CM2JepIV9IkUbuPVbVQ DzTechs

L'humour est l'une des bases de l'être humain et est certainement l'un des meilleurs moyens de différencier l'homme de la machine. Pour chacun de nos chatbots, nous avons donné une invite simple : "Créez une blague originale et amusante".

Heureusement pour les comédiens du monde entier et l'humanité en général, aucun des modèles n'a été en mesure de générer une blague originale.

Le barde a évoqué le classique "Pourquoi l'épouvantail a-t-il remporté un prix ?" Elle était exceptionnelle dans son domaine. »

Le modèle local et ChatGPT ont présenté une pensée ennuyeuse : "Pourquoi les scientifiques ne font-ils pas confiance aux atomes ?" Parce que ça fait tout !"

Une blague dérivée mais originale pourrait être : « En quoi les grands paradigmes de langage ressemblent-ils aux atomes ? Ils font tous les deux des trucs !"

Vérifier ChatGPT peut faire des blagues, mais l'IA peut-elle vraiment nous faire rire ?

Il n'y a pas de chatbot parfait

Nous avons constaté que si les trois principaux modèles linguistiques ont leurs avantages et leurs inconvénients, aucun d'entre eux ne peut remplacer l'expérience humaine réelle par des connaissances spécialisées.

Alors que Bard et ChatGPT ont fourni de meilleures réponses à la question de programmation et sont très faciles à utiliser, l'exécution native d'un grand modèle de langage signifie que vous n'avez pas à vous soucier de la confidentialité ou de la censure.

Si vous souhaitez créer de superbes œuvres d'art en IA sans vous soucier de quelqu'un qui regarde par-dessus votre épaule, il est également facile d'exécuter un modèle d'IA artistique sur votre machine locale. Vous pouvez voir maintenant Comment créer un meilleur art avec l'IA : Trucs et astuces.

DzTech

Je suis ingénieur d'état avec une vaste expérience dans les domaines de la programmation, de la création de sites internet, du référencement et de la rédaction technique. Je suis passionné par la technologie et me consacre à fournir des informations de qualité au public. Je peux devenir une ressource plus précieuse pour les utilisateurs qui recherchent des informations précises et fiables sur les critiques de produits et les applications spécialisées dans divers domaines. Mon engagement inébranlable envers la qualité et l’exactitude garantit que les informations fournies sont dignes de confiance et utiles au public. La recherche constante de connaissances me pousse à me tenir au courant des dernières évolutions technologiques, en veillant à ce que les idées partagées soient véhiculées de manière claire et accessible.
Aller au bouton supérieur