Gemini Ultra 1.0 est-il plus fort que GPT-4 ?

Illustration par DALL·E (+PJ)

Wes Roth a organisé un match entre le successeur de Bard chez Google et la version la plus récente de ChatGPT. Son verdict est « ex-aequo », ce qui me paraît équitable au vu de ce qu’il montre. Le titre de sa vidéo annonce « We ran a BATTERY of tests, here is the SHOCKING result » : « nous les avons soumis à une BATTERIE de tests et voici le résultat CHOQUANT ». Or, à moins que l’ex-aequo lui paraisse choquant, je n’ai rien entendu de particulièrement choquant dans sa conclusion. Ce qui ne m’empêchait pas de tenter de deviner ce que serait sa conclusion choquante … dont je fus cependant frustré. La conclusion choquante qui est la mienne, la voici : « Gemini Ultra 1.0 et GPT-4s naviguent désormais dans une ligue qui nous a laissés nous, humains, sur place : nous pouvons observer, ébahis, le match entre les deux en nous posant l’inquiétante question : ‘Combien de temps s’intéresseront-ils encore à ce que nous en pensons ?’ ».

Si vous doutez de ce que je dis-là, regardez la vidéo. Je souligne : ne venez pas dire ici : « Je n’ai pas regardé la vidéo mais … » pour aligner ensuite vos préjugés archi-connus en la matière. En faisant cela vous testeriez simplement la patience de Gemini Ultra 1.0 et GPT-4 envers nous. Or cela n’est pas prudent 😉 .

Illustration par Stable Diffusion (+PJ)

Partager :

40 réponses à “Gemini Ultra 1.0 est-il plus fort que GPT-4 ?

  1. Avatar de Khanard
    Khanard

    j’ai regardé la vidéo de A à Z . C’est tout simplement hallucinant !!!!!!

    Je me suis essayé au langage Python et je peux vous assurer que lorsqu’il y a une erreur cela devient vite galère.
    Là pim pam poum je me corrige de mes erreurs , ni vu ni connu . Chapeau !

    J’aurai peut être une préférence pour GPT4 car il est capable de créer des PDF !

    Génial !!!!!!!!!!!!

  2. Avatar de aslan
    aslan

    Je garde mon chien, alias GPT-4, ses CGU sont certainement plus éthiques et il bat de la queue quand je lui parle.

    Il ne faut pas oublier que les versions chat sont des power-tools, l’équivalent d’Excel ou d’une ligne de commande, et que les modèles sont encore plus surprenants utilisés dans des systèmes intégrés.

    Je vous remet la vidéo sur les recherches de Nvidia qui illustrent l’usage des capacité de codage des LLM dans des boucles d’essais et d’erreurs appliquées à la robotique:
    https://m.youtube.com/watch?v=SBoen3q5AoQ

      1. Avatar de aslan
        aslan

        Merci Paul. A l’occasion je serais intéressé par votre avis sur les prospectives de Peter Zehan, ex directeur chez Strafor, qui prolonge sur d’autres bases celles d’E.Todd dans Après l’empire quand au repli des États-Unis. Quasi anecdotique ment il prévoit une « décade noire » de l’IA entrainée par les péniries de puces gravées en moins de 10nm. Sa réputation est d’avoir les bons arguments et raisonnements mais de les pousser trop loin. Ça vous rappelle quelque chose ?

        1. Avatar de Paul Jorion

          Je n’ai malheureusement pas suivi les progrès de la quincaillerie (en anglais : « hardware »).

            1. Avatar de aslan
              aslan

              Merci ! Dans l’idée de Zeihan sécuriser les volumes actuel est déjà une gageure. L’argument tourne autour d’une fin de la pax Americana sur l’océan mondial et de l’impact de la démondialisation sur ce créneau précis. C’est sa marotte et son fond de commerce depuis longtemps, mais c’est un bon boutiquier et les développements du moment, de la Russie à la mer rouge, vont dans son sens.

    1. Avatar de Vincent Lejeune
      Vincent Lejeune

      Et pour discuter, rien ne vaut Pi : https://pi.ai/talk

    2. Avatar de Chopin
      Chopin

      Plus éthique que google ? De l’autre côté c’est Microsoft qui vampirise « lentement »mais surement la structure. Et côté je suce des données ils sont tout sauf en reste.

      C’est devenu si chiant coté google, que saisir des infos « persos » pour un exemple de développement est quasi impossible. L’ia va se mettre à nous faire la morale et nous donner des solutions génériques malvenues. Encore pire s’il est mentionné de près ou de loin system32. Le contournement existe mais est devenu plus complexe. Il ne se souvient de rien sauf quand on essaye de lui faire la nique. Je ne sais pas pour gpt ultra, mais le principal point faible des assistants aujourd’hui, c’est qu’ils ont la mémoire courte, sont bornés, hallucinent beaucoup et volontaires à caresser dans le sens du poil même quand ils devraient dire non.

      1. Avatar de Paul Jorion

        Vous avez regardé la vidéo ? Il est clair que non : vos infos sur la question datent manifestement d’avant l’été 2023.

    3. Avatar de ilicitano
      ilicitano

      Comme dirait P.J:

      Si vous doutez de ce que je dis-là, regardez la vidéo.
      Je souligne : ne venez pas dire ici : « Je n’ai pas regardé la vidéo mais … » pour aligner ensuite vos préjugés archi-connus en la matière.
      En faisant cela vous testeriez simplement la patience de Gemini Ultra 1.0 et GPT-4 envers nous 😋

      Il y a encore des préjugés sur le blog , chez certains, mais qui évoluent compte tenu des « preuves » qui leurs sont montrées.
      Comme dans toute évolution technologique , il faut du temps !!!!!!!!!!

  3. Avatar de Andrew Cooper
    Andrew Cooper

    Notre ancienne manière d’être humain, c’est fini. Ils sont si intelligents.

  4. Avatar de Maddalena Gilles
    Maddalena Gilles

    Bonjour !
    Dans l’en-tête de cette vidéo, comme dans la précédente, « ON » (?) nous enjoint de « cliquer pour accepter les cookies de marketing et activer ce contenu ».

    C’est d’ailleurs assez fréquent depuis quelques temps…

    Est-ce bien normal ? Et est-ce bien nécessaire ?
    Vous aurez compris que je n’aime pas les « cookies », n’est-ce pas ?

    D’une façon générale je n’aime pas vraiment que mon, ou mes « voisins » soient à l’affût derrière ma fenêtre pour savoir ce qu’il se passe chez moi.
    —à moins bien entendu que mon voisin ait un mandat de perquisition en bonne et due forme… 😉

    Et bien… dans mon ordinateur j’estime que c’est un peu chez moi…
    A tort ou à raison…?
    Merci d’avance de votre réponse !

    1. Avatar de Khanard
      Khanard

      @Maddalena Gilles

      vous avez raison mais il est vrai aussi que si vous observez un tant soi peu de rigueur vous avez à votre disposition tout un tas de logiciels qui permettent d’effacer les cookies . Il faut simplement le faire régulièrement .
      Pour ce qui concerne Youtube j’ai refusé toutes les CGU . C’est vrai qu’il n’est pas content mais la guerre est déclarée .

      1. Avatar de Tout me hérisse
        Tout me hérisse

        Le fait d’être pisté et de subir le dépôt de ‘cookies’ est effectivement agaçant, c’est ‘la rançon du progrès’ nous objectera-t-on ! La réalité des choses que l’on peut observer, est que depuis la généralisation des liaisons par fibre optique, et conséquemment l’augmentation très importante de la vitesse des flux de données, il est possible maintenant à diverses sociétés que je qualifierais de ‘parasites’, ou à la limite pour certaines, de ‘symbiotes’ de se connecter aux flux afin d’en exploiter les données, essentiellement pour en retirer un profit (publicité, conseil, etc..)
        Il suffit d’observer le coin inférieur gauche de son navigateur où l’on pourra voir les étapes du transit des requêtes sur le web…
        Tout cela n’était guère possible à l’époque de la liaison par modem téléphonique à 14000bauds…
        Bref, toute avancée technologique entraîne forcément une avancée dans les technologies de récupération de substances profitables à l’enrichissement de quelques uns, et il est particulièrement scandaleux de voir ces entités se faire appeler  « réseaux sociaux », où réside donc la ‘fibre sociale’ ?
        Un peu en liaison avec le sujet, les 20 et 21février, la Haute Cour du Royaume-Uni décidera si Julian Assange peut encore faire appel ou s’il peut être extradé immédiatement vers les USA où il risque d’être condamné à 175 ans de prison…

        1. Avatar de Khanard
          Khanard

          @Tout me hérisse

          mais non vous voyez le mal où il n’est pas

          les réseaux sociaux : dites moi qui vous êtes je vous dirai ce qu’il vous faut .

          c’est pas social ça ?

          perso je ne suis sur aucun réseau et je m’en porte très très bien

    2. Avatar de Paul Jorion

      Purgez le cache, à mon avis le problème vient de là.

      1. Avatar de Maddalena Gilles
        Maddalena Gilles

        Merci de vos réponses.

        Désolé, je suis totalement ignare…
        La preuve ?
        Je ne sais même pas ce que veut dire « Purgez le cache » !
        Mais, merci quand même…

        Quand je m’étais abonné à votre blog, il y a pas mal de temps, c’est vrai, je ne savais pas que des « cookies de marketing » faisaient partie du lot…

        Tant pis… pour moi ?
        Bonne fin de semaine.
        G. Maddalena

        1. Avatar de Chabian
          Chabian

          Et vous avez employé la formule « dans mon ordi c’est un peu chez moi ».
          C’était en 1971 chez les féministes, la formule « Baas op mijn eigen buik » (littéralement : patron sur mon propre ventre) avait été adaptée par Marie Denis en « Dans mon ventre c’est chez moi ».
          Quel est l’homme qui, s’il avait un utérus, trouverait normal qu’on y pose des cookies ? Il hurlerait au viol !
          Bon je sors. J’ai regardé la vidéo durant 7’30 », avec ‘interprétation en lettres’ faible, j’ai vaguement suivi cette question du gland qui devient chêne dans le commerce sur le web (That is the question for human beeing ?). Puis j’ai abandonné. Trop dur.

    3. Avatar de ilicitano
      ilicitano

      @ MG

      Essayez AdblockPlus et Ghostery en gérant les différentes fonctionnalités de blocages proposées qui peuvent être temporelles , ou sur une page web , ou autres ,…

      ensuite il existe la possibilité selon ce que vous utilisez Google/Chrome , Microsoft/Edge , ou autres , d’aller dans les paramètres et d’effacer ou de gérer l’acceptation et l’effacement des cookies

      1. Avatar de Chabian
        Chabian

        Il y a des sites qui demandent d’annuler Ad Block pour s’afficher, il faut les accepter pour « restaurer la page » tandis qu’eux se restaurent jusqu’à quand ?
        J’ai un « Brave » équivalent à Firefox, qui refuse fortement les cookies (ou la simple notation de mon adresse codée ?) ; mais bien des sites renoncent à s’afficher (you tube se bloque à la 2e seconde) car leur cookie (ou leur enregistrement de mon code) est refusé : je dois copier l’adresse et passer à Firefox qui me l’affiche sans souci.

        1. Avatar de Ruiz
          Ruiz

          @Chabian Il est possible aussi de copier l’adresse utile en consultant le source html :
          https://www.youtube.com/embed/nheVIcpSRsc
          et
          https://www.youtube.com/embed/SBoen3q5AoQ

  5. Avatar de Pascal
    Pascal

    Est-ce que GPT-4 pourrait aider les parents s’il vous plait ? !!!
    Beaucoup sont dans la panade aujourd’hui avec ce qu’ils trouvent sur le net.
    https://www.huffingtonpost.fr/life/article/j-ai-eleve-mon-fils-avec-la-parentalite-positive-et-je-culpabilise-de-ce-qu-il-impose-aux-autres_229552.html
    Je crois que je vais envoyer cet article aux parents d’élèves de mon école.

    1. Avatar de ilicitano
      ilicitano

      @Pascal

      J’ai/nous, surtout mon épouse , avons une expérience tout à fait personnelle qui allait à l’encontre de la parentalité positive et du système éducatif des enfants-adolescents

      https://fr.wikipedia.org/wiki/Parentalit%C3%A9_positive

      En 2023, Didier Pleux débat avec Franck Ramus chercheur au CNRS en sciences cognitives. Il en ressort les principes suivants:
      * l’autorité « en amont » plutôt que pas d’autorité
      * la relation verticale entre parent et enfant, plutôt que l’horizontalité
      * la capacité à affronter le réel, même quand il est déplaisant
      * la frustration qui permet de créer un déséquilibre ou conflit cognitif, afin de stimuler la capacité d’adaptation de l’enfant.
      * la sanction par le « time out » en cas de mauvais comportement, en dernier recours

      Selon Didier Pleux et Franck Ramus, il faut imposer de la frustration à l’enfant pour qu’il puisse plus tard avoir du plaisir (ex: apprendre le solfège pour plus tard prendre du plaisir à jouer du piano).
      Selon lui l’écoute et l’empathie ne font que renforcer la recherche du plaisir immédiat, ce qui peut créer des comportements addictifs

      1. Avatar de Pascal
        Pascal

        @Ilicitano
        Je connais le point de vue de Didier Pieux. Il y a surtout un malentendu sur ce qu’est l’éducation positive « à l’anglosaxonne » qu’on a voulu adapter ici pour en faire une éducation positive « à la française ». Dans la première on parle d’une éducation bienveillante ET aussi de la fermeté quant en France certains n’ont voulu conserver que la bienveillance. La catastrophe vient de là.

        1. Avatar de CORLAY
          CORLAY

          Bonsoir Pascal, je lis les 3 commentaires précédents sur l’éducation, la bienveillance c’est bien (mais affronter le réel avec une dose de bienveillance) c’est bien. Mais il ne faut créer comment dire des choses sensibles. Il va falloir un peu de forces (bien dosées). On peut être sensible, mais affronter le réel est un enjeu crucial présent et à venir. Voici mon com. malgré que je ne sois pas issue de l’enseignement. Isabelle

          1. Avatar de Garorock
            Garorock

             » être sensible, mais affronter le réel »
            C’est exactement la mission que nous nous sommes donnés ici au familistère de Jésus-Guevara: soulever les tapis et amarrer les marchands de tapis volants!
            En essayant d’aimer ceux qui ne veulent pas faire les mêmes tentatives que nous et de nous aimer un peu aussi quand même. Pas trop. Lorsqu’on s’aime trop, on fini par niquer tout ce qui est autour et tout ce qui était là avant nous.

      2. Avatar de Garorock
        Garorock

        Le développement personnel* (avatar du libéralisme) est un cheval de Troie rentré par effraction dans l’espace de l’éducation nationale.
        Apprendre aux enfants à être amoureux de leurs névroses est une bonne voie pour fabriquer des citoyens qui barbottent en chouinant dans le narcissisme victimaire.
        * J’ai de la documentation!

        1. Avatar de Garorock
          Garorock

           » Si tu redoubles pas ton C.P, Kevin, tu auras un smartphone! »
          Bientôt ils nous le grefferont juste après avoir coupé le cordon le smarphone! A la maternité. Récompensé dès la naissance!
          Faire rentrer de force la photo dans le cadre ou élargir le cadre?
          S’adapter sans cesse aux avatars du libéralisme ou être malade?

    2. Avatar de ilicitano
      ilicitano

      @Pascal

      L’apprentissage profond des intelligences artificielles, ou deep learning, fonctionne ainsi:
      un algorithme tente de résoudre un problème; il échoue, est puni et recommence, des millions voire des milliards de fois, jusqu’à ce le programme lui indique que la solution est la bonne et le récompense.
      Au terme de ce processus, l’algorithme sait comment effectuer la ou les tâches en question.

      Dans les années 1990, des scientifiques ont découvert que le cerveau humain fonctionnait de manière similaire, au travers du système de récompense/renforcement reposant sur la dopamine.

      Si la récompense est plus importante que prévue, la quantité de dopamine émise sera plus forte; si la récompense est plus faible, elle sera moins importante: «La dopamine sert de signal de correction, disant aux neurones d’ajuster leurs prédictions jusqu’à ce qu’elles convergent vers la réalité» –comme dans l’apprentissage machine.

      https://korii.slate.fr/tech/ia-algorithme-apprentissage-machine-deepmind-systeme-renforcement-recompense-dopamine-cerveau-humain

      1. Avatar de Pascal
        Pascal

        Apprendre avec l’IA pourrait ressembler à ça ! 😉
        https://www.youtube.com/watch?v=kBASiXP1TlA

      2. Avatar de aslan
        aslan

        Cf. le vénérable Eloge de la fuite d’H. Laborit ou les fractales : des processus simples suffisent à expliquer une grande complexité. Mais cf. aussi Konrad Lorenz: la détermination des processus complexes par les processus simples n’est pas surdétermination, elle ne permet aucunement de les prévoir. En clair:il n’y a pas de martingale, pas de raccourci. Comme en science on peut peut-être juste supposer que la méthode est plus importante que les prémisses tant qu’on est prêt à les réévaluer.

      3. Avatar de Garorock
        Garorock

        Les bébés ne sont que des petites boules de chimie jetées dans l’univers physique.
        Choc suprême. Big bang organique.

  6. Avatar de ilicitano
    ilicitano

    Une autre vidéo de Wes Roth sur L’Intelligence Artificielle Incarnée:

    https://www.youtube.com/watch?v=N7NhCqpOV8c
    Robot soutenu par OpenAI | LA RÉVOLUTION ROBOTIQUE NE SERA PAS TÉLÉOPÉRÉE

    donc :
    « La révolution robotique ne sera pas téléopérée » mais évoluera vers une plus grande autonomie.

    Les robots deviennent donc de plus en plus autonomes, capables de prendre des décisions et d’effectuer des tâches sans intervention humaine directe.
    Finalement la révolution robotique fait référence à l’évolution rapide de la technologie robotique et à son impact sur la société et l’économie.

  7. Avatar de Khanard
    Khanard

    une bonne solution est de travailler sous Linux . Mais on s’éloigne du sujet de la vidéo 😉

    pour faire un pendant aux essais de Wes Roth suivez ce lien

    https://www.oneusefulthing.org/p/google-gemini-advanced-tasting-notes

    bonne lecture

  8. Avatar de Garorock
    Garorock

    En open source, il y a Mixtral qui est parait-il un Minou bien sevré.
    Mangera t-il de meilleures croquettes que les greffiers des marchands du temple?

  9. Avatar de un lecteur
    un lecteur

    Il faut très rapidement trouver une solution.
    « off the charts »
    La Niña n’y arrivera pas toute seul !
    Aller hop hop les GPT, ça urge !

  10. Avatar de Julo
    Julo

    Me: What was the name of the first cow to walk on the moon?

    Gemini: There has never been a cow on the moon, let alone one that walked on it! As of today, February 12, 2024, no living creatures have walked on the lunar surface. The only successful moon landings have been carried out by unmanned spacecraft and robotic
    rovers. It’s possible you might be misremembering something or confusing it with fiction. There have been books and movies featuring animals in space, including cows, but these are works of fiction.

    1. Avatar de Paul Jorion

      « Me », vous êtes un petit fakenews-eur. Voici ce que Gemini répond en réalité :

      No cow has ever walked on the moon! As of today, February 13, 2024, the only living creatures to have set foot on the lunar surface have been humans. The first person to walk on the moon was Neil Armstrong in 1969, followed by Buzz Aldrin shortly after.

      Perhaps you were thinking of a fictional story or children’s book featuring a cow on the moon. There are actually a few books with titles like « First Cows on the Moon, » but these are works of fiction, not reality.

      Mais vous attirez l’attention sur une activité très répandue (j’ai pris des gens la main dans le sac ici-même dans les commentaires du blog) : « Quand on demande à ChatGPT X il répond Y… » Y étant une falsification quelconque émanant de l’ARIA * .

      * ARIA : armée de résistance à l’intelligence artificielle.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Ce site utilise Akismet pour réduire les indésirables. En savoir plus sur comment les données de vos commentaires sont utilisées.

Contact

Contactez Paul Jorion

Commentaires récents

  1. Grano-diorites cadomiennes à biotite/cordérite (n° 193 si j’ai repéré la bonne couleur sur la carte de la page 237 du…

Articles récents

Catégories

Archives

Tags

Allemagne Aristote BCE Bourse Brexit capitalisme ChatGPT Chine Confinement Coronavirus Covid-19 dette dette publique Donald Trump Emmanuel Macron Espagne Etats-Unis Europe extinction du genre humain FMI France Grands Modèles de Langage Grèce intelligence artificielle interdiction des paris sur les fluctuations de prix Italie Japon Joe Biden John Maynard Keynes Karl Marx pandémie Portugal psychanalyse robotisation Royaume-Uni Russie réchauffement climatique Réfugiés spéculation Thomas Piketty Ukraine ultralibéralisme Vladimir Poutine zone euro « Le dernier qui s'en va éteint la lumière »

Meta