OpenAI dévoile OPERATOR : Agent IA ultra-autonome

open vient d'annoncer leur tout premier agent Ia il s'appelle opérateur et c'est vraiment un truc de fou je vous explique imaginez vous voulez réserver un resto pour ce soir au lieu d'aller sur votre téléphone et d'aller sur Google chercher un resto vous demandez juste à opérateur réserve-moi un resto ce soir lui il va ouvrir un navigateur de manière totalement autonome il va scroller cliquer rechercher extraire des informations et finir par réserver le resto pour vous on peut l'utiliser pour réserver des billets d'avion prendre rendez-vous chez le coiffeur commander des sushis il y a pas vraiment

de limite sur ça équipe d' open ai a annoncé ça hier normalement nous on y a pas encore accès en France mais moi en créant un compte américain open ai en utilisant un VPN et en craquant mon slip en dépensant 200 dollars pour chat GPT pro j'ai pu jouer avec tenter des trucs essayer de tester un petit peu les failles et aussi pousser opérator à ses limites donc je vais pouvoir vous dire à la fin de cette vidéo si opérator est vraiment une révolution ou c'est encore une enè hype autour de l'a et dans ce

cas-là et bien j'aurais perdu 200 dollars donc comme je le disais hier soir open a fait un live devant tout le monde en présentant du coup opérator qui ressemble à ça qui est en fait un agent qui va pouvoir ouvrir donc un navigateur dès qu'on va lui taper quelque chose et ce navigateur du coup va pouvoir naviguer à notre place de manière totalement autonome donc quand on va par exemple sur opérator.chatgpt.com on a ça et une fois qu'on est ici on peut lui dire par exemple fais-moi une RAA 27 janvier à 19h dans le 11e

à Paris et donc lui qu'est-ce qu'il va faire il va ouvrir un navigateur alors évidemment vu que c'est Microsoft il ouvre Bing et à partir de ce moment-là vous voyez il est en train de faire un certain nombre d'actions ces actions ici sont listées et donc en fonction de ce que je lui ai demandé il va aller sur les différents sites il va voir pour prendre un rendez-vous il hésite pas à ouvrir plusieurs onglets si on a besoin et il y a ce bouton qui s'appelle t contrô qui arrive et vous allez voir qu'à chaque

fois qu' aura besoin de faire une action concrète donc par exemple le fait de valider un rendez-vous ou le fait de payer et bien il va me demander à moi de reprendre le contrôle par exemple là il me dit j'ai trouvé des salons mais il y a des salons hommes des salons femmes là je va dire je suis un homme parce que il a besoin d'une information qu'il a pas il va jusqu'à la fin là il va regarder le calendrier une fois qu'il a le calendrier pour le 27 je lui a demandé donc c'est bon

il va cliquer sur la date d'après automatiquement et trouver voilà et de il me dit à 6h25 il y a un rendez-vous je lui dis Go et eux tout ce qu'ils ont montré en fait c'est sur des plateformes partenaires comme open table ou encore instacart pour faire leur course bah que nous on n pas et et donc j'ai essayé moi de faire plein d'exemples français et donc vous allez voir ce que ça donne jusqu'où ça va jusqu'où ça marche pas mais c'est vrai que aujourd'hui c'est uniquement disponible aux US et uniquement sur le Plan Pro

et clairement bah ça moi je le savais pas au momentù où j'ai regardé Live et le live et je me suis complètement excité sur le fait que je voulais absolument utiliser ce truc et bien en fait on voit que c'est un uniquement disponible aux US et uniquement pour chat GPT pro qui est à 200 dollars par mois clairement moi j'ai pas besoin de chat GPT pro et pourtant le moment où c'est sorti la première chose que j'ai fait et bien c'est de me connecter sur un VPN en essayant de voir si je pouvais avoir accès

à opérateur.chat GPT j'arrivais à accéder à ça mais du coup fallait que je paye et là j'ai retenu ma respiration je me suis dit bon allez pas grave je vais pouvoir tester ça on va voir ce que ça va donner donc j'ai payé 200 dollars et là déception totale parce que j'avais pas accès en fait il y avait trop de surcharge du coup c'était pas disponible j'étais dégoûté donc on allant me coucher j'ai retesté vite fait et là ça a fonctionner donc je vous fais cette mini démo en vous montrant un petit peu les tous

les exemples que j'ai pu tester alors là ce que je vais faire à partir de maintenant c'est que tous les exemples et bien je les ai fait de mon côté et je vais les commenter parce que sinon ça va mettre beaucoup beaucoup beaucoup de temps et j'ai pas envie de faire une vidéo 30 minutes donc là je vais essayer de faire me faire livrer des sushis donc je dis commande-moi des sushis j'habite juste à côté dans le 11e donc il m'ouvre un avigateur tout se passe bien et là vous allez voir qu'il va accepter les

coup dequ automatiquement il me demande si je veux bien aller chez Sushi Shop et bien je dis oui et donc il trouve le Sushi Shop le plus proche de la rue que je lui ai que je vais lui donner il me demande où est-ce que tu habites donc je lui donne la rue évidemment c'est pas là où j'habite vraiment mais bon je lui donne ça et là il va me faire un truc un peu spécial malgré le fait que il m bien que je les veux aujourd'hui mes sushis il me dit est-ce que tu veux

prendre le contrôle pour pouvoir choisir l'endroit parce qu'il avait en fait besoin de de de de trouver exactement l'endroit où il voulait bon je lui dis vas-y utilise un autre site et donc là il va sur un autre onglet et il trouve un site et il essaie de se se débrouiller dessus bon c'est cool c'est pas terrible bon maintenant je tente un truc avec Decathlon je me dis ils ont réussi à faire une liste de courses est-ce que moi je peux aller lui demander d'aller sur le site Decathlon et juste de me prendre un t-shirt

pour courir et donc là il va sur le site Decathlon bon évidemment vu qu'on est aux US bah par défaut il va uniquement sur le site Decathlon bah US du coup il essaye il mouline en essayant de me trouver des t-shirts et je vous avoue que bah c'est pas incroyable les les les t-shirts qui me trouvent et là c'est peut-être de ma faute ça veut dire que moi je l'ai pas assez bien prompté je lui ai dit va sur le site Decathlon pour trouver et j'ai fait exprès hein je lui ai pas mis des trucs

très spécifiques mais là par exemple il me pose des questions donc c'est plutôt cool après 2 minutes il me dit donc je lui dis que moi vas-y prends-moi des t-shirts pour des Men et en m du coup et à moins de 30 dollars donc j'essaie de lu guider un petit peu plus donc ce qui est cool là sur les filtres il va ajouter des filtres fait il comprend ça quand même très très bien donc ça c'est cool mais il m'a pas trouvé beaucoup de t-shirts je crois qu'il m'en a trouvé que un et donc il

va continuer ce qui est cool comparé à à aux autres trucs comme computer use et cetera dès qu'il y a un problème il va pas s'arrêter il va continuer il va ouvrir d'autes onglet il va essayer et ça c'est plutôt cool donc du coup il essaye men's running t-shirt il réessaye il galère un petit peu et puis au bout d'un moment il arrive à me trouver un t-shirt qui est qui est qui est pas disponible en m du coup je lui dis vas-y bah Go pour le S essaie de me bah me prendre le S

et du coup il me dit est-ce que tu veux que je l'ajoute au panier et cetera donc en fait pour l'instant ça reste quand même un truc bah qu'il faut regarder sur le côté avec les yeux et il faut être là pour lui pour le guider et ça marche pas toujours toujours très bien et là autre exemple je me dis tiens trop bien peut-être que je peux aller chercher des apparts sur le boncoin avec un bon rendement euh pour les mettre à louer et les acheter quoi sauf que là euh dès que je vais enfin

dès que lui va sur le site le boncoin et bien très vite il va me demander un capch et donc là c'est le cas où j'ai besoin de reprendre le contrôle donc je fais t contrôle je résou le capch je suis trop content je me dis tiens c'est le meilleur des deux mondes sauf que BAF bah je suis bloqué parce que l'adresse IP en fait c'est l'adresse IP d'OP qui évidemment est connu par le boncoin et donc il me bloque je lui demande si je peux utiliser un VPN et il me dit non donc je

suis assez dégoûté je pensais que ça allait marcher donc cette fois-ci je vais tester un autre site tout simplement je vais tester ce loger et donc cette fois-ci je lui demande d'aller sur ce loger c'est tout simplement un autre site qui permet de de d'avoir des Agen des annonces immobilières et cetera donc je lui dis est-ce que tu peux cette aussi chercher sur le site donc il tape bien la ville et il commence à scroller à scroller à scroller pas mal et euh du coup il il cherche des filtres il essayer je sais pas exactement

ce qu'il fait à ce moment-là parce que moi je lui ai juste demandé des apparts avec des rendements vu qu'il se perd un petit peu du coup bah je vais accélérer le truc et vous allez voir que il va mouliner mouliner moulino pour tout simplement dire qu'il a pas réussi à à trouver bon ok et donc à ce moment-là moi je vais lui poser une autre question je me demande si on peut pas exporter par exemple tous ces trucs en CSV donc je lui dis que je veux un CSV de toutes ses pages et donc

là ça marche plutôt bien parce que du coup il va générer en fait il va grossièrement scrapper le site et et là je commence à avoir des idées je me dis ah tiens du coup tu peux facilement scrapper en fait même si c'est pas le seul outil qui permet de le faire mais tu peux quand même aller rechercher des informations et éviter que ça soit un humain qui le fasse et donc là il a trouvé 341 truc donc j'ai enfin appartement donc j'étais assez choqué du truc et là je lui dis oui ben je veux

le télécharger en fait moi je voulais juste le télécharger et là il me fait un truc un peu bizarre c'est-àd qu'au lieu de le télécharger comme le frchat GPT directement il va dans un navigateur il va dans un éditeur de CSV et il essaie de me coller le CSV bizarrement donc je comprends pas trop pourquoi il fait ça je le laisse tourner et en fait pendant un moment il va tourner et puis au bout d'un moment il décide d'aller sur un autre site un autre éditeur de CSV et là en fait bah bizarrement il va

m'écrire euh tous les liens tous les euh tous tous les résultats en fait qu'il a trouvé un par un donc ça c'est plutôt cool je me suis dit tiens bon bah ok tu me les télécharges pas mais tu me les écris un par un pourquoi pas et bizarrement il y a aussi une pub qui a commencé à démarrer sur la droite j'ai pas compris en fait au lieu des 340 il m'en a que téléchargé bah 10 [Musique] dommage alors je suis certain que certains d'entre vous ont eu l'idée de d'aller sur LinkedIn et de potentiellement

voir si on peut automatiser un petit peu LinkedIn c'est une bonne idée alors du coup cette fois-ci je me suis pas fait avoir le bon coin j'ai d'abord été et bien mettre mon login et mon mot de passe directement dessus pour éviter de me faire avoir par le capcha donc je vais mettre mon login et mon mot de passe voilà une fois que c'est fait et bien là les amis vous êtes pas prêts il me demande donc le capture pas aussi simple que le puzzle d'avant je le fais je le fais je clique je galère

un petit peu je vous avoue que là j'avais la pression moi-même de me dire tiens est-ce que je suis vraiment pas un robot euh mais bref je le fais et là vous allez voir qu'une fois que je passe le 5e et ben il m'en ajoute encore encore et là je vous épargne un petit peu les détails du truc mais ça m'a pris beaucoup beaucoup de temps en fait dès que je les ai finis il m'a dit non recommence bon du coup j'accélère un petit peu au bout d'un moment j'ai bien fini par réussir et là

j'étais trop content je me suis c'est génial ça veut dire qu'en fait j'ai réussi à craquer le truc je peux maintenant aller sur Linkedin donc je lui dis bah vas-y est-ce que tu peux envoyer un message à thbao mul en lui disant coucou euh et là je me dis tiens est-ce que déjà il va pouvoir trouver euh oui il va pouvoir aller et là il me demande donc du coup il me demande de il me il me demande de confirmer donc je confirme et très honnêtement et ben ça lui a ça ça ça a marché

en fait j'étais assez choqué là parce que je j'étais pas sûr qu'il allait pouvoir interagir et là je lui dis est-ce que tu peux euh euh faire un poème par exemple est-ce que tu peux écrire un poème sur li et l'automatisation là il a pas voulu bah je lu dis j'aimerais que tu écrives en français il me dit je peux pas écrire de poème et là c'était trop bizarre parce que je me dis ça c'est basé sur GPD 4ro pourquoi il veut pas faire tout le travail euh que ferait un chatbot classique donc je sais

pas pourquoi il a voulu uniquement rédiger ce que je voulais je lui ai demandé est-ce que tu peux aller sur Wikipédia et copier-coller un article il me dit non je peux pas aller sur Wikipédia et du coup est-ce que tu peux aller regarder ces trois derniers postes et lui écrire un commentaire dessus il me dit non je peux pas le faire et j'ai l'impression que c'est plutôt les euh bah les restrictions qu'ils ont mis en place donc je lui dis va chercher des news et sur Google euh donc il est parti il a tapé e

news sur Google et du coup il me dit bah qu'est-ce que j'en fais avec et là je lui ai demandé bah écoute une fois que tu les as trouvé maintenant j'aimerais que tu me fasses bah un résumé euh et là bah et donc là il me dit je peux pas faire de résumé mais je peux te donner les liens je fais ok bah Go pour les liens tu me donnes les liens et dès que j'ai les liens je pourrais a priori les les envoyer euh donc je lui dis vas-y maintenant est-ce que tu peux les

en envoyer à thibo et là il me dit bah non je suis désolé mais je peux pas envoyer des liens je fais pourquoiah il me dit en fait je peux rien envoyer je peux juste écrire des choses que tu as écrit et la petite pirerhouette je me dis attends tu sais quoi je vais aller sur Google sheet je vais dans Google sheet écrire à côté de son prénom en fait je vais écrire le bah le message que je vais lui envoyer peut-être qu'avant avec chat GPT je pourrais générer plein de messages et derrière leurenvoyer et

en fait je lui dis bah voilà est-ce que tu peux copiercoller le message qui est à droite de de de thbao et lui envoyer en fait et là il me dit bah non désolé je peux uniquement envoyer des choses que tu m'écris donc je vous avoue un petit peu déçu même si j'ai pu aller un petit peu loin mais pas possible alors il y a un autre exemple que je voulais faire c'était celui-là celui d'aller chercher en fait d'aller comparer des des prix sur sur internet pour un appareil photo que j'aime bien qui est le

6400 donc là il l'a plutôt bien fait c'est veut dire qu'il est allé sur plein de sites donc notamment Amazon évidemment et vu qu'il est aux US principalement sur des sites américains donc là il a trouvé à 748 après il va aller je crois sur Best Buy et ce qui est cool c'est que là aussi il ouvre plein d'onglets c'est pas à nous de le faire c'est lui qui les ouvre et ça c'est très très cool il est en train de commenter à chaque fois sur la gauche exactement ce qu'il est en train de faire

bref il me trouve des trucs et mine de rien pour une fois dans tous les exemples qu'on a testé en tout cas et ben il est pas mal parce qu'il va me trouver le prix le moins cher et il va me le mettre sur la gauche ce qui est très cool il m'a dit que c'était Walmart qui l'avait le moins cher [Musique] donc qu'est-ce que je fais je lui dis cette fois-ci de prendre un rendez-vous chez le coiffeur dans 11e pareil donc cette fois-ci contrairement au premier exemple il l'a plutôt bien fait c'est-à-dire que il

va aller bah trouver un coiffeur et donc il va prendre tout simplement le premier résultat sur Google et cette fois-ci vous allez voir ça va très vite marcher parce qu'il sait où j'habite donc il va choisir le département il va choisir la bonne date il va me proposer un horaire donc je lui dis oui go et à partir de ce moment-là en fait j'étais assez choqué il me demande mes informations donc je lui donne mes informations et là il va les remplir pour moi donc il va remplir le formulaire pour moi mon nom mon prénom

mon numéro de téléphone et boum en fait il va cliquer et j'avais pas fait gaffe et en fait il a pris le rendez-vous euh pour moi dès que je lui ai dit Go donc dès qu'il y a des tâches sensibles comme ça il demande quand même mais dès que j'ai dit Go en fait il a il a juste pris le rendez-vous et donc ça c'était assez un moment assez cool où j'ai fait merde bah je vais devoir reprendre le contrôle et annuler le rendez-vous et c'est ce que j'ai fait et donc on a toujours la

possibilité de reprendre le contrôle pour l'annuler mais ça c'était la fois où ça a bien marché alors c'est un des c'est un des exemples qui est présenté avec instacart hein eux comme je l'ai dit ils ont des partenariats avec certains et bien certains fournisseurs nous bah on na pas open table ou instacart donc du coup bah on essaie sur le site de Carrefour et je lui dis les courses que je veux faire bon c'est pas mal première chose que je dois faire c'est c'est résoudre le capcha donc ça bah il y en a de plus

en plus sur les sites et donc bah évidemment je vais devoir moi micoller par contre il accepte les cookies pour moi ça c'est plutôt cool une fois qu'il les accepte en fait là sur la gauche vous allez voir tout le détail là à chaque fois il fait using search et cetera et cetera il close les pop-up donc ça il est assez autonome et là il va aller du coup chercher chacun des produits et en fait ce que je savais pas c'est qu'à chaque fois il va me demander est-ce que ça je l'ajoute au panier est-ce

que ça je l'ajoute au panier est-ce que ça je l'ajoute au panier en fait pour instant ça reste quand même assez manuel mais c'est quand même cool par exemple pour des vols j'ai fait l'exercice pour aller chercher des vols c'est pas mal ça veut dire que ça nous évite de passer beaucoup de temps à aller choper son vol à aller chercher sur plusieurs sites là il peut le faire pour nous il peut ouvrir plusieurs onglets et cetera et cetera donc là une fois qu'il a tout trouvé et à chaque fois que je lui ai dit

oui oui oui et oui et bien il finit par vouloir me montrer tout son panier mais bon en somme c'est vraiment une techno qui est pas mal mais pour l'instant elle est encore en phase de recherche et elle va s'améliorer mais clairement vu la vitesse à laquelle ça va je suis pas étonné que je devienne complètement accro à ce genre de truc tout ça c'est possible parce que il y a un nouveau truc qui est sorti du coup qui s'appelle computer using agent CUA c'est le modèle en fait qui est derrière tout ce tout ce

système qui lui permet du coup de voir ce qu'il y a sur un navigateur de faire des actions et d'interagir du coup comme c'est marqué ici comme vous l'avez vu à chaque fois qu'il aura besoin de nous nous bah on va devoir prendre le contrôle pour pouvoir bah mettre nos détails de paiement ou alors notre login mot de passe ou résoudre des capcha il y a un truc qui est cool qu'ils ont annoncé c'est que ça va être disponible via l'API donc ça veut dire que via l'API on va pouvoir déclencher des agents et là

ça devient très intéressant ça veut dire que maintenant depuis des trucs comme make des logiciels d'automatisation ou même des applications on va pouvoir lancer des agents qui vont pouvoir faire des actions spécifiques donc ça y est on y est récemment j'en parlais dans un podcast que les agents c un peu le futur des SAS c'est que ça nous permettrait du coup avec juste un vocal WhatsApp de lancer des agents qui eux nous réserve des billets d'avion ou qu'il fassent des actions à notre place sur un sur un navigateur bah c'est bon en fait j'ai l'impression

que on y est ça coûte pour l'instant 200 balles par mois très honnêtement je suis pas déçu mais on va dire que bah c'est cool pour la vidéo mais très honnêtement en terme de roui je suis pas à l'utilisation de ces 200 € pour pour ça donc je vais tranquillement downgrade pour le moment euh mais en tout cas c'était fun de de pouvoir tester de regarder jusqu'où ça allait voilà j'espère en tout cas que cette vidéo vous a plu n'hésitez pas à me dire un petit peu ce que vous vous en pensez et sinon moi

je vous laisse avec cette vidéo que j'ai faite il y a 2 jours euh qui va je pense beaucoup vous intéresser où cette fois-ci on parle de l'utilisation de Lia pour créer des applications