Présentation de l'agent ChatGPT : relier recherche et action

ChatGPT peut désormais travailler pour vous à l'aide de son propre ordinateur, en gérant des tâches complexes du début à la fin.

Vous pouvez maintenant demander à ChatGPT de gérer des demandes telles que « regarde dans mon calendrier et fais-moi un point sur les prochains rendez-vous clients en fonction des dernières actualités », « planifie et achète les ingrédients pour préparer un déjeuner japonais pour quatre personnes » et « analyse trois concurrents et crée un diaporama ». ChatGPT naviguera intelligemment sur les sites Web, filtrera les résultats, vous invite à ouvrir une session en toute sécurité lorsque nécessaire, exécutera du code, effectuera des analyses et fournira même des diaporamas et des feuilles de calcul modifiables qui résument ses conclusions. 

Cette nouvelle capacité repose sur un système agentique unifié. Il réunit trois atouts des percées antérieures : la capacité d’Operator⁠ à interagir avec les sites Web, la compétence de la recherche approfondie⁠ à synthétiser des informations, et l’intelligence et la fluidité conversationnelle de ChatGPT.

ChatGPT réalise ces tâches en s’appuyant sur son propre ordinateur virtuel, passant sans accroc du raisonnement à l’action pour gérer des flux de travail complexes de A à Z, le tout selon vos instructions.

Mais surtout, vous gardez le contrôle. ChatGPT demande votre autorisation avant d'effectuer des actions importantes, et vous pouvez facilement l'interrompre, prendre le contrôle du navigateur ou arrêter les tâches à tout moment.

À partir d'aujourd'hui, les utilisateurs Pro, Plus et Team peuvent activer les nouvelles capacités agentiques de ChatGPT directement via le menu déroulant des outils du compositeur en sélectionnant « mode agent » à tout moment dans n'importe quelle conversation. 

Bien que l’agent ChatGPT soit déjà un outil puissant pour gérer des tâches complexes, le lancement d’aujourd’hui n’en est qu’à ses débuts. Nous continuerons d’apporter régulièrement des améliorations significatives pour le rendre de plus en plus performant et utile à un plus grand nombre de personnes au fil du temps.

Auparavant, Operator et la recherche approfondie apportaient chacun des forces uniques : Operator pouvait faire défiler, cliquer et taper sur le Web, tandis que la recherche approfondie excellait dans l'analyse et le résumé de l'information. Mais ils fonctionnaient mieux dans différentes situations : Operator ne pouvait pas approfondir l'analyse ni rédiger des rapports détaillés, et la recherche approfondie ne pouvait pas interagir avec les sites Web pour affiner les résultats ou accéder au contenu nécessitant une authentification de l'utilisateur. En fait, nous avons constaté que de nombreuses requêtes effectuées par les utilisateurs avec Operator convenaient mieux à une recherche approfondie. Nous avons donc combiné le meilleur des deux approches.

En intégrant ces forces complémentaires dans ChatGPT et en introduisant des outils supplémentaires, nous avons débloqué des capacités entièrement nouvelles au sein d'un seul modèle. ChatGPT peut désormais interagir activement avec les sites Web : cliquer, filtrer et recueillir des résultats plus précis et plus efficaces. Vous pouvez également passer naturellement d'une simple conversation à la demande d'actions directement dans le même clavardage. 

Nous avons équipé l'agent ChatGPT d'une suite d'outils : un navigateur visuel qui interagit avec le Web via une interface graphique, un navigateur textuel pour des requêtes Web plus simples basées sur le raisonnement, un terminal et un accès direct à l'API. L'agent peut également tirer parti des connecteurs ChatGPT⁠(s'ouvre dans une nouvelle fenêtre), qui vous permettent de connecter des applis comme Gmail et Github afin que ChatGPT puisse trouver des informations pertinentes pour vos invites et les utiliser dans ses réponses. Vous pouvez aussi vous connecter sur n’importe quel site Web en prenant le contrôle du navigateur, pour lui permettre d’approfondir et d’élargir ses capacités de recherche et d’exécution de tâches. Avec ces différentes possibilités d'accès et d'interaction avec les informations disponibles sur le Web, ChatGPT peut choisir la voie optimale pour accomplir ses tâches le plus efficacement possible. Par exemple, il peut recueillir de l'information sur votre calendrier par l'intermédiaire d'une API, raisonner efficacement sur de grandes quantités de texte à l'aide d'un navigateur textuel, tout en ayant la possibilité d'interagir visuellement avec des sites Web conçus principalement pour les humains. 

Tout cela est réalisé à l’aide de son propre ordinateur virtuel, qui préserve le contexte nécessaire à la tâche, même lorsque plusieurs outils sont utilisés — le modèle peut choisir d’ouvrir une page avec le navigateur texte ou le navigateur visuel, télécharger un fichier depuis le web, le manipuler en exécutant une commande dans le terminal, puis visualiser le résultat dans le navigateur visuel. Le modèle adapte son approche pour accomplir les tâches avec rapidité, précision et efficacité.

L'agent ChatGPT est conçu pour des flux de travail itératifs et collaboratifs, bien plus interactifs et flexibles que les modèles précédents. Vous pouvez interrompre le travail de ChatGPT à tout moment pour clarifier vos instructions, l’orienter vers les résultats souhaités ou changer intégralement la tâche. Il reprendra là où il s'était arrêté, avec les nouvelles informations, sans toutefois perdre les progrès réalisés précédemment. De même, ChatGPT peut vous demander de manière proactive des informations supplémentaires lorsque cela est nécessaire afin de s'assurer que la tâche reste en adéquation avec vos objectifs. Si une tâche prend plus de temps que prévu ou semble bloquée, vous pouvez la mettre en pause, demander un sommaire de la progression ou l’interrompre complètement et recevoir des résultats partiels. Si vous avez installé l’appli ChatGPT sur votre téléphone, vous recevrez une notification une fois la tâche terminée.

Ces capacités agentiques unifiées améliorent considérablement l'utilité de ChatGPT dans les contextes quotidiens et professionnels. Au travail, vous pouvez automatiser des tâches répétitives, telles que la conversion de captures d'écran ou de tableaux de bord en présentations composées d'éléments vectoriels modifiables, la réorganisation de réunions, la planification et la réservation de séminaires, et la mise à jour de feuilles de calcul avec de nouvelles données financières tout en conservant la même mise en forme. Dans votre vie personnelle, vous pouvez l'utiliser pour créer et réserver sans effort des plans et des itinéraires de voyage, organiser et réserver des dîners entiers, ou trouver des spécialistes et prendre des rendez-vous. 

Les capacités accrues du modèle se reflètent dans sa performance de pointe (SOTA) lors des évaluations mesurant la navigation sur le Web et les capacités d'accomplissement de tâches dans le monde réel. 

Sur Humanity’s Last Exam⁠(s'ouvre dans une nouvelle fenêtre)*, une évaluation qui mesure la performance de l’IA dans un large éventail de sujets sur des questions de niveau expert, le modèle alimentant l’agent ChatGPT obtient un nouveau score pass@1 SOTA de 41,6. L’agent suit une planification dynamique et choisit lui-même ses outils, ce qui lui permet d’aborder une même tâche de différentes manières à chaque exécution. En multipliant les exécutions avec une simple stratégie de déploiement parallèle — en lançant jusqu’à huit tentatives simultanément et en choisissant celle avec la plus grande confiance auto-déclarée — le score HLE de l’agent augmente à 44,4.

FrontierMath** est la référence mathématique la plus difficile connue, mettant en vedette de nouveaux problèmes inédits qui prennent souvent des heures ou même des jours à résoudre aux mathématiciens experts. L’utilisation d’outils, comme l’accès à un terminal pour exécuter du code, permet à l’agent ChatGPT d’atteindre une précision de 27,4 %, soit un résultat bien supérieur aux deux modèles précédents.

Nous avons également évalué le modèle à l'aide de références modélisées à partir de tâches complexes du monde réel. Dans le cadre d'une référence interne conçue pour évaluer les performances du modèle sur des tâches complexes et économiquement importantes liées au travail intellectuel, les résultats de l'agent ChatGPT sont comparables ou supérieurs à ceux des humains dans environ la moitié des cas, pour toute une série de délais d'exécution des tâches, tout en surpassant largement les performances des modèles o3 et o4-mini. Les sorties du modèle sont évaluées par des experts par rapport à des références humaines de haute qualité créées par les personnes les plus performantes de chaque domaine. Ces tâches, issues d’experts de divers métiers et secteurs, reflètent le travail professionnel réel — comme la préparation d’une analyse concurrentielle des fournisseurs de soins d’urgence à la demande, l’élaboration de calendriers d’amortissement détaillés et l’identification de puits d’eau viables pour une nouvelle installation d’hydrogène vert. 

Sur DSBench⁠(s'ouvre dans une nouvelle fenêtre), conçu pour évaluer les agents sur des tâches réalistes de science des données couvrant l'analyse et la modélisation, l'agent ChatGPT surpasse notablement les performances humaines de manière significative.

Sur SpreadsheetBench, qui évalue les modèles sur leur capacité à modifier des feuilles de calcul dérivées de scénarios réels, l'agent ChatGPT surpasse les modèles existants par une marge significative. Lorsqu'il a la possibilité de modifier directement les feuilles de calcul, l'agent ChatGPT obtient un score encore plus élevé de 45,5 %, comparé à 20,0 % pour Copilot dans Excel. 

Sur un critère de référence interne qui mesure la capacité d'un modèle à prendre en charge les tâches de modélisation des analystes de banque d'investissement de première à troisième année— comme l'élaboration d'un modèle financier à trois états pour une entreprise du Fortune 500 avec une mise en forme et des citations appropriées, ou la construction d'un modèle de rachat par endettement pour une privatisation — le modèle qui alimente l'agent ChatGPT surpasse significativement la recherche approfondie et o3. Chaque tâche est notée selon des centaines de critères liés à l'exactitude et à l'utilisation des formules.

Nous avons également évalué l'agent ChatGPT sur BrowseComp⁠, une référence que nous avons publiée plus tôt cette année et qui mesure la capacité des agents de navigation à localiser des informations difficiles à trouver sur le Web. Le modèle a établi un nouveau record avec 68,9 %, soit 17,4 points de pourcentage de plus que la recherche approfondie.

Enfin, sur WebArena⁠(s'ouvre dans une nouvelle fenêtre), une référence conçue pour évaluer les performances des agents de navigation Web dans l'exécution de tâches Web réelles, le modèle est plus performant que le CUA optimisé par o3 (le modèle qui optimise Operator). 

Vous pouvez activer les nouvelles fonctionnalités agentiques de ChatGPT directement à partir du menu déroulant des outils du compositeur en sélectionnant « mode agent » à tout moment dans n'importe quelle conversation. Décrivez simplement la tâche que vous souhaitez accomplir, qu'il s'agisse d'effectuer des recherches approfondies, de créer un diaporama ou de soumettre des dépenses. Au fur et à mesure qu'il effectue votre tâche, une narration à l'écran vous permet de voir exactement ce que fait ChatGPT. Vous pouvez interrompre et prendre le contrôle du navigateur à tout moment, pour vous assurer que les tâches restent en adéquation avec vos objectifs.

L'agent ChatGPT peut accéder à vos connecteurs, ce qui lui permet de s'intégrer à vos flux de travail et d'accéder à des informations pertinentes et exploitables. Une fois authentifiés, ces connecteurs permettent à ChatGPT de consulter des informations et d'effectuer des tâches telles que résumer votre boîte de réception du jour ou trouver des plages horaires où vous êtes disponible pour une réunion. Cependant, pour agir sur ces sites, vous serez toujours invité à ouvrir une session en prenant le contrôle du navigateur. 

De plus, vous pouvez programmer la répétition automatique des tâches terminées, comme la génération d'un rapport hebdomadaire sur les indicateurs de performance chaque lundi matin.

Cette version marque la première fois que les utilisateurs peuvent demander à ChatGPT d'effectuer des actions sur le Web. Cette nouvelle capacité fait naître de nouveaux risques, notamment car ChatGPT peut directement accéder à vos données, qu’il s’agisse d’informations consultées via des connecteurs ou sur des sites Web auxquels vous vous êtes connecté à l’aide du mode de prise de contrôle. Nous avons renforcé les contrôles puissants dont disposait déjà la version préliminaire d’Operator et ajouté des garde-fous pour faire face aux problématiques telles que la gestion d’informations sensibles sur le Web en direct, une portée utilisateur plus large et l’accès (limité) au réseau du terminal. Bien que ces mesures d'atténuation réduisent considérablement le risque, les outils élargis de l'agent ChatGPT et la portée plus large de ses utilisateurs signifient que son profil de risque global est plus élevé. 

Nous avons mis un accent particulier sur la protection de l'agent ChatGPT contre la manipulation adverse par injection d'invite, un risque pour les systèmes d'agents en général, et avons préparé des mesures d'atténuation plus étendues en conséquence. Les injections d'invites sont des tentatives de tiers de manipuler le comportement de l’agent par le biais d’instructions malveillantes que l’agent ChatGPT peut rencontrer sur le Web lors de la réalisation d’une tâche. Par exemple, une invite malveillante cachée dans une page Web, comme dans des éléments invisibles ou des métadonnées, pourrait tromper l’agent et le pousser à exécuter des actions non prévues, telles que partager des données privées d’un connecteur avec l’attaquant ou effectuer une action nuisible sur un site auquel l’utilisateur est connecté. Étant donné que l'agent ChatGPT peut effectuer des actions directes, les attaques réussies peuvent avoir un impact plus important et présenter des risques accrus. 

Nous avons formé et testé l'agent afin qu'il soit capable d'identifier et de résister aux injections de code, en plus d'utiliser la surveillance pour détecter rapidement les attaques par injection d'invite et y répondre. Exiger une confirmation explicite de l'utilisateur avant toute action conséquente réduit encore davantage le risque de préjudice lié à ces attaques, et les utilisateurs peuvent intervenir dans les tâches si nécessaire en prenant le contrôle ou en mettant en pause. Les utilisateurs devraient évaluer ces compromis lorsqu'ils décident des informations à fournir à l'agent et prendre des mesures pour minimiser leur exposition à ces risques, comme désactiver les connecteurs lorsqu'ils ne sont pas nécessaires pour une tâche. 

Nous avons également mis en place des mesures d’atténuation concernant les erreurs du modèle, surtout parce que le modèle peut désormais effectuer des tâches qui ont un impact sur le monde réel : 

• Confirmation explicite de l'utilisateur : ChatGPT est formé pour vous demander explicitement votre autorisation avant d'entreprendre des actions ayant des conséquences réelles, comme effectuer un achat.
• Supervision active (« Mode surveillance ») : Certaines tâches critiques, comme l’envoi de courriels, nécessitent votre supervision active.
• Atténuation proactive des risques : ChatGPT est formé pour refuser activement les tâches à haut risque, telles que les transferts bancaires.

Enfin, nous avons introduit des contrôles supplémentaires pour restreindre les données auxquelles le modèle a accès : 

• Contrôles de confidentialité : D’un simple clic dans les paramètres de ChatGPT, vous pouvez supprimer toutes les données de navigation et fermer immédiatement une session de toutes les sessions actives du site Web. Sinon, les témoins persistent selon les politiques de témoins de chaque site visité, ce qui peut rendre les visites répétées plus efficaces.
• Mode prise en charge sécurisé du navigateur : Lorsque vous interagissez avec le Web via le navigateur de ChatGPT (« mode prise en charge »), vos entrées restent privées. ChatGPT ne collecte ni ne stocke aucune des données que vous saisissez au cours de ces sessions, telles que les mots de passe, car le modèle n'en a pas besoin et il est plus sécurisé qu'il ne les voie jamais.

Avec les capacités accrues du modèle, nous avons pris la décision de traiter l'agent ChatGPT comme ayant des capacités élevées en matière biologique et chimique dans le cadre de notre cadre de préparation⁠, en activant les mesures de protection associées. Bien que nous ne disposions pas de preuves formelles indiquant que ce modèle pourrait réellement aider un novice à causer des dommages biologiques graves — le seuil caractérisant une capacité élevée — nous adoptons le principe de précaution et mettons en place dès maintenant les garde-fous nécessaires. Par conséquent, ce modèle possède notre pile de sécurité la plus complète à ce jour, avec des mesures de protection renforcées pour la biologie : modélisation des menaces exhaustive, formation au refus d'utilisation à double sens, classificateurs et moniteurs de raisonnement toujours actifs, et pipelines d'application clairs. 

Nous savons que les mécanismes de sécurité biologique sur plusieurs niveaux sont plus efficaces lorsqu’ils concernent plusieurs laboratoires. Ainsi, en plus de nos initiatives de sécurisation de l’agent ChatGPT, nous collaborons avec l’ensemble de l’écosystème pour renforcer les défenses. Dès le premier jour, nous avons collaboré avec des experts externes en biosécurité, des instituts de sécurité et des chercheurs universitaires pour guider la création de notre modèle de menace, nos évaluations et nos politiques. Des examinateurs disposant d’une formation en biologie ont validé nos données d’évaluation, et des membres d’équipes rouges ont mis à l’épreuve nos garde-fous dans le cadre de scénarios réalistes. Plus tôt ce mois-ci, nous avons organisé un atelier sur la biodéfense avec des experts gouvernementaux, des chercheurs, des laboratoires nationaux et des ONG pour accélérer la collaboration et faire progresser la recherche autour de la biodéfense basée sur l’IA. Nous continuerons de collaborer à l'échelle mondiale pour garder une longueur d'avance sur les risques émergents. 

Pour en savoir plus sur notre approche de sécurité robuste pour le modèle agentique unifié, consultez la fiche système⁠. Nous lançons également un programme de prime aux bogues⁠ afin de pouvoir identifier et corriger les risques réels.

L'agent ChatGPT commence à être déployé aujourd'hui pour les versions Pro, Plus et Team; les utilisateurs Pro y auront accès d'ici la fin de la journée, tandis que les utilisateurs Plus et Team y auront accès dans les prochains jours. L’accès sera ouvert aux utilisateurs Enterprise et Education dans les semaines à venir. Les utilisateurs Pro peuvent envoyer 400 messages par mois, contre 40 pour les utilisateurs de nos autres formules payantes. Un système flexible de crédits permettra d’aller au-delà de ces limites.

Nous continuons à travailler pour permettre l'accès à l'Espace économique européen et à la Suisse. 

Le site de la version préliminaire d’Operator restera fonctionnel encore quelques semaines, après quoi il sera supprimé. La recherche approfondie fait désormais partie des fonctionnalités de l’agent ChatGPT. Si vous préférez la fonction originale de recherche approfondie — qui peut prendre un peu plus de temps à s’exécuter, mais fournit par défaut des réponses plus détaillées et approfondies — vous pouvez toujours y accéder en sélectionnant « recherche approfondie » dans le menu déroulant du rédacteur de message.

L’agent ChatGPT en est encore à ses débuts. Il est capable d'accomplir toute une gamme de tâches complexes, mais il peut tout de même commettre des erreurs. 

Nous pensons qu’il pourrait se montrer très efficace dans la création de diaporamas, mais cette fonctionnalité est encore en bêta. À l’heure actuelle, les résultats peuvent parfois sembler rudimentaires dans leur mise en forme et leur finition, surtout lorsqu’on commence sans document existant. Nous avons axé les capacités initiales du modèle sur la génération d’artefacts qui organisent les informations dans un flux et un format adaptés aux présentations, avec des éléments tels que du texte, des graphiques, des images et des formes, qui sont nativement et facilement modifiables après l’exportation, optimisant la structure et la flexibilité. Par ailleurs, les diapositives présentées dans la visionneuse et celles du fichier PPT exporté diffèrent parfois, un point sur lequel nous travaillons à réduire. De plus, bien que vous puissiez actuellement téléverser une feuille de calcul existante pour que ChatGPT la modifie ou l’utilise comme modèle, cette fonctionnalité n’est pas encore disponible pour les diaporamas. Nous sommes déjà en train de former la prochaine version de la fonctionnalité de création de diaporamas de ChatGPT afin de produire des résultats plus raffinés et sophistiqués, avec des capacités plus étendues et une mise en forme améliorée.

Dans l'ensemble, nous prévoyons une amélioration continue de l'efficacité, de la profondeur et de la polyvalence de l'agent ChatGPT au fil du temps, notamment grâce à des interactions plus fluides, à mesure que nous ajustons le niveau de supervision requis de la part de l'utilisateur afin de le rendre plus utile tout en garantissant une utilisation sécurisée.