OpenAI a récemment élargi la liste des applications compatibles avec ses logiciels de bureau, permettant ainsi à son mode voix avancé d’interagir avec d’autres applications et marquant un pas vers l’intégration de ChatGPT sur ordinateurs.
L’application de bureau a connu ses premières intégrations en novembre avec quatre applications initiales. Lors de la onzième journée de son événement “12 Days of OpenAI”, la société a annoncé de nouveaux environnements de développement intégrés (IDE), terminaux et applications de texte qu’elle soutiendra.
ChatGPT prend désormais en charge plusieurs IDE, incluant BBEdit, MatLab, Nova, Script Editor et TextMate, ainsi que VS Code pour les Insiders, VSCodium, Cursor, et WindSurf. La suite JetBrains, qui comprend Android Studio, AppCode, CLion, DataGrip, GoLand, IntelliJ IDEA, PHPStorm, PyCharm, RubyMine, RustRover et WebStorm, fait également partie des nouvelles intégrations. Les applications de terminal Warp et Prompt ont été ajoutées à la liste. Ces nouvelles intégrations rejoignent celles existantes incluant VS Code, Xcode, Terminal, iTerm 2 et TextEdit.
Pourtant, l’accès aux applications de codage ne sera pas la seule fonctionnalité intégrée pour les applications de bureau de ChatGPT. OpenAI a également ajouté Apple Notes, Notion et Quip à ses intégrations. Le mode voix avancé peut interagir avec ces applications, en tenant compte du contexte des projets présentés dans les intégrations.
OpenAI a souligné que les utilisateurs doivent autoriser ChatGPT à accéder à ces applications.
Permettre à ChatGPT d’utiliser votre ordinateur
Les intégrations d’applications avec des chatbots d’IA ne sont pas nouvelles. En octobre, GitHub Copilot a ajouté des intégrations pour des plateformes de codage. Relier des applications à ChatGPT ou Copilot permet d’apporter un contexte à l’expérience de chat. Les développeurs peuvent demander de l’aide à ChatGPT pour un projet réalisé sur VS Code, et le chatbot comprend ce sur quoi ils travaillent.
Kevin Weil, directeur produit chez OpenAI, a indiqué lors d’une diffusion en direct que l’amélioration de l’application de bureau permettrait de se rapprocher d’une expérience utilisateur plus autonome pour ChatGPT.
“Nous avons investi beaucoup d’efforts dans nos applications de bureau,” a déclaré Weil. “À mesure que nos modèles deviennent de plus en plus puissants, ChatGPT deviendra de plus en plus autonome. Cela signifie que nous iront au-delà des simples questions-réponses, ChatGPT commencera à agir pour vous.”
Il a ajouté que les applications de bureau “sont une partie essentielle” de cette transformation.
“En tant qu’application de bureau, vous pouvez faire bien plus que ce qu’une simple fenêtre de navigateur permet,” a-t-il précisé. “Cela inclut, avec votre permission, la possibilité de voir ce qui est affiché à l’écran et d’automatiser bon nombre des tâches que vous réalisez sur votre bureau. Nous en dirons beaucoup plus à ce sujet à l’approche de 2025.”
Si OpenAI permet à ChatGPT d’accéder à davantage de votre ordinateur, cette fonctionnalité s’approchera de celle de Claude, le système concurrent d’Anthropic, qui permet à Claude d’interagir directement avec l’ordinateur d’un utilisateur.
OpenAI a déjà annoncé une fonctionnalité assez similaire pour la version mobile de ChatGPT, bien que le chatbot ne puisse pas encore accéder aux ordinateurs ou téléphones de la même manière. Les utilisateurs peuvent partager leur écran avec le chatbot pour qu’il “voit” ce qu’ils consultent. Microsoft et Google ont également développé des fonctionnalités comparables avec Copilot Vision et Project Astra.
Comment accéder à ces fonctionnalités
Sur MacOS, les utilisateurs souhaitant ouvrir ChatGPT tout en utilisant d’autres applications peuvent utiliser la combinaison “option + espace” pour faire apparaître ChatGPT et sélectionner l’application dont ils ont besoin via un bouton sur l’écran de chat. Une autre raccourci, “option + shift + 1”, permet d’accéder à l’application la plus utilisée.
De cette fenêtre, les utilisateurs peuvent également accéder au mode voix avancé de la même manière. Le mode voix détecte automatiquement le contexte de l’application.
Les intégrations sont accessibles aux utilisateurs de ChatGPT Plus, Pro, Team, Enterprise et Edu. Cependant, les abonnés Enterprise et Edu doivent demander à leurs administrateurs informatiques d’activer cette fonctionnalité.
Bon à savoir
- Les nouvelles intégrations permettront aux utilisateurs de bénéficier d’une meilleure expérience lors de leurs projets de codage avec ChatGPT.
- La fonctionnalité d’accès à l’écran peut être améliorée à l’avenir, offrant plus de possibilités d’interaction avec le chatbot.
- Les abonnés à ChatGPT peuvent aussi bénéficier de modèles de voix avancés pour une interaction plus naturelle.