Choisissez Browser Use si le travail peut s’achever dans une session de navigateur. Choisissez Computer Use si un agent doit atteindre une application native, une fenêtre du bureau ou une boîte système. Le périmètre d’action fait la différence. Un outil Web peut cliquer par coordonnées et un outil de bureau peut manipuler une fenêtre de navigateur.
Un utilisateur de Reddit décrit des blocages sur des sites connectés et des parcours qui échouent en cours de route. Essayez d’abord une tâche courte sur votre propre session.
Une seule étape suffit parfois à quitter le Web. Demandez à un agent de navigateur de récupérer la donnée ou de télécharger le document, puis ouvrez le résultat vous-même ou passez-le à un outil de fichiers. Tabbit Browser illustre la lecture et la délégation dans une même application.
À retenir
Commencez par l’environnement le plus restreint qui puisse livrer le résultat.
Examinez séparément le périmètre d’action et la manière de trouver un contrôle.
Un navigateur connecté donne accès aux droits de la session.
Après une navigation, un changement de taille ou une boîte de dialogue, reprenez une capture avant de cliquer par coordonnées.
Vérifiez l’état final de la page ou du fichier.
Les deux outils en un coup d’œil
| Point de décision | Browser Use | Computer Use |
|---|---|---|
| Périmètre | Session, page ou groupe d’onglets | Environnement graphique autorisé |
| Informations visibles | Éléments, noms accessibles, texte ou captures selon l’interface | Captures, parfois informations d’accessibilité ou contrôles de fenêtre |
| Actions habituelles | Naviguer, cliquer, remplir, extraire, changer d’onglet | Déplacer le pointeur, saisir, défiler, changer d’application |
| Droits à vérifier | Profil, origine, onglets et authentification | Bureau, applications, fichiers et permissions système |
| Exemple | Ouvrir les conditions d’une offre et copier une clause | Ouvrir un PDF dans un lecteur natif et régler l’impression |
Comment trouver le contrôle
Un outil Web peut chercher un bouton par son rôle accessible et son nom. Il retrouve l’élément au moment d’agir. Cette méthode fonctionne pour un bouton bien étiqueté. Dans un éditeur où les contrôles sont dessinés sur un canevas, la page peut ne fournir aucune cible structurée. Une capture suivie d’un clic dans le navigateur peut résoudre ce cas avec le même périmètre d’accès. Voir les localisateurs de Playwright et le guide de l’automatisation Web.
Un outil graphique peut observer la zone de l’écran qu’on lui expose. Le modèle reçoit une capture, demande un mouvement ou un clic et reçoit une nouvelle vue. Un sélecteur natif de fichiers ou un lecteur PDF distinct se trouve hors de la page. Avant d’élargir l’accès, vérifiez si la page permet de transmettre directement un fichier connu, ou si un outil de fichiers peut lire le document. La documentation Anthropic détaille cette boucle.
Supposons qu’un bouton affiche les conditions d’annulation. S’il possède un nom accessible stable, repérez-le par son rôle et son nom. Si la fenêtre rétrécit et que le bouton se déplace, Playwright résout à nouveau le localisateur avant l’action suivante. Si l’interface ne fournit qu’une image, actualisez la capture et repérez à nouveau le bouton. Dans les deux cas, vérifiez la clause affichée et son URL source.
Le mode de saisie et le périmètre sont deux choix distincts. L’outil de navigation d’Anthropic accepte des références aux éléments et des coordonnées dans la fenêtre. Pour lire régulièrement le même champ, cherchez d’abord une fonction d’export ou une API officielle. À défaut, utilisez un localisateur stable et vérifiez le résultat avant de relancer l’action. Une nouvelle soumission après un résultat incertain peut créer un doublon. documentation Anthropic sur le browser use, commandes d’un agent de navigation.
L’étape où le navigateur s’arrête
Prenez une garantie en ligne dont il faut télécharger le PDF, puis imprimer la deuxième page dans la boîte système. Contrôlez la clause et l’URL, puis le document téléchargé. Vérifiez enfin la plage et l’imprimante. Le navigateur et un outil de fichiers peuvent suffire aux premières étapes. La dernière demande un accès à l’interface d’impression ou une confirmation humaine.
Si le besoin se limite à extraire la deuxième page, traitez le fichier directement. Si des réglages d’impression précis sont nécessaires, faites arrêter l’agent à l’aperçu et relisez les paramètres. Une fois l’envoi à une imprimante partagée effectué, il est plus difficile de revenir en arrière. Voir le guide des assistants de bureau.
Protéger la session accordée
Demander une lecture seule ne modifie pas les droits d’une session connectée. Un profil qui peut lire une facture peut aussi atteindre les préférences de paiement. Pour commencer, choisissez des pages publiques ou un profil séparé, limitez les domaines et fixez un point d’arrêt en cas de connexion, de changement de compte ou de téléchargement inattendu. Voir le guide de sécurité et le guide des navigateurs virtuels.
Un utilisateur de Codex indique avoir parcouru une interface complexe pour tester et déboguer. Son retour porte sur sa propre expérience.
Le bureau peut exposer des fenêtres ou des fichiers étrangers à la tâche. Isolez l’environnement si possible et gardez seulement les données utiles. Une page ou un document peut contenir des instructions. Leur texte reste une donnée à examiner, sans pouvoir d’étendre votre autorisation.
Essayer un transfert depuis Tabbit
Le site international de Tabbit montre comment joindre un onglet ou une capture et confier la planification et l’exécution à l’agent. Pour comprendre le passage affiché, le chat de page suffit souvent. Pour ouvrir la politique et retrouver la citation, précisez le périmètre dans Agent Mode.
Lisez les conditions liées depuis cette page publique. Donnez le délai
exact, un court extrait et l’URL source. Arrêtez-vous si une connexion
est exigée et indiquez la page. Ne soumettez rien et ne téléchargez rien.Confiez l’impression ou l’export local à la personne ou à l’outil prévu, avec le résultat et son lien. Voir le fonctionnement de Tabbit.
Choisir selon le résultat attendu
| Besoin | Premier choix | Vérification |
|---|---|---|
| Comparer des clauses publiques | Navigateur | Texte exact et URL pour chaque offre |
| Modifier un éditeur Web sur canevas | Action visuelle dans le navigateur si disponible | Valeur ou état modifié |
| Extraire du texte d’un PDF local | Outil de fichiers | Page et passage corrects |
| Régler l’impression native | Outil de bureau ou personne | Imprimante, plage et confirmation |
| Contrôler un flux mixte | Séparer au changement d’application | Preuve de chaque transfert et du résultat final |
Les guides Terra pour le navigateur et Terra pour le bureau distinguent les capacités du modèle des droits de l’outil. Choisissez d’abord une tâche dont le résultat se vérifie en quelques secondes. Élargissez l’environnement si vous pouvez nommer l’action qui l’exige.
Tabbit convient à la première étape si vous devez recueillir et vérifier des informations web dans le même navigateur.
Questions fréquentes
Quelle différence entre Browser Use et Computer Use ?
Browser Use pilote un navigateur ou une session précise. Computer Use pilote un environnement graphique qui peut inclure des applications natives et des fenêtres système.
Computer Use exige-t-il toujours une capture et une souris ?
Un outil visuel lit des captures et agit avec le pointeur et le clavier. D’autres outils de bureau peuvent exploiter l’accessibilité ou une interface de l’application.
Un agent peut-il utiliser un site sur lequel je suis déjà connecté ?
Certains agents se raccordent à un profil compatible. D’autres lancent une session vierge ou distante. Vérifiez quelle session est accessible et quels droits elle transmet.
Un outil de navigateur peut-il cliquer par coordonnées ?
Oui. Une bibliothèque d’automatisation peut cliquer à un point de la page. Elle reste dans le périmètre du navigateur autorisé.
Quand faut-il un outil de bureau ?
Lorsqu’une application native ou une boîte système est indispensable et qu’aucune API ni aucun transfert de fichier ne convient. Vous pouvez limiter le changement d’outil à cette étape.
Comment vérifier la fin de la tâche ?
Cherchez le résultat demandé dans la page ou dans le fichier. Vérifiez le passage, la source ou l’emplacement. Une action réussie confirme seulement l’exécution d’une étape.