Dans un test mené sur un catalogue de démonstration, l’équipe StackAI d’Asana a optimisé la gestion de l’historique de son agent navigateur. OpenAI rapporte un coût moyen estimé de 0,47 dollar en coûts de modèle et environ quatre minutes par exécution avec GPT-6.1 Sol.
Pourquoi l’historique pesait sur les requêtes
StackAI est la plateforme utilisée par l’équipe d’Asana pour construire des workflows. Certains peuvent naviguer sur des sites, remplir des formulaires et recueillir des informations. Selon OpenAI, l’agent transmettait au modèle l’historique croissant des pages visitées et des captures d’écran ; chaque requête renvoyait donc davantage de contenu à traiter.
En parallèle, l’agent supprimait d’anciennes captures et réduisait le texte à presque chaque étape. La perte de ces éléments pouvait le conduire à revisiter des pages déjà consultées. L’équipe a testé trois ajustements : mettre en cache l’historique de navigation, en conserver davantage de texte et supprimer les captures par lots plutôt qu’à chaque étape.
Un essai sur 32 livres et six champs à relever
Le protocole demandait à l’agent de recueillir six champs pour chacun des 32 livres d’un catalogue public de démonstration. OpenAI indique que les exécutions optimisées avec GPT-6.1 Sol ont terminé la tâche avec la bonne réponse. Leur coût moyen de modèle estimé était de 0,47 dollar et leur durée moyenne, d’environ quatre minutes.
OpenAI compare ce flux à la configuration de production initiale sur Model B et annonce un coût 76 fois supérieur ainsi qu’une durée cinq fois plus longue pour cette référence. La moyenne de référence comprend des exécutions plafonnées ou inachevées. Les montants portent sur le coût estimé du modèle, pas sur l’ensemble des dépenses d’exploitation de l’agent.
Le résultat est à lire dans le cadre de cette tâche de collecte sur un catalogue de démonstration ; il ne permet pas de prévoir les coûts d’autres sites, tâches ou configurations. OpenAI indique qu’Asana a déployé les changements de navigation dans StackAI et prépare des outils pour comparer, à l’avenir, le coût, la durée et la qualité des réponses selon les réglages choisis.
Sources de référence
À retenir
Dans une étude de cas, OpenAI rapporte que l’équipe StackAI d’Asana a testé une gestion différente de l’historique de son agent navigateur. Pour relever six champs sur chacun de 32 livres d’un catalogue de démonstration, le flux avec GPT-6.1 Sol a coûté en moyenne 0,47 dollar en coûts de modèle estimés et duré environ quatre minutes par exécution.
