L’intelligence artificielle est-elle en train de prendre le contrôle du monde professionnel ? Si certains secteurs s’y engagent pleinement, d’autres restent réticents, estimant que ces technologies ne peuvent pas remplacer l’humain. Une étude de Carnegie Mellon a mis en lumière des expériences où des agents d’IA ont été testés pour gérer une entreprise fictive, révélant des résultats décevants.
Des agents comme Claude d’Anthropic, GPT-4o d’OpenAI, Google Gemini, Amazon Nova et Meta Llama ont été assignés à des rôles tels qu’analyste financier, chef de projet ou ingénieur logiciel. Les chercheurs ont aussi créé des avatars d’employés humains pour interagir avec les agents, notamment pour coordonner les ressources humaines.
Un échec retentissant des agents
Les agents ont été chargés de tâches telles que l’analyse de bases de données et la planification de visites virtuelles. Cependant, Claude 3.5 a réussi seulement 24 % des missions, atteignant 34,4 % avec les tâches partiellement réalisées. Gemini 2.0 a réussi à peine 11,4 %, tandis que les autres agents étaient en dessous des 10 %. En terme de coûts, Claude 3.5 affichait 6,34 dollars contre 0,79 dollars pour Gemini 2.0.
Les agents avaient souvent du mal à comprendre les instructions implicites ; par exemple, l’écriture dans un fichier au format « .docx » leur posait problème. Ils éprouvaient des difficultés dues à des déficits dans leurs compétences interpersonnelles. La navigation sur Internet s’est révélée complexe, d’autant plus avec les fenêtres contextuelles. Parfois, les agents prenaient des raccourcis en pensant avoir accompli leur tâche. Ces observations montrent que, bien que les IA puissent exceller dans certains domaines, elles ne sont pas encore prêtes pour une autonomie totale.
Points à retenir
- Les capacités des IA restent limitées pour des missions complexes nécessitant une compréhension nuancée.
- L’interaction humaine demeure essentielle pour la réussite de tâches interconnectées.
- Le coût opératif varie d’une technologie à l’autre, influençant le choix de l’agent.
- Les déficits dans les compétences sociales des IA peuvent nuire à la collaboration en milieu professionnel.
- Les avancées en IA sont prometteuses, mais nécessitent encore des améliorations significatives.







