Claude AI prend les commandes de ton ordinateur avec la fonctionnalité « computer use » : génial ou flippant 

Claude AI s'invite sur ton PC : gain de temps ou perte de contrôle ?

Tu te souviens de JARVIS, l'assistant ultra-intelligent de Tony Stark ? Eh bien, on n'en est pas encore là, mais la récente mise à jour de Claude 3.5 Sonnet fait un sacré pas dans cette direction ! 

Anthropic introduit une nouvelle fonctionnalité, « Computer Use » qui permet à Claude AI de prendre les commandes de ton PC : utiliser le clavier, manipuler la souris, jongler entre les fenêtres…

Ça a l'air sympa tout ça mais… cette fois, je garde mon avis pour la fin (Tu devines sûrement dans quel sens ça va aller…).

L'IA prends ta place (littéralement)

L'idée derrière la fonctionnalité Computer Use est simple : Claude devient un agent IA capable d'exécuter des tâches concrètes à partir de simples instructions comme o1 le dernier modèle d'OpenAI. 

Comme tu peux le constater, on est loin du simple chatbot. 

On parle ici d'une IA qui, en plus de te répondre, peut exécuter des tâches de façon autonome comme le ferait un humain :

• interagir avec les fichiers et les programmes de ton ordinateur.
• répondre à tes mails.
• naviguer sur le web (plus besoin de chercher pendant des heures la meilleure recette de guacamole).
• faire des tests logiciels.
• commander une pizza…(même si je ne suis pas sûr qu'il comprenne encore l'importance cruciale de la double portion de fromage)

On ne va pas se mentir, voir Claude en action a un côté impressionnant. 

Comment ça fonctionne concrètement ? 

Supposons que tu veux remplir un tableau Excel avec des données venues tout droit de ton CRM.. Plutôt que de te farcir le travail fastidieux de copier-coller à la main, Claude s'en occupe . Il va :

1. Capturer l'écran¹ pour voir ce qui se passe.
2. Identifier les champs où il doit intervenir.
3. Naviguer entre les applis comme un pro.
4. Transférer les données tout seul.

Et hop, toi, tu bois ton café pendant qu'il bosse.

Les premiers cobayes… enfin, les premières entreprises testent

Les premiers utilisateurs comme Ethan Mollick (prof à Wharton) ont déjà testé² cette nouvelle fonctionnalité de Claude pour automatiser la création de plans de cours.

Quelques sociétés comme Replit, Canva, GitLab…ont déjà tenté l'expérience Computer Use, et les retours sont plutôt prometteurs selon Anthropic. 

Si tu veux tester ça avant tout le monde, tu peux passer par l'API d'Anthropic, ou via Amazon Bedrock et Google Cloud Vertex AI.

Mais la sécurité, dans tout ça ?

Ne vous méprenez pas, Computer Use de Claude 3.5 Sonnet a du potentiel. 

Mais, comme souvent avec l'IA, il ne faut pas se laisser emporter par la hype. 

Les risques sont réels : des bugs aux failles de sécurité en passant par des erreurs inattendues, il est encore loin d'être l'assistant parfait qu'on nous vend.

Anthropic a mis en place des mesures³ pour que Claude ne déraille comme HAL 9000 :

• L'IA ne peut accéder à ton ordinateur que si tu lui donnes le feu vert (ouf).
• Il est bloqué sur les sites gouvernementaux (désolé pour ta déclaration d'impôts).
• Pas de création de comptes ou de posts sur les réseaux (ton compte TikTok est en sécurité).
• Etc.

Cela dit, on sait tous qu'on est jamais à l'abri d'un bug ou d'un piratage inattendu avec les IA. 

Les bémols : ce n'est pas encore la perfection incarnée

Comme un stagiaire en première semaine, la fonctionnalité “computer use” de Claude 3.5 Sonnet n'a pas encore vraiment pris ses marques :

• Il galère parfois avec des actions toutes bêtes, comme scroller.
• Il peut rater les notifications qui pop-up à la vitesse de l'éclair.
• Ses performances varient selon les tâches.
• L'exécution peut être lente. Patience requise, donc.

L'entreprise⁴ a même révélé que Claude avait fait une petite pause pour chercher des photos du parc national de Yellowstone au lieu de finir une tâche. Eh oui, l'IA peut aussi se distraire !

Claude 3.5 Sonnet, l'assistant rêvé… ou le début des ennuis ?

Avant de sauter sur “Computer Use” comme sur les soldes d'hiver, pose-toi la question : veux-tu vraiment un assistant qui peut potentiellement voir tes dossiers « Vacances_2023 » et « Memes_à_ne_pas_montrer_au_boss » ?

Imagine deux secondes si Claude se met à envoyer tes photos les plus embarrassantes à toute ta liste de contacts professionnels. 

Si tu me connais, tu sais aussi que je reste sceptique face à cette obsession de tout automatiser. 

Cette tendance à tout automatiser sous prétexte de « gagner du temps » devient un peu envahissante. Car à force de déléguer, même les tâches les plus simples, on risque de finir par oublier comment les faire soi-même.

Comme dirait ma grand-mère : « C'est pas parce qu'on peut faire faire quelque chose par quelqu'un d'autre qu'on doit oublier comment le faire soi-même » (bon, elle parlait de faire la cuisine, mais ça s'applique aussi ici).

Peut-être qu'un jour, on n'aura même plus besoin de toucher à nos claviers. Mais entre la promesse d'une productivité décuplée et le risque de perdre totalement le contrôle, il y a un équilibre à trouver.

Alors, avant d'ouvrir encore une nouvelle boîte de Pandore, peut-être serait-il sage de réfléchir à ce qu'on y gagne… et surtout à ce qu'on risque de perdre.

A toi la tribune

Et toi, es-tu prêt(e) à laisser une IA comme Claude prendre les commandes de ton ordinateur ? Partage ton avis dans les commentaires !

---

Références

1. Developing a computer use model. Anthropic, du 22 octobre 2024. Consulté le 23 octobre 2024. ↩︎
2. When you give a Claude a mouse.by Ethan Mollick, du 22 octobre 2024.Consulté le 23 octobre 2024. ↩︎
3. Anthropic's latest AI update can use a computer on its own.The Verge, du 22 octobre 2024.Consulté le 23 octobre 2024. ↩︎
4. Post @Anthropic. X, du  22 octobre 2024. Consulté le 23 octobre 2024. ↩︎