Claude 3.5 Sonnet. Depuis aujourd'hui, le 23 octobre 2024, ce grand modèle de langage (LLM) peut prendre en charge de nombreuses fonctions sur votre ordinateur. Oui, Claude AI peut imiter les interactions humaines avec votre PC, du déplacement du curseur à la saisie, en passant par les clics et la navigation.
Cette dernière mise à jour, baptisée « Utilisation de l'ordinateur », permet à Claude de contrôler votre système via de simples commandes. En analysant ce qui se passe sur votre écran, Claude peut automatiser des tâches qui nécessitaient auparavant votre intervention directe. Par exemple, il peut extraire des informations d'une application (comme un tableur) et les saisir dans une autre, comme un formulaire en ligne ou un éditeur de documents. Dans la démonstration présentée par Anthropic, l'IA était capable de remplir des formulaires complexes de manière autonome en extrayant et en traitant les données en temps réel.
Alors, comment ça marche ? Claude s'appuie sur des captures d'écran de votre bureau et utilise ces visuels pour comprendre les actions à entreprendre. L'IA calcule le déplacement du curseur ou les touches à appuyer en fonction de ce qu'elle « voit » à l'écran. Ce n'est pas encore parfait. Il peut avoir des difficultés avec des actions de base comme le défilement et le zoom, mais c'est une avancée impressionnante.
Vous pouvez accéder à cette fonctionnalité en version bêta via l'API d'Anthropic sur des plateformes comme Vertex AI de Google Cloud et Bedrock d'Amazon. Les développeurs expérimentent déjà ses capacités pour créer des outils qui automatisent tout, des tâches administratives simples aux processus de vérification des applications.
Les utilisateurs devront toujours accorder des autorisations spécifiques, conservant ainsi un certain contrôle sur les actions de l'IA. Mais l'évolution continue de Claude soulève des questions quant au degré d'autonomie que nous sommes prêts à accorder aux systèmes d'IA et aux mesures de protection nécessaires pour prévenir les abus. En bref, il s'agit d'un moment passionnant, quoique légèrement inquiétant, dans le développement de l'IA. La question n'est pas seulement de savoir « que peut faire Claude maintenant ? », mais plutôt « dans combien de temps pourra-t-il faire encore plus ? » Gardez un œil sur ce domaine, car, grâce à de telles capacités, Claude passe rapidement du statut d'assistant à celui d'opérateur autonome.