Claude 3.5 Sonnet. Vanaf vandaag, 23 oktober 2024, kan dit grote taalmodel (LLM) veel functies op uw computer overnemen. Ja, Claude AI kan menselijke interacties met uw pc nabootsen, van het verplaatsen van de cursor tot typen, klikken en browsen.
Deze nieuwste update, genaamd de "Computer Use"-functie, maakt het mogelijk voor Claude om uw systeem te besturen via eenvoudige opdrachten. Door te analyseren wat er op uw scherm gebeurt, kan Claude taken automatiseren die eerder uw directe invoer nodig hadden. Het kan bijvoorbeeld informatie uit één app halen (zoals een spreadsheet) en deze in een andere invoeren, zoals een online formulier of documenteditor. In de demo die Anthropic liet zien, was de AI in staat om complexe formulieren autonoom in te vullen door gegevens in realtime op te halen en te verwerken.
Dus, hoe werkt het? Claude vertrouwt op screenshots van je desktop en gebruikt die beelden om te begrijpen welke acties hij moet ondernemen. De AI berekent hoeveel de cursor moet worden verplaatst of welke toetsen moeten worden ingedrukt op basis van wat hij op het scherm "ziet". Het is momenteel niet perfect. Het kan moeite hebben met basisacties zoals scrollen en zoomen, maar het is een indrukwekkende sprong voorwaarts.
U kunt deze functie in bètaversie gebruiken via de API van Anthropic op platforms zoals Google Cloud's Vertex AI en Amazon's Bedrock. Ontwikkelaars experimenteren al met de mogelijkheden om tools te maken die alles automatiseren, van eenvoudige beheertaken tot app-verificatieprocessen.
Gebruikers moeten nog steeds specifieke toestemmingen verlenen, om een mate van controle te behouden over wat de AI kan doen. Maar naarmate Claude zich blijft ontwikkelen, roept het vragen op over hoeveel autonomie we bereid zijn over te dragen aan AI-systemen en welke waarborgen nodig zijn om misbruik te voorkomen. Kortom, dit markeert een spannend, enigszins zenuwslopend moment in de AI-ontwikkeling. De vraag is niet alleen "wat kan Claude nu doen?" maar "hoe snel zal het nog meer kunnen doen?" Houd deze ruimte in de gaten, want met mogelijkheden als deze verandert Claude snel van assistent in autonome operator.