Claude 3.5 sonett. Från och med idag, den 23 oktober 2024, kan denna stora språkmodell (LLM) nu ta över många funktioner på din dator. Ja, Claude AI kan härma mänsklig interaktion med din dator, från att flytta markören till att skriva, klicka och surfa.
Den här senaste uppdateringen, kallad "Datoranvändning"-funktionen, gör det möjligt för Claude att styra ditt system via enkla kommandon. Genom att analysera vad som händer på din skärm kan Claude automatisera uppgifter som tidigare behövde din direkta input. Till exempel kan den extrahera information från en app (som ett kalkylblad) och mata in den i en annan, till exempel ett onlineformulär eller dokumentredigerare. I demon som visades av Anthropic kunde AI fylla i komplexa formulär autonomt genom att dra och bearbeta data i realtid.
Så, hur fungerar det? Claude förlitar sig på skärmdumpar av ditt skrivbord och använder dessa bilder för att förstå vilka åtgärder som ska vidtas. AI:n beräknar hur mycket markören ska flyttas eller vilka tangenter som ska tryckas på baserat på vad den "ser" på skärmen. Det är inte perfekt just nu. Det kan kämpa med grundläggande åtgärder som att rulla och zooma, men det är ett imponerande steg framåt.
Du kan komma åt den här funktionen i beta via Anthropics API på plattformar som Google Clouds Vertex AI och Amazons Bedrock. Utvecklare experimenterar redan med dess möjligheter att skapa verktyg som automatiserar allt från enkla administratörsuppgifter till appverifieringsprocesser.
Användare kommer fortfarande att behöva ge specifika behörigheter och behålla en nivå av kontroll över vad AI kan göra. Men när Claude fortsätter att utvecklas väcker det frågor om hur mycket autonomi vi är villiga att lämna över till AI-system och vilka skyddsåtgärder som behövs för att förhindra missbruk. Kort sagt, detta markerar ett spännande, lite nervöst ögonblick i AI-utveckling. Frågan är inte bara "vad kan Claude göra nu?" men "hur snart kommer det att göra ännu mer?" Håll ett öga på det här utrymmet eftersom Claude, med sådana här funktioner, snabbt går från assistent till autonom operatör.