O novo modelo de IA da Anthropic opera computadores como humanos, erros incluídos

Você já sonhou com uma IA que pode interagir perfeitamente com o seu computador, assim como um humano faria? Bem, esse sonho agora é uma realidade, graças à mais recente inovação do Anthropic. Na terça -feira, eles revelaram a nova geração de seu modelo de IA Claude, chamado Claude 3,5 sonetos, que pode operar um computador com uma delicadeza surpreendente. Atualmente no modo beta, esta IA está disponível para os desenvolvedores experimentarem por meio de uma API.

Antrópica orgulhosamente rotula Claude 3,5 sonetos como o "primeiro modelo de IA da fronteira a oferecer uso de computador em beta pública". Isso significa que os desenvolvedores podem programá -lo para executar uma variedade de tarefas em um computador, como visualizar a tela, manobrar o cursor, clicar em botões e até mesmo digitar um teclado virtual. O objetivo? Para replicar a maneira como interagimos com nossos computadores todos os dias.

Agora, enquanto essa nova IA ainda está na fase experimental, não fica sem seus soluços. Às vezes pode ser um pouco desajeitado e propenso a erros. Mas foi exatamente por isso que o Antrópico o lançou na versão beta - para obter feedback valioso dos desenvolvedores e refinar o modelo ao longo do tempo.

Por que devemos nos preocupar com a IA usando computadores?

O Antrópico tem uma resposta clara para essa pergunta: "Uma grande quantidade de trabalho moderno acontece através de computadores". Ao permitir que o AIS interaja com o software da mesma maneira que os humanos, eles desbloqueiam uma infinidade de novos aplicativos que os assistentes atuais de IA não podem lidar.

Como os desenvolvedores e usuários podem se beneficiar?

Em vez de criar ferramentas específicas para cada tarefa, o antropic está ensinando as habilidades gerais de informática em Claude. Isso permite que a IA utilize uma ampla gama de programas de software padrão projetados para humanos. Os desenvolvedores podem aproveitar essa capacidade de automatizar tarefas repetitivas, construir e testar software e até conduzir pesquisas.

Várias empresas já estão aproveitando as habilidades em informática da Claude 3,5 sonetas, incluindo Asana, Canva, Cognição, Doordash, Replit e The Browser Company. Por exemplo, o REPLIT está usando esses recursos para aprimorar seu produto de agente de reprodução.

Como eles treinaram Claude para usar computadores?

Treinar Claude para navegar em um computador envolveu muita tentativa e erro, de acordo com o Antrópico. O processo exige que a IA compreenda e interprete as imagens da tela do computador e depois decida quais ações tomar com base no que ele vê. Claude 3,5 Sonnet realiza isso analisando capturas de tela, contando pixels para mover com precisão o cursor e emitir comandos do mouse.

Quão bem está o desempenho de Claude?

Nos testes de benchmarking Osworld, que avaliam a capacidade dos modelos de IA de usar computadores, o Claude 3,5 sonetos alcançou uma pontuação de 14,9%. Embora isso seja significativamente menor que o desempenho em nível humano de 70% a 75%, é quase o dobro da pontuação de 7,7% pelo próximo melhor modelo de IA na mesma categoria.

Apesar desses resultados promissores, o uso do computador de Claude ainda está em sua infância. Ainda não pode executar tarefas mais complexas, como arrastar janelas ou zoom para a tela. Além disso, como depende de capturas de tela, pode perder certas ações e notificações.

O Antrópico permanece otimista, afirmando: "Esperamos que o uso do computador melhore rapidamente para se tornar mais rápido, mais confiável e mais útil para as tarefas que nossos usuários desejam concluir". Eles também enfatizam que, à medida que a tecnologia evolui, ela se tornará mais acessível àqueles com menos experiência em desenvolvimento de software, mantendo medidas estritas de segurança.

Claude 3,5 soneto agora está acessível a todos. Os desenvolvedores podem começar a criar aplicativos com a versão beta de uso do computador na API antrópica, Amazon Bedrock e o Vertex AI do Google Cloud.