Revolucionar o Windows Copilot: Liberte-se da Caixa de Chat

Com o lançamento do ChatGPT da OpenAI, os chatbots se tornaram a cara da Inteligência Artificial (IA) no mundo de hoje. Parece que conversar com um chatbot de IA é a única maneira de interagir com modelos de IA e sistemas inteligentes. Embora eu concorde que um chatbot oferece uma interface esquemática e amigável para a maioria dos usuários interagir com um modelo de IA, não pode ser verdade que todos os seus sonhos de interagir com um sistema inteligente morrem nos quatro cantos de uma caixa de bate-papo de texto.

A este respeito, a Microsoft entrou no frenesim de integrar chatbots de IA em muitos dos seus produtos. Mais notavelmente, integrou o Windows Copilot, um chatbot de IA desenvolvido com modelos OpenAI no Windows 11 com muito entusiasmo e pompa. Não perca o fato de que a Microsoft substituiu Cortana com o Windows Copilot no Windows 11. E a gigante da tecnologia também integrou o Windows Copilot ao Windows 10, substituindo a Cortana.

Certamente, a Microsoft acredita que os chatbots de IA serão o futuro. Mas será que é realmente a visão da computação inteligente, alimentada pela IA? Ou a Microsoft está apenas cedendo ao hype da IA ​​e integrando chatbots de IA para mostrar aos investidores que ela está no jogo? Seja qual for a resposta, a forma atual de chatbots baseados em IA tem aplicação limitada e parece restritivo obter qualquer ajuda significativa do chatbot, especialmente no nível do sistema operacional.

Copiloto do Windows: um downgrade em relação à Cortana?

A Microsoft decidiu encerrar a Cortana – um produto de 9 anos – em favor do Windows Copilot, mas será um substituto adequado, especialmente quando o Windows Copilot ainda está em versão prévia?

No entanto, vamos fazer a comparação ponto por ponto. Em primeiro lugar, a Cortana era principalmente uma assistente de voz, enquanto o Windows Copilot é um chatbot de IA baseado em textoembora suporte entrada de voz, mas não por padrão.

Simplificando, o Windows Copilot não foi projetado para um experiência do usuário com foco na voz por isso proporciona uma experiência desconexa, ao contrário da Cortana, que parecia mais pessoal. Acho que, quando se trata de acessibilidade da interface do usuário, muitos preferem a entrada de voz à entrada de texto pela facilidade de uso e intuitividade. Portanto, o Windows Copilot falha no teste vital de experiência do usuário desde o início.

Chegando aos recursos, a Cortana já era um produto desenvolvido e podia realizar muitas ações no nível do sistema. Ele poderia criar um cronômetro, definir um alarme, adicionar lembretes, redigir um e-mail, encontrar definições, abrir aplicativos e fazer muito mais. Em essência, Cortana foi profundamente integrada no sistema operacional Windows e entendi muito bem o sistema.

Em comparação, o Copilot é desenvolvido com modelos de linguagem grande (LLM) de uso geral que não são adequados para executar ações locais no Windows. Quando peço ao Windows Copilot para definir um cronômetro, ele me diz para ir a um serviço online para definir um cronômetro. Isto não consigo nem definir um alarme ou tocar música. O Copilot simplesmente abre o aplicativo Spotify para mim. Não consigo encontrar nenhuma magia de IA aqui.

A Microsoft está com pressa para embarcar no trem da campanha publicitária da IA, emblemático de como a Microsoft perdeu a corrida dos smartphones, da qual agora lamenta, e não quer repetir o mesmo erro.

É claro que o Windows Copilot ainda está em versão prévia e esses recursos provavelmente serão adicionados no futuro (alguns já em teste nas compilações do Insider), mas qual foi a pressa para substituir a Cortana por um chatbot de IA que mal funcionava?

Parece-me que a Microsoft está numa situação corra para embarcar no trem da campanha publicitária da IAemblemático de como a Microsoft perdeu a corrida dos smartphones que agora lamentae não quer repetir o mesmo erro.

O que me irrita é que a Microsoft parece não ter pensado muito no Windows Copilot. Tem simplesmente integrou um chatbot e encerrou o dia, pelo menos por enquanto. A gigante da tecnologia nem sequer tentou trazer paridade de recursos entre o Copilot e a Cortana antes de substituir um produto com quase uma década de existência.

É especialmente decepcionante porque a Microsoft está adicionando uma tecla Copilot ao teclado do Windows – algo que a Microsoft chama de “mudança significativa no teclado do PC com Windows em quase três décadas”- ainda assim, tão pouca atenção foi dada a isso.

Onde está o AI Magic no Windows Copilot?

Agora, vamos ver o que o Windows Copilot pode fazer. Você pode fazer perguntas sobre qualquer assunto e obter respostas imediatamente. Você também pode passar para o modo Criativo para falar com o poderoso modelo GPT-4.

Ele pode resumir uma página da web, encontrar insights importantes, planejar um itinerário, etc. A Microsoft também adicionou uma ferramenta de captura de tela ao Copilot que usa o modelo GPT-4V para análise visual. Você pode usá-lo para realizar OCR ou encontrar informações sobre uma imagem.

Quanto aos recursos específicos do Windows, você pode dizer: “Estou tendo problemas com áudio” e o Copilot pode abrir o solucionador de problemas de áudio para você. Isto funciona para solução de problemas outros problemas do Windows também. Além disso, você pode ativar/desativar o modo escuro, fazer uma captura de tela e tirar janelas através do Copilot.

Embora esses recursos sejam decentes para a versão de visualização do Windows Copilot, a maioria deles também funciona no Edge Copilot, exceto para recursos específicos do Windows. Além disso, o Windows Copilot não pode acessar páginas da web do Chrome ou de outros navegadores. Como janelas Copilot está funcionando no motor do Edgeele não poderá acessar o conteúdo de outras janelas, seja um navegador, o Bloco de Notas ou aplicativos do Office.

Esta é outra grande lacuna na implementação do Windows Copilot. Isso é não desenvolvido usando a estrutura WinUI 3 para oferecer uma experiência nativa, o Copilot está sendo executado como uma extensão do navegador Edge. Como resultado, você não vê uma integração profunda do Windows Copilot nos principais elementos do sistema operacional.

Por exemplo, você não pode clicar com o botão direito em um arquivo no Windows Explorer e pedir ao Windows Copilot para explicá-lo, converter o formato do arquivo ou executar qualquer ação desejada. Teria sido muito legal se você pudesse lançar um arquivo Excel no Copilot a partir do menu de contexto e ele pudesse realizar a análise de dados ali mesmo. Atualmente, exceto para imagens, simplesmente não há como interagir com arquivos usando o Windows Copilot no Windows 11.

Copiloto do Windows: um caso de promessas excessivas e entrega insuficiente

Ultimamente, a Microsoft tem sido muito boa em anunciar e comercializar novos recursos, mas quando se trata de usar os recursos prometidos, parece que você não consegue encontrá-los. Quando o Windows Copilot foi anunciado há três meses, ele prometeu vários novos recursos, no entanto, eles são ainda não está disponível ou não funciona como comercializado.

Por exemplo, quando você pede ao Windows Copilot para ajustar suas janelas, ele pede sua permissão e, em seguida, ajusta apenas uma janela, deixando você realizar o resto da ação. Da mesma forma, ele não toca música específica para o humor quando você pede para tocar algo enquanto trabalha. Copiloto simplesmente lança links do YouTube e outras fontes. Não é isso que você espera de um Copiloto inteligente com tecnologia de IA, não é?

A seguir, o tão esperado menu contextual para Copilot ainda não chegou. Reescrever, Explicar e Resumir não estão disponíveis para nenhuma janela ativa. O rascunho com o Copilot também não foi encontrado em lugar nenhum, mesmo após três meses de lançamento. Sem esquecer que você não pode remover o fundo das imagens usando o Copilot, e o suporte à extensão ainda não foi adicionado.

Portanto, todos os recursos comercializados e promovidos não estão lá. É um caso simples de promessas exageradas e entrega insuficiente da Microsoft em muitos de seus produtos.

Qual poderia ser a visão do Windows Copilot?

Agora, vamos ver o que o Windows Copilot pode fazer. Se observarmos o que a comunidade de código aberto está fazendo, temos uma ferramenta interessante Open Interpreter que pode interagir com seus arquivos locais, convertê-los para outros formatos, processar vários formatos de arquivo, criar gráficos e fazer muito mais. Ele também pode interagir com várias configurações e ferramentas do sistema e executar ações no Windows.

Recentemente, uma nova versão do Open Interpreter (0.2.0) foi lançada com um modo de sistema operacional fascinante. Você pode operar seu computador com instruções simples em linguagem natural. Open Interpreter usa modelos de visão como GPT-4V para entender o ambiente GUI e execute ações em seu computador.

Para dar um exemplo, você pode pedir para ativar o modo escuro, e ele abre a página de configurações apropriada e ativa a alternância usando o modelo Vision.

Você pede para ele tocar alguma música lo-fi, e ele abre o navegador e o YouTube e encontra ótimas listas de reprodução lo-fi e toca para você. Estes são alguns exemplos básicos do que os modelos de visão são capazes, mas o Windows Copilot não consegue enviar textos para você na caixa de bate-papo.

Um Copiloto verdadeiramente inteligente deve ser capaz de enviar um e-mail, ajustar as configurações do Windows, interagir com o sistema operacional no nível do sistema e fazer muito mais. O caso de uso é ilimitado e pode ser muito útil para melhorando a acessibilidade no Windows 11 24H2.

É claro que chamar a API GPT-4V custará muito dinheiro para a Microsoft, mas pode construir um pequeno modelo de visão especificamente para Windows, bem como CogVLM. Desta forma, a latência será reduzida e tudo funcionará localmente, mesmo quando o seu PC estiver offline.

Com os próximos chipsets Intel e Snapdragon X Elite com NPUs dedicados, seria possível executar modelos menores no dispositivo. Mesmo que a Microsoft execute seu modelo visual desenvolvido internamente na nuvem, custaria muito menos.

Para dar outro exemplo, acabamos de ver a demonstração de Coelho R1 — um dispositivo de hardware com IA — que pode executar ações para você. É alimentado pelo que eles chamam de LAM (Modelo de Grande Ação). Desde pedir pizza até enviar e-mails e reservar voos, ele pode fazer tudo por você de forma inteligente, apenas com entrada de voz.

A Microsoft precisa criar algo como um LAM projetado para realizar ações, e não apenas para conversar com um chatbot.

Se uma pequena startup como a Rabbit consegue fazer isso, um grande gigante da tecnologia como a Microsoft também pode, com recursos enormes ao seu lado. Até agora, vimos a Microsoft construindo seu próprio Modelo Phi-2um pequeno LLM, apenas para fins de pesquisa. Se a Microsoft realmente deseja que experimentemos PCs com IA em 2024, ela precisa construir Modelos de visão específicos do Windows para executar agentes localmente com latência quase zero. A Microsoft precisa criar algo como um LAM projetado para realizar ações, e não apenas para conversar com um chatbot.

O Windows Copilot precisa de uma nova abordagem

Finalmente, para concluir, o Windows Copilot, em sua forma atual de chatbot, tem um caso de uso extremamente limitado e já é coberto por inúmeras extensões de navegador e pelo Edge Copilot. A Microsoft precisa de uma nova abordagem para tornar os PCs com IA uma realidade.

Concorrente mais feroz da Microsoft, a Apple é conhecida por desenvolver um produto minuciosamente e lançá-lo ao público quando está pronto para uso. Em contraste, Microsoft faz o oposto. Ela corre para lançar o produto quando ele nem está pronto com recursos funcionais e significativos disponíveis no lançamento.

É um símbolo de como a Microsoft está abordando a IA sem pensar muito. A empresa já começou a chamar o Edge de navegador de IA apenas integrando um chatbot. Ele também está trabalhando para adicionar recursos de IA ao Bloco de Notas e continua trazendo recursos com tecnologia de IA para MS Paint, Ferramenta de Recorte, aplicativos do Office e outros aplicativos originais.

Microsoft precisa supere a obsessão de integrar um chatbot e começar de novo.

Embora esses recursos de IA no aplicativo possam ajudar alguns usuários a tornar o Windows um sistema operacional inteligente, alimentado por IA, a Microsoft precisa supere a obsessão de integrar um chatbot e começar de novo com novas ideias e abordagens.

Apoie o nosso trabalho ❤️

Se você gostou deste artigo, considere deixar uma gorjeta para nos ajudar a continuar publicando conteúdo de qualidade.

5 € 10 € 15 € Outro

€

Dê uma gorjeta com PayPal Pagamento seguro no PayPal