Dois agentes de IA de desktop amplamente utilizados na China, Doubao Work e Tencent WorkBuddy, lançaram atualizações em 28 de outubro com objetivos semelhantes: garantir que o agente continue funcionando no computador mesmo quando o usuário se afasta dele e fornecer ao usuário maneiras mais convenientes de controlar o processo através do telefone.
Doubao Work é treinado com exemplos de demonstração.
A ByteDance anunciou que as capacidades do Doubao Work, seu agente produtivo, foram aprimoradas com cliques na tela mais precisos e rápidos. O novo recurso principal é a capacidade de gravação. O usuário agora pode demonstrar uma tarefa em seu computador uma vez, descrevendo os passos enquanto executa. Após a conclusão da gravação, o Doubao Work transforma essas ações e a narração em uma habilidade personalizada. Quando um problema semelhante surge no futuro, o usuário seleciona essa habilidade e explica apenas as diferenças, em vez de descrever todas as etapas novamente.
Anteriormente, o Doubao Work podia gravar ações no navegador como habilidades, mas agora essa função se estende ao controle de todo o computador. A segunda alteração diz respeito aos usuários de Mac. Graças a uma nova configuração que permite ao Doubao funcionar com a tela bloqueada, tarefas que exigem controle do computador continuam sendo executadas após o bloqueio do Mac. Um usuário que deixa o local de trabalho pode enviar uma nova tarefa para este Mac bloqueado a partir do seu telefone e visualizar os resultados lá, continuando o trabalho após desbloquear.
Nas últimas semanas, o Doubao Work também recebeu vários recursos adicionais, incluindo importação de conversas e memória de outros assistentes, canvas e agentes paralelos.
WorkBuddy adiciona funcionalidade de controle remoto em tempo real.
A Tencent apresentou um modo de controle remoto para o WorkBuddy no suporte técnico da equipe Tencent EdgeOne. Iniciar o aplicativo móvel permite conectar-se ao computador do usuário e exibe uma visão ao vivo da área de trabalho, permitindo que o usuário acompanhe cada ação realizada pelo agente. Esta visão ao vivo é exibida em uma pequena janela flutuante acima do chat, enquanto o campo de entrada permanece ativo, permitindo corrigir o agente caso ele se desvie do curso.
No modo paisagem de tela cheia, tocar no telefone simula um clique no mesmo ponto no computador e também fornece um painel de teclado, atalhos de teclado e um mouse virtual para pequenos ajustes. A configuração no Mac exige que os conectores remotos sejam ativados com uma única conta e que as permissões de gravação de tela e acessibilidade sejam concedidas. A Tencent afirma que apenas um telefone verificado pode se conectar ao computador simultaneamente, a sessão ocorre por um canal criptografado, e a entrada do usuário e as imagens da tela remota não são salvas, e o controle remoto utiliza tráfego de dados, mas não tokens.
Em conjunto, essas atualizações demonstram uma tendência no desenvolvimento de agentes de desktop capazes de funcionar em segundo plano, com o telefone atuando como ferramenta para monitorá-los.



