Runner H: automatização de tarefas de execução de páginas da Web por meio de comandos de linguagem natural (aplicativo para testes internos)

Introdução geral

A Runner H é uma empresa dedicada ao desenvolvimento de modelos de ação de ponta projetados para aumentar a produtividade do trabalhador por meio de recursos avançados de IA. Seu principal produto, o Runner H, é um agente avançado de IA projetado para ajudar os usuários a automatizar tarefas complexas de várias etapas, reduzindo a repetição e a entrada manual. Por meio de comandos simples de linguagem natural, o Runner H pode projetar e executar processos de automação da Web, aumentando consideravelmente a eficiência de desenvolvedores e equipes em testes da Web e automação de processos. As principais tecnologias do Runner H incluem Visual Language Modelling (VLM) e Large-scale Language Modelling (LLM), permitindo que ele compreenda e se adapte às mudanças na interface do usuário e corrija problemas automaticamente.

Lista de funções

• Automação de tarefasElimine o trabalho manual de várias etapas, automatizando o design dos processos de automação da Web por meio de comandos de linguagem natural.
• Suporte à decisãoSuporte a decisões inteligentes para ajudar os usuários a tomar decisões comerciais mais inteligentes.
• Adaptação da interfaceAdaptação automática às alterações na interface do usuário, reduzindo a complexidade da manutenção dos seletores.
• função de autocuraCapacidade de autocorreção para reparar automaticamente interrupções na automação devido a alterações na interface.
• Plataforma do desenvolvedorOferece o Studio, uma plataforma para desenvolvedores que oferece suporte a processos automatizados de criação, revisão e edição.
• Integração de APISuporte a uma ampla gama de necessidades de automação, chamando agentes em execução na nuvem por meio de APIs.

Usando a Ajuda

Instalação e uso

1. Criar processos automatizados::
   • Depois de fazer login, vá para o Developer Platform Studio.
   • No Studio, clique no botão "Create New Process" (Criar novo processo) e insira um nome e uma descrição do processo.
   • Use comandos de linguagem natural para descrever tarefas que precisam ser automatizadas, como "Clique no botão Adicionar ao carrinho".
2. Edição e depuração::
   • Depois de criar um processo, você pode visualizar e editar cada etapa do processo no Studio.
   • Usando as ferramentas de depuração fornecidas com a plataforma, execute o processo e verifique se há erros.
   • Se o processo for interrompido, use a função de autocorreção para reparar automaticamente ou ajustar manualmente as etapas do processo.
3. Operação e monitoramento::
   • Após a edição e a depuração, salve o processo e clique no botão "Run" (Executar).
   • Durante a operação, é possível monitorar a execução dos processos em tempo real e visualizar os registros e resultados.
4. Chamada de API::
   • Para aqueles que precisam se integrar a outros sistemas, podem usar a API fornecida pela H Company.
   • Gerar chaves de API na plataforma e consultar a documentação da API para chamadas de integração.

Funções principais

Automação de tarefas

• Descreva a tarefaNo Studio, use a linguagem natural para descrever as etapas de uma tarefa que precisa ser automatizada.
• Processo de geraçãoO sistema gera automaticamente o processo automatizado correspondente com base na descrição.
• Depuração e otimizaçãoExecute o processo, verifique se há erros e faça ajustes de otimização.

Suporte à decisão

• entrada de dadosInsira os dados a serem analisados e o sistema gerará automaticamente recomendações para a tomada de decisões.
• Exibir relatórioRelatórios de decisão gerados pelo sistema podem ser visualizados e baixados da plataforma.

Adaptação da interface e recuperação automática

• adaptação automáticaO sistema se adapta automaticamente às alterações na interface da Web, reduzindo a necessidade de ajustes manuais.
• função de autocuraNo caso de uma interrupção de processo, o sistema tenta repará-la automaticamente para garantir que o processo seja executado sem problemas.

Funções em destaque

• Modelagem de linguagem visual (VLM)O VLM do Runner H compreende e se adapta às mudanças na interface do usuário, corrigindo automaticamente os problemas e melhorando a estabilidade das tarefas automatizadas.
• Modelagem de linguagem grande (LLM)Os LLMs do Runner H têm capacidades básicas de programação e de tomada de decisões de alto nível que lhes permitem lidar com tarefas complexas de automação.
• função de autocuraO Runner H corrige automaticamente os problemas causados por alterações na interface do usuário, reduzindo o tempo e o custo de manutenção de tarefas automatizadas.

Faça a IA trabalhar para você com o Runner H

Navegar pela interface, ler e interpretar a documentação, clicar nos componentes certos e repetir essas ações. Atualmente, essas tarefas são realizadas por humanos todos os dias, às vezes o dia todo.

Agora é diferente.

Hoje, temos o orgulho de apresentar o Studio, uma plataforma projetada para que os desenvolvedores (e, em última análise, qualquer pessoa) criem facilmente processos automatizados prontos para produção e altamente confiáveis em escala. O Studio é dimensionável e continuará a crescer para atender a diversas necessidades de automação e se generalizar para além da Web.

Nosso principal agente, o Runner H, estará disponível como uma versão beta privada na plataforma. Com comandos simples de linguagem natural, ele automatiza o design de processos de automação da Web, eliminando operações manuais complicadas de várias etapas e revolucionando a maneira como os desenvolvedores e as equipes abordam os testes da Web e a automação de processos.

Como proxy da Web, o Runner H oferece desempenho de última geração, superando o benchmark público WebVoyager no Antrópica Computador Use (Saiba mais). Nosso modelo básico interno, que é menor, especializado e mais barato (possivelmente por ordens de magnitude), pode superar os grandes modelos de uso geral quando se trata de oferecer suporte a agentes.

Estamos empolgados em ver o Runner H liderando a era dos agentes, sistemas que podem executar tarefas complexas de forma confiável. Se você quiser se juntar a nós, por favorRegistre-se na lista de espera do Beta privado.

Studio e Runner H 0.1

Os desenvolvedores da Web geralmente passam inúmeras horas mantendo seletores frágeis e corrigindo problemas de quebra de automação causados pela natureza em constante mudança das interfaces modernas da Web.

O Runner H é o nosso agente da Web com IA, desenvolvido pelo Studio, que resolve esses pontos problemáticos adaptando-se automaticamente às alterações da interface do usuário e se autocorrigindo por meio da compreensão de comandos de linguagem natural.

Enquanto nossos agentes lidam com a complexidade de escrever e manter seletores nos bastidores, os desenvolvedores podem se concentrar na parte semântica do fluxo de trabalho e da produção, liberando mais tempo para o trabalho de desenvolvimento de maior valor.

As próximas versões beta privadas incluem:

• Chamada de APIs de proxy prontas para uso e hospedadas na nuvem
• Estúdio para criar automação, revisar e editar o passado e executar em tempo real

No Studio, você pode criar processos automatizados confiáveis para fluxos de trabalho complexos, como testes de cenários de comércio eletrônico de ponta a ponta (desde a descoberta do produto até a confirmação do pedido) e processos de integração para serviços financeiros (processos de validação em várias etapas pré-preenchidos, uploads de documentos e verificações de conformidade).

Uma etapa importante para uma grande visão: planejar, observar, executar e repetir

Em comparação com os métodos tradicionais, como a automação de telas, o Runner H permite a automação em nível de produção de forma mais confiável, eficiente, fácil e com capacidade de expansão. Isso se deve às conquistas de nossas equipes de engenharia e pesquisa desde a fundação da empresa:

• Treinamos o melhor Modelo de Linguagem Visual (VLM) do mercado para prever as coordenadas de um clique do mouse com base em uma captura de tela e uma instrução de linguagem natural (por exemplo, "clique no botão Adicionar ao carrinho"), e seu desempenho é excelente no Screenspot, uma referência que se concentra em modelos de manipulação de interface do usuário.
• Projetamos o melhor proxy da Web do mercado para tarefas abertas, e seu desempenho é excelente no WebVoyager.

Para saber mais sobre os fundamentos do Runner H, mais sobre nosso VLM e Large Language Model (LLM), consulteaqui (literário).

O caminho a seguir

Por fim, imaginamos um futuro em que você possa interagir com o Runner H tão naturalmente quanto interage com seus colegas.

Em seguida, continuaremos avançando nas seguintes áreas:

• Aumento da precisão e da eficiência de custos por meio de técnicas complexas em larga escala, incluindo aprendizagem por reforço e destilação
• Adiciona recursos de depuração e ensino ao Studio para que os desenvolvedores possam treinar o Runner H 0.1 para se destacar em tarefas específicas
• Promover a comunidade de desenvolvedores por meio de conteúdo técnico, suporte e eventos
• Aderência a padrões de segurança de nível empresarial para garantir que o Runner H 0.1 funcione de forma segura e confiável (mais pesquisas estão por vir)

Esse é o nosso primeiro passo no caminho para democratizar a agência. Na H, acreditamos que a redução da complexidade cria espaço para a inovação. Quando gastamos menos tempo em tarefas insignificantes, podemos nos concentrar em metas significativas e na criatividade. E quando deixamos a IA trabalhar para nós, podemos realizar um trabalho mais importante.

Estamos ansiosos para explorar as possibilidades. Junte-se a nós para moldar o futuro da automação da Web.