Observação de tela
Use correspondência de imagem, OCR, detecção de objetos, capturas e busca na árvore UI para encontrar texto, botões, templates ou alvos visíveis na tela Android atual.
vision.matchvision.ocrvision.detectvision.captureui.findLaiCai Flow ajuda você a usar AI para automatizar dispositivos Android e emuladores. Você pode editar Flows no Graph View, gerar Flows por chat LLM API dentro do app LaiCai ou permitir que Codex, Claude e outras ferramentas AI desktop gerem Flows por MCP.
Você pode entender uma configuração Flow como um fluxograma: cada nó dentro do Flow faz apenas uma coisa. Cada nó tem entradas e saídas, e o nó anterior passa os dados para os nós seguintes. Por exemplo, um [nó de correspondência de imagem] só encontra as coordenadas da imagem e depois passa essas coordenadas para o próximo [nó de clique] executar a tarefa de clique.
A profile stores one or more flows. The Main Flow is the entry point that runs when you start automation on a device.
O Flow oferece muitos tipos de nós para processar diferentes tipos de tarefas. Cada nó é responsável por uma ação clara ou por uma etapa de processamento de dados, como operações na tela, condições, transformação de dados, controle de fluxo, interação com serviços externos ou chamada de outro Flow. Depois de executado, um nó pode gerar dados para os próximos nós usarem.
Os nós do LaiCai Flow cobrem observação de tela, ações no dispositivo, processamento de dados, controle de fluxo e integrações externas. Você combina como blocos: observar a tela, escolher dados, agir no dispositivo e depois ramificar, esperar, repetir ou chamar outro Flow.
Use correspondência de imagem, OCR, detecção de objetos, capturas e busca na árvore UI para encontrar texto, botões, templates ou alvos visíveis na tela Android atual.
vision.matchvision.ocrvision.detectvision.captureui.findDepois que um nó anterior fornece uma posição ou valor, execute toque, swipe, toque longo, arrastar, digitar texto, pressionar teclas ou ações de área de transferência.
pointer.tappointer.swipepointer.longPresspointer.draginput.textAbra ou pare apps Android, envie Home e Back, tire capturas, grave a tela, ajuste volume ou salve mídia no telefone.
app.openapp.forceStopdevice.homedevice.backdevice.screenshotEscolha campos, leia caminhos JSON, monte objetos e arrays, filtre e ordene listas, compare valores e salve estado de execução para passos posteriores.
data.pickdata.filterdata.sortdata.jsonGetvar.setstorage.getRamifique por condições, espere entre passos, pare uma execução, chame Flows filhos, repita um Flow, percorra arrays ou execute até um Flow filho ter sucesso.
flow.branchflow.waitflow.runflow.repeatflow.forEachflow.untilChame HTTP APIs, carregue arquivos locais, execute macros ou scripts AutoJS salvos e use ADB Shell quando precisar de automação Android mais profunda.
http.requestfile.loadmacro.playautojs.runadb.shellIdeal para quem tem experiência em programação ou automação quando a tarefa é clara e não muito complexa. No Graph View, adicione nós de automação manualmente, conecte-os na ordem de execução e configure os parâmetros, entradas, saídas e a passagem de dados entre os nós.
Não é necessário saber programar. Qualquer pessoa pode descrever uma tarefa de automação em linguagem natural e deixar a IA gerar ou editar um Flow dentro do app LaiCai. Você pode explicar o objetivo como em uma conversa, como abrir um app, encontrar um botão, ler texto, tocar em um elemento, inserir conteúdo ou repetir ações. Também pode usar @mention para escolher rapidamente imagens de template, regiões OCR, assets do dispositivo ou um nó existente, para a IA atualizar o Profile atual com mais precisão.
Ideal para quem já usa Codex, Claude ou ferramentas de AI desktop semelhantes. Com o LaiCai MCP, a AI desktop pode ler diretamente dispositivos, capacidades dos nós, assets de automação e Profiles existentes, então você não precisa copiar esse contexto para o chat nem gastar tokens extras de LLM API com esse contexto local. Você pode continuar usando a leitura de código, análise de arquivos, raciocínio estruturado e contexto longo do Codex e do Claude enquanto a AI gera, verifica ou atualiza um LaiCai Flow Profile.