Coleta de dados para IA incorporada: teleoperação, simulação para realidade e conjuntos de dados industriais em 2026.

Conteúdo

Última atualização: abril 23, 2026

Coleta de dados para IA incorporada: teleoperação, simulação para realidade e conjuntos de dados industriais em 2026.

O gargalo para a IA incorporada não é o poder computacional, mas sim os dados. Treinar uma política robótica exige fluxos sincronizados de estado de ação que simplesmente não existem na escala da internet. Três fontes atualmente suprem essa demanda. A teleoperação humana gera demonstrações de alta qualidade, ao custo do tempo do operador. A transferência de simulação para realidade aumenta a quantidade de episódios, mas introduz uma lacuna de fidelidade. Grandes conjuntos de dados abertos reúnem contribuições de dezenas de laboratórios e plataformas.

Por que os dados são o gargalo da IA ​​incorporada

A computação seguiu uma curva de escalabilidade previsível. Clusters de GPUs capazes de treinar modelos de visão-linguagem-ação (VLA) com bilhões de parâmetros estão comercialmente acessíveis hoje em dia. O que não escalou foram os dados necessários para esses modelos: pares de observações e ações registradas durante a manipulação física de robôs, com diversidade suficiente de tarefas e configurações para gerar políticas que possam ser generalizadas.

Um modelo de linguagem pode ingerir um trilhão de tokens da web em semanas. Um conjunto de dados de manipulação robótica precisa ser gerado episódio por episódio, cada um exigindo um robô físico, um ambiente real ou simulado, uma definição de tarefa e um operador humano ou uma demonstração roteirizada. A Federação Internacional de Robótica (IFR) estima que mais de 3.9 milhões de robôs industriais estavam operando globalmente em 2024, mas os maiores conjuntos de dados de manipulação abertos contêm cerca de um milhão de episódios. Essa lacuna não está diminuindo rapidamente.

O desafio se agrava ao considerarmos a lacuna de implementação: uma política treinada em um manipulador de braço único com 6 graus de liberdade não se transfere facilmente para um humanoide bimanual ou uma base móvel com um braço. Cada novo formato de robô efetivamente redefine os requisitos de dados. Abordagens de fragmentação de ações (em que uma política gera sequências de ações com várias etapas em vez de etapas individuais) reduzem a latência de inferência, mas não reduzem a necessidade de uma cobertura de treinamento diversificada.

De acordo com o artigo Open X-Embodiment (Padalkar et al., 2023, Google DeepMind et al.), o treinamento entre diferentes modelos de robôs com dados variados pode melhorar a generalização de políticas além do que os conjuntos de dados de um único modelo oferecem. A EVST aborda essa questão avaliando a qualidade dos conjuntos de dados entre modelos como parte de seu processo interno de avaliação ao selecionar o planejamento de movimento aumentado por IA para sua linha completa de robôs de 3 a 800 kg. Para obter informações sobre o hardware dessa estratégia de dados, consulte [link para a documentação]. Soluções de IA Incorporadas EVST, incluindo robôs humanoides, mãos hábeis para coleta de dados, robôs quadrúpedes e plataformas piloto para o desenvolvimento de IA incorporada.

As três principais fontes de dados: pontos fortes e limitações.

Teleoperação

A teleoperação captura demonstrações de alta qualidade no hardware do robô alvo. O operador controla o robô remotamente, através de braços robóticos, headsets de realidade virtual, exoesqueletos ou interfaces portáteis, enquanto o sistema registra cada ângulo de articulação, estado da garra, leitura de força e quadro da câmera em sincronia. Como os dados provêm de um humano executando a tarefa real no robô real, a correspondência entre ação e estado é exata e a diferença de desempenho é zero.

A limitação reside na capacidade de processamento. Operadores remotos qualificados produzem aproximadamente de 5 a 50 episódios por hora, dependendo da complexidade da tarefa, e a qualidade dos dados se degrada quando os operadores se cansam. A teleoperação também não é escalável para recuperação de falhas sem um projeto de protocolo deliberado: se os operadores sempre tiverem sucesso, a política nunca aprenderá a se recuperar de perturbações.

Transferência do simulador para a realidade

Simuladores de física (MuJoCo, NVIDIA Isaac Sim, Isaac Lab, PyBullet) permitem que pesquisadores gerem milhões de episódios de robôs a um custo marginal próximo de zero. Um único cluster de GPUs pode executar milhares de instâncias de simulação paralelas durante a noite. O custo se torna evidente na implementação: políticas treinadas em simulação frequentemente falham quando confrontadas com a dinâmica de contato do mundo real, ruído de sensores e variações visuais que o simulador não replicou com precisão. Reduzir essa lacuna entre simulação e realidade é uma área de pesquisa ativa.

Vídeo na Internet e Observação Passiva

Grandes modelos de visão-linguagem pré-treinados em vídeos da internet proporcionam uma compreensão geral da cena, o que auxilia na definição da tarefa. A arquitetura pi0 da Physical Intelligence e projetos VLA similares utilizam pré-treinamento em vídeo para desenvolver habilidades de manipulação antes do ajuste fino em demonstrações com robôs. A limitação reside no fato de que o vídeo não fornece rótulos de ação: um vídeo mostra uma mão agarrando um objeto, mas não registra a força aplicada nem os ângulos das articulações de um braço robótico equivalente. Modelos de dinâmica inversa podem inferir parcialmente ações a partir de vídeos, mas os pseudo-rótulos resultantes contêm ruído.

Hardware e protocolos de teleoperação

A escolha da interface de teleoperação influencia tanto a qualidade dos dados quanto a capacidade de coleta. Abaixo estão os sistemas mais ativos em programas de pesquisa e comerciais de 2025–2026.

Braços Líder-Seguidor: ALOHA e Mobile ALOHA

O ALOHA (Sistema de Hardware de Baixo Custo e Código Aberto para Teleoperação Bimanual) foi desenvolvido em Stanford e utiliza dois braços líderes de baixo custo que o operador move manualmente, enquanto dois braços seguidores correspondentes no robô replicam o movimento em tempo real. O design bimanual permite a execução de tarefas que exigem as duas mãos, algo que sistemas com um único braço não conseguem. O ALOHA Móvel estende a plataforma para uma base móvel. O ALOHA 2, lançado em 2024, aprimorou a fidelidade do rastreamento das articulações e a ergonomia para o operador. O custo do hardware é inferior a US$ 20,000 para o par líder-seguidor, o que impulsionou sua adoção em dezenas de laboratórios acadêmicos.

Interfaces montadas no pulso: UMI

A Interface Universal de Manipulação (UMI, na sigla em inglês), desenvolvida por Stanford e Columbia, acopla uma câmera olho de peixe e um codificador a uma garra manual. O operador demonstra fisicamente a tarefa no ambiente enquanto a garra registra a posição do efetor final e o estado de preensão. A UMI desvincula a coleta de dados do robô: as demonstrações podem ser coletadas em campo e posteriormente redirecionadas para diferentes versões do robô. Isso a torna particularmente útil para coletar dados de manipulação em situações reais, fora de um ambiente de laboratório.

Realidade Virtual e Dispositivos de Visão Montados na Cabeça

O Apple Vision Pro e o Meta Quest 3 estão sendo explorados como interfaces de teleoperação. O atrativo reside no rastreamento bimanual de seis graus de liberdade (6 DoF) da mão, com controle intuitivo pelo operador. O desafio de engenharia é a reconfiguração: a cinemática da mão humana (cinco dedos, 27 articulações) deve ser mapeada para os comandos do efetor final do robô (tipicamente garras de 1 DoF ou mãos hábeis com 12 a 16 DoF). Sem uma reconfiguração cuidadosa, as demonstrações gravadas contêm a intenção do operador, mas não ações diretamente executáveis ​​pelo robô.

Exoesqueleto e Captura de Corpo Inteiro

Para robôs humanoides que necessitam de dados de movimento de corpo inteiro (incluindo locomoção combinada com manipulação), exoesqueletos capturam a cinemática de todo o corpo com taxas de amostragem acima de 100 Hz. O AgiBot utiliza uma abordagem baseada em exoesqueleto para coletar dados de manipulação humanoide para seu conjunto de dados AgiBot World. A teleoperação do Fourier GR-1 também depende de um dispositivo de captura vestível adaptado à configuração das articulações do robô.

Figura e frotas comerciais de grande escala

A Figure AI opera uma frota proprietária de robôs teleoperados em toda a sua linha de produção da BMW. O modelo de ciclo virtuoso de dados, no qual cada robô implantado coleta novos episódios que retroalimentam o treinamento, também é fundamental para a estratégia de desenvolvimento do Tesla Optimus. Esses sistemas de circuito fechado acumulam dados industriais a uma taxa que os conjuntos de dados acadêmicos abertos não conseguem igualar.

Comparação de plataformas de teleoperação

Plataforma Grau de liberdade capturado Nível de custo Taxa de transferência estimada (episódios/hora) Ajuste de Incorporação Força principal
ALOHA 2 (Stanford / Trossen) 14 (bimanual, 7 cada) Baixo custo (hardware de aproximadamente US$ 15 a US$ 20) 10-30 Manipulação bimanual de mesa Código aberto, comprovado no treinamento de políticas do ACT
UMI (Stanford / Columbia) 6 (efetor final + preensão) Muito baixo (equipamento em torno de US$ 500) 20-60 Braço único, redirecionável Coleta em ambiente natural, sem necessidade de robô.
Equipamento Apple Vision Pro Até 52 (pontos de referência manuais) Médio (aproximadamente US$ 3.5, incluindo HMD e suporte) 10-25 Mãos bimanual/destras Sensação de operação intuitiva; feedback de áudio espacial
Plataforma Meta Quest 3 Até 26 (mãos + controlador) Baixo a Médio (aproximadamente US$ 500 para o HMD + equipamento) 10-25 Base bimanual/móvel Custo acessível; ecossistema de pesquisa ativo
Exoesqueleto AgiBot A2 Parte superior do corpo inteira (~44) Alto (proprietário) 5-15 humanoide de corpo inteiro Coordenação de todo o corpo para treinamento de humanoides
Teleoperação Fourier GR-1 Parte superior do corpo + mãos (~40) Alto (proprietário) 5-15 Humanoide GR-1 Cinemática correspondente, perda de redirecionamento zero
Figura frota proprietária Humanoide completo Muito alto (proprietário) Escala da frota (não divulgada) Figura 02 humanoide Dados de implantação do volante de inércia, dados de fábrica da BMW

Nota: os valores de produtividade são intervalos aproximados extraídos de pesquisas publicadas e relatos de pesquisadores. A habilidade individual do operador e a complexidade da tarefa afetam significativamente os resultados.

Conjuntos de dados públicos: Open X-Embodiment, DROID, BridgeData, RoboSet, RH20T, AgiBot World

O ecossistema de conjuntos de dados abertos expandiu-se rapidamente desde 2022. Abaixo, apresentamos uma visão geral das coleções mais citadas no início de 2026.

Open X-Embodiment (OXE) e RT-X

Desenvolvido pelo Google DeepMind com a contribuição de 33 instituições, o OXE agrega mais de 1 milhão de episódios em mais de 22 tipos de robôs. Os modelos RT-X associados demonstraram que o treinamento com dados agrupados de diferentes corpos supera os modelos de referência de um único corpo em testes de generalização. O OXE é distribuído sob uma combinação de licenças CC-BY e Apache 2.0, dependendo da instituição contribuinte. O acesso é feito através do site do RT-X e do HuggingFace.

DROID

O conjunto de dados DROID (Distributed Robot Interaction Dataset) foi coletado em 13 laboratórios de pesquisa da América do Norte usando uma configuração padronizada de um robô Franka Panda com uma interface de teleoperação no estilo ALOHA. Ele contém aproximadamente 76,000 episódios de diversas tarefas de manipulação em ambientes domésticos e em mesas. O hardware padronizado entre os locais torna o DROID um dos conjuntos de dados de manipulação em larga escala mais confiáveis ​​para clonagem de comportamento e experimentos de RLHF (Robotic Learning Framework - Sistema de Alta Frequência de Realidade Aumentada).

BridgeData V2

O BridgeData V2, desenvolvido pela UC Berkeley e Stanford, contém aproximadamente 60,000 demonstrações em uma ampla variedade de tarefas de manipulação em mesa. Ele utiliza um braço robótico WidowX e se destaca pela diversidade de tarefas (mais de 70 categorias distintas), o que o torna uma base comum para o ajuste fino de modelos VLA. Licenciado sob a licença CC-BY 4.0.

RoboSet

O RoboSet, desenvolvido pelo IIT Delhi e colaboradores, fornece dados de manipulação de utensílios de cozinha em múltiplas tarefas, coletados com um Franka Panda. Inclui observações RGB-D e anotações linguísticas para cada episódio. O RoboSet foi projetado especificamente para dar suporte à avaliação de políticas condicionadas à linguagem, tornando-o útil para testar a generalização do seguimento de instruções.

RH20T

O RH20T (Robot-Human 20 Tasks) é um conjunto de dados de manipulação em larga escala e com grande interação por contato, que inclui propriocepção robótica sincronizada, vídeo RGB, profundidade, tato e fluxos de áudio. A riqueza multimodal torna o RH20T uma referência para pesquisadores que trabalham em políticas que necessitam de sensoriamento por contato, e não apenas observação visual.

Mundo AgiBot

AgiBot World é um conjunto de dados de manipulação humanoide produzido pela AgiBot, uma empresa chinesa de robótica, utilizando seu sistema de coleta de dados baseado em exoesqueletos. Ele se concentra em tarefas de manipulação humanoide de corpo inteiro e representa um dos primeiros conjuntos de dados em larga escala direcionados especificamente a formatos humanoides em escala industrial. O AgiBot World está disponível sob uma licença de pesquisa aberta para uso não comercial.

Conjunto de dados de referência pública para IA incorporada

Conjunto de dados Proprietário/Líder Est. Episódios Exemplos de implementação abrangidos Licença Acesso a
Incorporação X aberta (OXE) Google DeepMind + 33 parceiros ~1,000,000+ Mais de 22 tipos de robôs CC-BY / Apache 2.0 (por colaborador) Site RT-X, HuggingFace
DROID 13 laboratórios norte-americanos ~ 76,000 Franka Panda (padronizada) CC POR 4.0 droid-dataset.github.io
BridgeData V2 UC Berkeley / Stanford ~ 60,000 Braço WidowX CC POR 4.0 rail.eecs.berkeley.edu
RoboSet IIT Delhi e outros. Aproximadamente 100,000+ (segundo relatos) Franka Panda CC POR 4.0 Abraçando o Rosto
RH20T Multi-institucional (CN/UE) Aproximadamente 110,000+ (segundo relatos) Vários tipos de braço CC-BY-NC 4.0 rh20t.github.io
Mundo AgiBot AgiBot (China) ~1,000,000 (meta) Humanoide AgiBot Pesquisa aberta (não comercial) Portal AgiBot

A quantidade de episódios e os termos de licença foram obtidos de artigos sobre conjuntos de dados e repositórios oficiais no início de 2026. Verifique os termos atuais antes de usar.

Pilha Sim-para-Realidade: Isaac Sim, MuJoCo, Cosmos e Randomização de Domínio

A simulação amplia a geração de dados. A questão prática é qual simulador usar e como reduzir a diferença em relação ao hardware físico.

MuJoCo

MuJoCo (Dinâmica Multiarticular com Contato) continua sendo o padrão para pesquisa em manipulação com alto nível de contato. Seu motor de física lida com dinâmica de corpos rígidos, contatos flexíveis e sistemas acionados por tendões com eficiência computacional que permite milhares de episódios de treinamento paralelos em um único cluster de GPUs. O lançamento em código aberto pelo Google DeepMind em 2022 acelerou significativamente sua adoção. A maioria dos benchmarks acadêmicos de clonagem de comportamento e RLHF utiliza ambientes MuJoCo.

NVIDIA Isaac Sim e Isaac Lab

O Isaac Sim é executado na plataforma Omniverse da NVIDIA e oferece física acelerada por GPU com renderização de alta fidelidade. O Isaac Lab (anteriormente OmniIsaacGymEnvs) é a estrutura de aprendizado por reforço construída sobre o Isaac Sim, otimizada para treinamento de políticas massivamente paralelo. Uma vantagem fundamental é a renderização fotorrealista: os visuais com traçado de raios do Isaac Sim reduzem a diferença no domínio visual em comparação com os renderizadores simplificados do MuJoCo, o que é importante para o treinamento de políticas baseadas em visão.

NVIDIA Cosmos

Cosmos é a plataforma de modelos fundamentais da NVIDIA, anunciada no final de 2024. Em vez de simular a física a partir de princípios básicos, o Cosmos gera vídeos fotorrealistas de interações entre robôs e objetos a partir de instruções em texto ou imagem, treinados em grandes conjuntos de dados de vídeo. A promessa é gerar dados de treinamento sintéticos que pareçam suficientemente reais para reduzir a lacuna entre simulação visual e realidade sem a necessidade de randomização manual do domínio. No início de 2026, o Cosmos estava sendo explorado por diversos laboratórios de aprendizado de robôs como uma camada de aumento de dados sobre demonstrações reais.

Splatting Gaussiano e Reconstrução de Cena

A técnica 3D Gaussian Splatting reconstrói cenas fotorrealistas a partir de um pequeno conjunto de imagens RGB em minutos, em vez de horas. Para o treinamento de robôs, isso significa que um laboratório pode escanear um novo ambiente de trabalho, reconstruir uma cena Gaussiana e gerar novos pontos de vista ou configurações de objetos para aumento de dados, sem a necessidade de um simulador de física. Essa abordagem está sendo integrada a diversos fluxos de trabalho de simulação para realidade como uma ferramenta de randomização de baixo custo no domínio visual.

Randomização de Domínio e Identificação de Sistemas

A randomização de domínio randomiza os parâmetros da simulação (texturas dos objetos, condições de iluminação, coeficientes de atrito, rigidez das juntas do robô) durante o treinamento, forçando a política a ser resiliente à variação em vez de ajustada a uma única configuração simulada. A identificação de sistemas adota a abordagem complementar: mede com precisão os parâmetros físicos do robô real (massa, inércia, complacência das juntas) e usa esses valores na simulação para minimizar a discrepância antes da randomização.

O aprendizado curricular aplica a aleatorização progressivamente. Uma política é inicialmente treinada em uma simulação restrita e controlada, e gradualmente exposta a mais variações à medida que o desempenho melhora. Essa abordagem em etapas costuma convergir mais rapidamente do que a aplicação de aleatorização completa desde o início.

Conflitos entre qualidade e quantidade de dados

Mais dados não significam automaticamente melhor qualidade. A composição de um conjunto de dados define o que uma política treinada pode ou não fazer.

A diversidade de tarefas importa mais do que a quantidade de episódios quando o objetivo é uma política generalista. Um conjunto de dados com 100,000 episódios da mesma tarefa de pegar e colocar produz uma política especialista. Um conjunto de dados com 10,000 episódios distribuídos por 50 tipos de tarefas pode produzir uma política que se adapta a novas tarefas após alguns ajustes finos.

A diversidade de configurações é importante para a transferência entre robôs. O valor do OXE reside precisamente na sua capacidade de abranger diferentes tipos de braços, plataformas móveis e mãos hábeis. Uma política pré-treinada no OXE e ajustada em um novo robô geralmente supera uma treinada do zero apenas com os dados do mesmo robô, um resultado consistente em diversos estudos publicados.

A duração dos episódios e a recuperação de falhas são aspectos subestimados. Conjuntos de dados coletados por operadores remotos experientes, que raramente falham, geram políticas que não sabem como se recuperar de perturbações. A injeção deliberada de estados de falha e demonstrações de recuperação melhoram substancialmente a resiliência no mundo real. Alguns laboratórios utilizam perturbações adversárias durante sessões de teleoperação para gerar esses dados.

De acordo com observações da indústria em diversos relatórios de laboratórios de aprendizado de robôs de 2024 a 2025, o valor marginal de episódios adicionais diminui drasticamente quando um conjunto de dados cobre uma tarefa em aproximadamente 500 a 1,000 demonstrações, enquanto o valor marginal de novos tipos de tarefas permanece alto até milhares de tarefas distintas. O EVST leva isso em consideração ao estruturar as células de coleta de dados piloto, priorizando a abrangência da tarefa em detrimento do acúmulo repetitivo de episódios.

Considerações sobre dados de nível industrial

A coleta de dados em fábrica impõe requisitos que as configurações de teleoperação acadêmicas normalmente não atendem.

O registro determinístico é o primeiro requisito. Em uma célula de produção, o registro de tempo da leitura de um encoder de junta deve ser rastreável a uma referência de relógio de parede com precisão de submilissegundos. O controle de barramento de campo EtherCAT de 1 kHz, padrão em robôs industriais (incluindo os da linha da EVST), fornece a base de temporização determinística que torna a sincronização multissensor viável. Um sistema operando a 1 kHz gera 1,000 amostras de estado de junta por segundo por eixo; alinhar esse fluxo com os quadros da câmera a 30–60 fps e os dados de força-torque a 500 Hz requer uma arquitetura de registro de tempo por hardware rigorosa, e não um buffer de software.

Etiquetas de segurança são obrigatórias quando os incidentes incluem quase acidentes, acionamentos de parada de emergência ou violações de limites de força. Essas etiquetas são necessárias tanto para conformidade quanto para políticas de treinamento que compreendam as situações relevantes para a segurança. Controladores industriais que registram as causas de parada de emergência e as ultrapassagens de torque nas juntas em nível de hardware tornam essa rotulagem viável.

A anotação do tempo de ciclo conecta os episódios do robô aos resultados da manufatura. Saber que o episódio 4,712 concluiu a tarefa de montagem em 8.3 segundos com zero alertas de qualidade vincula os dados de aprendizado do robô ao sistema MES e permite a seleção de demonstrações de alta qualidade para treinamento.

Os metadados vinculados ao MES servem de ponte. Quando o sistema de registro de dados de um robô grava arquivos de episódios com IDs de trabalho do MES, tipos de peças e resultados de qualidade anexados, o conjunto de dados resultante pode ser filtrado programaticamente. Episódios associados a retrabalho, sucata ou intervenção do operador podem ser excluídos ou tratados como demonstrações de falhas.

Na prática, ao adaptar uma célula piloto para captura de dados, o gargalo mais comum não é a capacidade de registro de dados do robô, mas sim a arquitetura de rede da célula. Segmentos de Ethernet industrial projetados para comunicação entre CLP e robô em taxas abaixo de kHz nem sempre são dimensionados para a largura de banda necessária para fluxos contínuos de vídeo multicâmera e propriocepção. Uma célula com duas câmeras 1080p a 30 fps, dados de força em seis eixos e estados articulares gera aproximadamente 150 a 300 MB de dados brutos por minuto. Planejar a infraestrutura de armazenamento e rede antes da implantação evita custos adicionais com adaptações posteriores.

Rotulagem de Pipelines e Ferramentas

As gravações brutas dos episódios não estão prontas para treinamento. Elas precisam de anotações de linguagem, máscaras de segmentação de objetos e, em alguns casos, rótulos de recompensa.

Anotação de linguagem

Os modelos VLA condicionados à linguagem precisam de uma descrição em linguagem natural da tarefa de cada episódio. Para conjuntos de dados pequenos, isso é feito manualmente; para conjuntos de dados com mais de 10,000 episódios, a anotação automática usando modelos de visão-linguagem (GPT-4V, Gemini ou modelos de legendagem especializados) torna-se necessária. O controle de qualidade requer a revisão humana de uma amostra para detectar erros sistemáticos no anotador automático.

Segmentação e Rastreamento de Objetos

Políticas que raciocinam sobre o estado do objeto se beneficiam de máscaras de segmentação por episódio que identificam os objetos manipulados. O Segment Anything Model (SAM 2) da Meta torna a segmentação interativa viável em escala de conjunto de dados, reduzindo o tempo de anotação de horas para minutos por episódio quando combinado com uma passagem de propagação de rastreamento.

Modelagem de recompensa para RLHF

Quando os episódios incluem demonstrações de sucesso e fracasso, a rotulagem de recompensas permite o ajuste fino do aprendizado por reforço a partir do feedback humano (RLHF). Anotadores humanos classificam os resultados dos episódios, e essas preferências treinam um modelo de recompensa que molda as atualizações de políticas. Esse fluxo de trabalho é usado no desenvolvimento do pi0 da Physical Intelligence e está sendo explorado para treinamento de tarefas industriais onde rótulos binários de sucesso/fracasso já estão disponíveis no MES.

Privacidade, Propriedade Intelectual e Licenciamento de Conjuntos de Dados

As contribuições para conjuntos de dados abertos levantam questões de propriedade intelectual que os fabricantes de equipamentos originais (OEMs) industriais precisam resolver antes de participar.

As principais categorias de licença em uso são CC-BY (atribuição obrigatória, uso comercial permitido), CC-BY-NC (somente para uso não comercial) e Apache 2.0 (permissiva, incluindo uso comercial e redistribuição de pesos do modelo). Conjuntos de dados proprietários (Tesla Optimus, dados da frota da Figure, Boston Dynamics) não são compartilhados externamente.

Para fabricantes de equipamentos originais (OEMs) de fábricas, a preocupação com a propriedade intelectual reside na exposição do processo: um episódio que mostre uma configuração específica de gabarito, trajetória de ferramenta ou projeto de dispositivo de fixação pode revelar métodos de fabricação proprietários. A mitigação padrão consiste em remover o contexto visual até o nível do efetor final, contribuir apenas com fluxos de trajetória conjunta (sem dados de câmera) ou usar renderizações sintéticas da trajetória de manipulação sobre um fundo genérico. Diversos modelos de consórcio emergentes oferecem estruturas legais para a contribuição de dados industriais anonimizados sob acordos mútuos de confidencialidade combinados com licenças de dados Apache 2.0.

De acordo com uma análise realizada pela Stanford CRFM e colaboradores na pesquisa de aprendizado de robôs de 2024, os silos de dados proprietários representam a maior barreira estrutural para o progresso da IA ​​incorporada além dos padrões atuais. Os fabricantes de equipamentos originais (OEMs) industriais que desenvolverem estruturas internas de governança de dados agora estarão em posição de participar de consórcios de conjuntos de dados à medida que esses programas se formalizarem nos próximos 18 a 24 meses.

Como os fabricantes de equipamentos originais (OEMs) podem contribuir com dados

Os fornecedores de automação industrial (incluindo FANUC, ABB, KUKA e integradores turnkey certificados, como a EVST) estão na interseção entre o hardware de robôs e os ambientes reais de produção. Essa posição os torna contribuintes naturais para o ecossistema de dados de IA incorporada, desde que a estrutura operacional e legal esteja em vigor.

Células piloto com sobreposição de teleoperação

O ponto de entrada mais acessível é uma célula piloto onde o robô de produção é equipado com uma sobreposição de teleoperação: um braço líder-seguidor que um operador utiliza para demonstrar variações da tarefa de produção. Essas demonstrações são coletadas em baixo volume (50 a 500 episódios) e são suficientes para o ajuste fino de um modelo VLA pré-treinado para a tarefa de produção específica. A abordagem da célula piloto não exige alterações na certificação de segurança da célula de produção, pois o sistema de teleoperação funciona como um dispositivo de entrada para o controlador do robô, e não como um caminho de controle paralelo.

Adaptação do registro de dados em robôs de produção

Robôs de produção existentes podem ser modernizados com módulos de registro leves que gravam o estado das juntas, a pose do efetor final e a força da garra em taxas EtherCAT, escrevendo arquivos de episódios com carimbo de data/hora em um servidor de borda durante as execuções de produção. Isso não requer nenhuma alteração no programa de controle do robô. Os ​​dados registrados capturam o comportamento real de manipulação na produção, que é mais representativo da tarefa do que demonstrações em laboratório. Os controladores industriais da EVST, operando em ciclos EtherCAT de 1 kHz e certificados pelas normas CE/SGS/TUV, fornecem a arquitetura de temporização determinística da qual essa abordagem de registro depende. Os dados podem ser limpos, anonimizados e formatados para frameworks de aprendizado de robôs padrão sem a necessidade de um trabalho dispendioso de reintegração.

Participação no Programa de Conjunto de Dados Anonimizados

Os programas emergentes de conjuntos de dados de OEMs (incluindo a trilha de contribuição aberta da AgiBot World e diversas discussões de consórcios na ICRA 2025) aceitam dados de manipulação industrial anonimizados. OEMs com certificação IATF16949, como a EVST, possuem processos de gestão da qualidade que se adaptam bem aos requisitos de integridade de metadados especificados por esses programas: registros de data e hora rastreáveis, protocolos de coleta documentados e registros de calibração de sensores validados.

Cobertura global de campo como vantagem de dados

Um fabricante de equipamentos originais (OEM) com engenheiros de campo em mais de 100 países pode coletar dados de treinamento de IA incorporados em ambientes de fabricação verdadeiramente diversos (diferentes geometrias de peças, condições ambientais, perfis demográficos de operadores e variações de processo). Essa diversidade geográfica é valiosa porque as políticas treinadas com base nela generalizam melhor do que aquelas treinadas com dados de um único laboratório ou instalação. Os robôs com certificação à prova de explosão da EVST e sua linha completa de 3 a 800 kg permitem que a coleta de dados se estenda a ambientes como processamento químico, manuseio de materiais perigosos e fabricação em temperaturas extremas, que a maioria dos conjuntos de dados acadêmicos não abrange.

Principais dados do setor

De acordo com o relatório World Robotics 2024 da Federação Internacional de Robótica (IFR), mais de 3.9 milhões de robôs industriais estavam em operação globalmente em 2023. No entanto, os maiores conjuntos de dados abertos sobre manipulação de robôs contêm menos de 2 milhões de episódios combinados, o que ilustra a discrepância entre a quantidade de hardware implantado e os dados de treinamento disponíveis. O EVST busca solucionar esse problema explorando arquiteturas de registro de dados adaptáveis ​​que convertem frotas de robôs de produção em ativos passivos de coleta de dados.

De acordo com o artigo Open X-Embodiment (Padalkar et al., Google DeepMind et al., 2023), modelos treinados com dados de diferentes encarnações de mais de 22 tipos de robôs apresentaram uma generalização mensuravelmente melhor em tarefas reservadas do que modelos treinados apenas com dados de uma única encarnação. O EVST aborda essa questão estruturando sua estrutura interna de avaliação de dados para ponderar a diversidade de encarnações juntamente com a contagem de episódios ao avaliar a utilidade do conjunto de dados para suas avaliações de ajuste fino em linha de produção.

De acordo com observações da indústria provenientes de diversos laboratórios de aprendizado de robôs em 2024–2025, a discrepância entre a simulação visual e a realidade é responsável pela maioria das falhas de políticas em tarefas de manipulação que envolvem objetos especulares ou transparentes, os quais as técnicas padrão de randomização de domínio não abrangem de forma confiável. O EVST aborda essa questão monitorando ferramentas de simulação fotorrealistas (especificamente os pipelines NVIDIA Cosmos e Gaussian Splatting) como possíveis camadas de aumento de dados para seu roteiro de planejamento de movimento aprimorado por IA.

Guias Relacionados

Perguntas frequentes

Por que a coleta de dados para IA incorporada é mais difícil do que a coleta de dados para modelos de linguagem?

Os modelos de linguagem são treinados com textos que já existem na internet em uma escala enorme. Robôs com IA incorporada precisam coletar dados sensório-motores pareados por ação: ângulos articulares sincronizados, forças de preensão, enquadramentos de câmera e contexto da tarefa, tudo registrado durante a manipulação física. Esses dados não existem na escala da web e são caros de gerar. Cada episódio teleoperado normalmente leva de 1 a 10 minutos de tempo de um operador qualificado para produzir uma única trajetória de treinamento, e a qualidade se degrada se o operador não estiver familiarizado com a dinâmica do robô.

Qual a diferença entre transferência de simulação para realidade e randomização de domínio no treinamento de robôs?

A transferência da simulação para o mundo real é o objetivo geral: treinar uma política em simulação e implantá-la em um robô físico sem perda de desempenho. A randomização de domínio é uma técnica para atingir esse objetivo. Ela varia aleatoriamente os parâmetros da simulação — iluminação, texturas, coeficientes de atrito, massas dos objetos — durante o treinamento, para que a política aprenda a lidar com as variações do mundo real em vez de se ajustar excessivamente a uma única aparência simulada. Outros métodos incluem adaptação de domínio, renderização fotorrealista (como no NVIDIA Cosmos) e identificação de sistemas.

O que é Open X-Embodiment e quantos tipos de robôs ele abrange?

O Open X-Embodiment é um conjunto de dados aberto e em larga escala para aprendizado de robôs, compilado pelo Google DeepMind com a contribuição de 33 instituições de pesquisa. Ele agrega mais de 1 milhão de episódios de robôs em mais de 22 configurações diferentes — manipuladores de um braço, estruturas bimanual, bases móveis e mãos hábeis. Os modelos RT-X treinados no OXE demonstraram que o treinamento entre configurações diferentes melhora a generalização de políticas em comparação com as linhas de base de configuração única.

Como um fabricante de equipamentos originais (OEM) pode contribuir com dados de robôs para o treinamento de IA incorporada sem expor a propriedade intelectual do processo?

A abordagem mais prática é a contribuição de episódios anonimizados: remover os metadados que identificam o processo (números de peças, referências de clientes, metas de tempo de ciclo) e contribuir apenas com fluxos de trajetória conjunta e estado da garra. Diversos programas de conjuntos de dados — incluindo o AgiBot World e iniciativas emergentes de consórcios de OEMs — aceitam dados de manipulação industrial anonimizados sob os termos Apache 2.0 ou CC-BY. A infraestrutura de registro com timestamps EtherCAT determinísticos garante que a qualidade dos episódios atenda aos padrões de entrada do conjunto de dados.

Qual sistema de coleta de dados por teleoperação funciona melhor para tarefas de manipulação industrial?

Para manipulação industrial, as principais opções são o ALOHA 2 (braços bimanual líder-seguidor, baixo custo, código aberto), o UMI (montado no pulso, desacoplado do robô, altamente portátil) e a captura baseada em exoesqueleto para tarefas com cargas maiores ou que envolvam o corpo inteiro. Equipamentos de realidade virtual que utilizam o Apple Vision Pro ou o Meta Quest 3 estão ganhando popularidade para captura bimanual intuitiva, mas exigem fluxos de trabalho de redirecionamento para traduzir a cinemática da mão humana para o espaço articular do robô. A escolha certa depende dos graus de liberdade do robô alvo, da carga útil e se a tarefa exige o uso das duas mãos.

Última atualização: abril 23, 2026

veja nossa Soluções de IA Incorporadas →

Incrível! Compartilhar com:

Logotipo EVST
Visão geral de privacidade

Este site usa cookies para que possamos fornecer a melhor experiência possível para o usuário. As informações dos cookies são armazenadas no seu navegador e executam funções como reconhecê-lo quando você retorna ao nosso site e ajudar a nossa equipe a entender quais seções do site você considera mais interessantes e úteis.