Robôs aprendem com 1 vídeo? A IA da NVIDIA surpreende!

Aqui está o conteúdo reescrito e traduzido para Português do Brasil, na voz do Lucas Tech:

Esqueça a Reprogramação! Robôs da Skild AI Aprendem TUDO com UM ÚNICO Vídeo (e a NVIDIA tá junto!)

Olá, pessoal! Aqui é o Lucas Tech e hoje a gente vai falar de uma notícia que, olha, me deixou de queixo caído e com aquele brilho nos olhos de quem vê o futuro chegando rapidinho! Sabe aqueles robôs industriais que parecem ter sido feitos para uma única tarefa, e se muda algo na linha de produção, é uma dor de cabeça sem fim de reprogramação? Pois é, essa era a realidade… até agora! A Skild AI, em uma parceria superpoderosa com a NVIDIA, acabou de lançar um modelo que pode mudar tudo que a gente sabe sobre robótica. Preparados para ver robôs aprendendo tarefas complexas só de assistir um vídeo? Vem comigo que eu explico!

Diga Adeus à Reprogramação: Como o S1 Manda Bem!

Imaginem a cena: chão de fábrica, armazéns, linhas de produção… tudo está em constante mudança. Novas tarefas, novos produtos, novos layouts. E os robôs antigos? Precisavam de uma reprogramação gigante, que custava tempo e dinheiro. Mas a Skild AI chegou com o S1, um modelo de fundação para robôs que é um verdadeiro game-changer!

O S1 foi projetado para aprender tarefas complexas e nunca vistas antes, tipo aquelas que duram um bom tempo, a partir de uma única demonstração em vídeo. Isso mesmo, um vídeo! Ele usa essa demonstração como entrada para entender e executar a tarefa, sem precisar atualizar seus “pesos” (calma, isso é um termo técnico para o que a IA aprendeu) ou passar por um treinamento específico. Essa técnica é chamada de aprendizado em contexto (in-context learning), e é o que torna tudo isso mágico!

E o mais legal é que a Skild construiu e fez todas as pesquisas do S1 usando a infraestrutura de IA da NVIDIA, parte de uma colaboração bem maior, que inclui geração de dados sintéticos, treinamento de modelos, simulação e implantação de IA física no mundo real. Eles estão juntos nessa jornada para levar a inteligência robótica adaptável do laboratório direto para as fábricas e outros ambientes de trabalho dinâmicos. Como disse o Deepak Pathak, cofundador e CEO da Skild AI: “Aprender pela experiência, e não pela pré-programação, é o passo gigante que aconteceu na robótica”. E o sucesso já é visível: a Skild atingiu uma receita anual de 100 milhões de dólares em apenas 10 meses após seu primeiro uso comercial! Isso é velocidade!

Assista e Aprenda: A Magia do S1 em Ação!

A maioria dos robôs industriais, como eu mencionei, são feitos para trabalhos fixos. Cada novo produto ou processo exige novos dados, retreinamento e validação. É um ciclo que consome recursos.

O S1, não! Ele adota uma abordagem totalmente diferente. Um operador grava um vídeo da tarefa desejada e mostra para o modelo como um “prompt”. Ele interpreta a intenção demonstrada, os objetos e a sequência, e então transforma tudo isso em ações para o robô. Sem retreinamento! E muitas vezes para uma tarefa que nem estava no seu conjunto de dados inicial!

E as tarefas? São coisas que duram até 10 minutos, tipo plantar uma muda, fazer panquecas, preparar um café coado ou até montar kits! Imaginem a complexidade disso: dezenas de passos de manipulação, exigindo que o robô combine habilidades que ele nunca tinha performado antes. Em um teste de plantio de mudas, o time da Skild AI levou apenas 11 minutos para ir da gravação do vídeo à execução autônoma pelo robô! ONZE MINUTOS! Ele consegue até se ajustar quando objetos se movem, se recuperar de erros e combinar habilidades de formas não programadas explicitamente.

Nos testes da Skild, em tarefas novas e multi-etapas, o robô S1 teve sucesso em cerca de 66% das vezes a cada passo, enquanto um sistema de IA similar conseguiu apenas 9%. Isso é uma melhoria de mais de sete vezes! E o mais impressionante: mostrar um vídeo curto para o robô pode ser tão útil quanto dar a ele cerca de 380 exemplos de treinamento práticos. Para uma pessoa coletar isso manualmente, levaria de 50 a 100 horas. O S1 é uma máquina de eficiência!

Do Laboratório à Fábrica: O S1 Já Está Botando Pra Quebrar!

Essa tecnologia não é só pesquisa de laboratório, gente! O S1 está quebrando o ciclo de retreinar robôs constantemente, permitindo que os operadores mostrem novas tarefas diretamente, sem a necessidade de novos conjuntos de dados ou rodadas de treinamento a cada mudança. E, onde os acordos com os clientes permitem, a experiência desses usos comerciais pode até alimentar o modelo geral e acelerar futuras implantações.

Essa inovação já está em ação no chão de fábrica! A Skild, NVIDIA e Foxconn estão usando o “Skild Brain” em manipuladores de dois braços para a montagem de alta precisão dos sistemas NVIDIA Blackwell. Já pensaram? Um robô instalando uma barra coletora, prendendo 16 parafusos e se adaptando a imprevistos em uma tarefa com múltiplos passos! Isso exige movimentos super precisos, controle que “sente” o contato, rastreamento de sequência e capacidade de se recuperar quando a cena real é diferente do planejado. É um nível de automação que era impensável há pouco tempo!

O “Cérebro” por Trás da Magia: A Parceria Imbatível com a NVIDIA

A NVIDIA é a força por trás de muito do que vemos aqui. Sua computação acelerada dá à Skild a escala para treinar esse “cérebro” robótico compartilhado, usando simulação, vídeos humanos, teleoperação e até dados de implantação real. Tecnologias como os modelos de fundação de mundo aberto NVIDIA Cosmos ajudam a diversificar os dados de treinamento e transformar vídeos em descrições estruturadas, enquanto o Cosmos Curator organiza tudo isso em grande escala.

A Skild também usa as estruturas de simulação abertas da NVIDIA para treinar e validar seu cérebro robótico antes da implantação no mundo real. As bibliotecas NVIDIA Omniverse e o framework NVIDIA Isaac Sim fornecem ambientes virtuais baseados em física para gerar dados, testar casos extremos e validar comportamentos. É como ter um playground virtual infinito para os robôs aprenderem!

E não para por aí! O aprendizado por reforço no Isaac Lab (um framework modular de aprendizado de robôs, com o motor de física Newton) ajuda os engenheiros da Skild a modelar com precisão tudo, desde forças e contatos até colisões e pressão, diminuindo a diferença entre a simulação e a realidade. Skild e NVIDIA estão até desenvolvendo solvers de simulação acelerados por GPU, que modelam como os robôs tocam, agarram e manipulam objetos, e que em breve estarão disponíveis para todos os desenvolvedores como parte do Newton. Demais, né?

Quando esses modelos vão para a produção, ferramentas como o NVIDIA Nsight ajudam os engenheiros a encontrar gargalos de desempenho durante o treinamento, e o kit de desenvolvimento de software NVIDIA TensorRT otimiza a inferência para que os robôs respondam rapidamente no mundo físico. Tudo isso interligado, transformando as etapas de dados, simulação, treinamento e implantação em um ecossistema coeso. É tecnologia de ponta em cada passo!

Minha Visão

Gente, essa notícia da Skild AI com a NVIDIA é muito mais do que apenas “mais um robô”. Ela representa um salto quântico na forma como pensamos a automação industrial. Por anos, o grande desafio era a rigidez dos robôs, a necessidade de especialistas para cada mínima mudança. Agora, com o S1 aprendendo a partir de um simples vídeo, estamos democratizando a programação de robôs. Isso significa que fábricas de todos os tamanhos, desde grandes indústrias até pequenos negócios, poderão adaptar seus robôs de forma rápida e intuitiva. Imagina o impacto na produtividade, na agilidade das linhas de produção e até na criação de novos modelos de negócios!

Essa tecnologia não só torna os robôs mais versáteis, mas também libera os engenheiros e programadores para tarefas mais complexas e criativas, em vez de ficarem presos à reprogramação repetitiva. É a IA realmente se tornando uma ferramenta de empoderamento, elevando o potencial humano e da máquina a níveis que a gente só sonhava antes. O futuro da robótica adaptável e acessível já começou, e eu estou super animado para ver onde isso vai dar!

E aí, o que vocês acharam dessa novidade? Vocês acham que robôs que aprendem por vídeo vão revolucionar totalmente a indústria ou ainda temos desafios grandes pela frente? Me contem nos comentários!

Referência: Matéria Original