O que são RT-1/RT-2 do Google e modelos foundation para robôs?

RT-1 e RT-2 são plataformas robóticas do Google, baseadas em modelos fundamentais (modelos de base) que integram métodos modernos de aprendizagem automática e inteligência artificial para controlar robôs.

Os modelos fundamentais para robôs são grandes modelos universais treinados com dados diversos, que permitem aos robôs compreender comandos, perceber o ambiente e realizar tarefas complexas sem necessidade de criar modelos especializados para cada tarefa.

RT-1/RT-2 usam esses modelos para:

• Processar informações visuais e compreender a cena.
• Interpretar linguagem natural e comandos.
• Planejar e executar ações no mundo real.

Assim, RT-1/RT-2 representam um passo em direção a robôs mais universais e adaptativos, capazes de aprender e trabalhar em diversas condições, aproveitando as vantagens dos modelos fundamentais, de forma semelhante ao que os grandes modelos de linguagem transformaram o processamento de linguagem natural.