Runway anunció Praxis-1 el 30 de septiembre, su primer modelo de acción con pesos abiertos, que convierte el preentrenamiento con vídeo que hay detrás de sus modelos generales del mundo en control para robots físicos.
La afirmación de fondo es la interesante. Runway dice que el rendimiento de la política mejora a medida que se escala el vídeo en tercera persona, y que el vídeo de internet funciona igual que el vídeo de robots teleoperados durante el preentrenamiento. Si eso se sostiene, el cuello de botella que ha definido el aprendizaje robótico — que los datos reales de demostración son escasos y caros de recoger en el volumen que necesita una política generalista — es en parte un problema de origen de datos y no de física.
Una política, varios cuerpos
Praxis-1 pretende funcionar como una única política generalista en distintos cuerpos sin reentrenamiento. Las pruebas iniciales cubren manipulación bimanual con Noble Machines, un brazo RO1 de seis grados de libertad de Standard Bots y bases móviles de Ultra.
Runway dice que el preentrenamiento con vídeo permite al modelo manejar los casos que derrotan a las políticas entrenadas solo con demostraciones: objetos rígidos repetidos, escenas desordenadas, materiales transparentes y objetos deformables. Los objetos transparentes y deformables son justamente donde suelen fallar las políticas entrenadas con demostraciones, porque las señales visuales son ambiguas y la dinámica no lo es.
El dato que conviene retener
Runway informa de una correlación de 0,95 entre el rendimiento de una política robótica simulada dentro de su modelo del mundo y el de la misma política en el mundo real, y dice que eso supera a las técnicas de reconstrucción 3D. Es una cifra aportada por la empresa en su propia evaluación, no un resultado independiente.
Si sobrevive al escrutinio externo importa más que el propio modelo, porque significaría que una política puede cribarse en simulación antes de que nadie construya el equipo.
Por qué pesos abiertos
Runway presenta la licencia como una posición estratégica: que el liderazgo estadounidense en IA física exige una interoperabilidad que los modelos cerrados no dan a los fabricantes de hardware. Quienes construyen robots integran a un nivel más bajo que quienes hacen aplicaciones, y una API cerrada encaja mal en un bucle de control que corre dentro de una máquina.
Los pesos todavía no están publicados. Runway dice que la publicación llegará en los próximos meses y que hasta entonces mantiene acceso previo con socios seleccionados.
Qué vigilar
Si algún grupo externo reproduce el resultado de que el vídeo de internet equivale al vídeo de robots, y si los pesos publicados vienen con el modelo del mundo usado para obtener la correlación de 0,95. Sin el simulador, la cifra principal no es algo que nadie más pueda comprobar.
