Google DeepMind presenta Gemini Robotics 2

Desde el lanzamiento de la versión 1.5, ha pasado casi un año. Este es un período bastante largo según los estándares actuales. Veamos qué ha logrado Google durante este tiempo.

El aspecto más importante es el modelo VLA, que ahora controla todo el cuerpo humanoide desde los dedos de los pies hasta las yemas de los dedos, en lugar de solo la parte superior del cuerpo. Las manos tienen habilidades motoras finas con 22 grados de libertad. No se puede decir que el robot sea super ágil (la tasa de éxito en tareas de múltiples dedos está alrededor del 30-40%), pero este es un progreso.

Encima del modelo VLA, también hay un orquestador Gemini Robotics ER 2. Este es un modelo de generación separado, y aquí es simplemente un VLM. Es decir, si el VLA produce comandos motores listos, entonces el ER opera a un nivel más alto, realizando razonamiento, dividiendo tareas en subtareas, reconociendo objetos y sus coordenadas, y otro trabajo "inteligente".

Este modelo también ha sido mejorado significativamente y tiene una característica destacada de coordinar el trabajo de varios tipos de robots diferentes para lograr una sola tarea. Además, el ER ahora puede intervenir en las acciones del VLA en cualquier etapa de la ejecución de la tarea, lo cual es crítico para la autocorrección.

Otro modelo introducido en esta generación es Gemini Robotics On-Device 2 – un VLA ligero para inferencia local.

La principal distinción de Gemini Robotics es su versatilidad. Los modelos se entrenan con datos de multi-embodiment heterogéneos, lo que les permite trabajar en varios tipos de robots sin ajuste. El GR2 On-Device lleva esta propiedad a un nivel práctico: puedes tomar este modelo y, en solo unas pocas horas y alrededor de 200 demostraciones, hacer que funcione bien en cualquier nuevo cuerpo (con sensores personalizados, DoF, cinemática, etc.).

Además, en un giro divertido, Google ha creado el primer benchmark para evaluar la seguridad de los robots y lo ha llamado ASIMOV-Agentic. Naturalmente, afirmaron que su modelo es "el más seguro del mundo" según esta prueba.