Memories.ai se ha convertido en una empresa de infraestructura de datos de vídeo para IA física, robótica, modelos del mundo y humanoides. El producto central es un lago de datos: trabajo real grabado en sitios reales con los equipos propios de la compañía, incluido un par estéreo montado en la cabeza y una vista de muñeca sincronizada, más datos IMU brutos y calibración de cámara. Cada clip pasa control de calidad y se indexa por mano, por acción y por tarea antes de entrar en el lago.
El indexado es lo que hace que el lago se pueda buscar por comportamiento. Modelos de investigación como Memories-H0 para postura de manos y EgoAction para segmentación de acciones dividen los clips en segmentos con marca temporal, para que recuperes exactamente los momentos que necesitas. Una consulta puede especificar lugar, escenas concretas, nivel de habilidad y una restricción como ambas manos sobre la herramienta, excluyendo estados irrelevantes como mano inactiva o caminar. Los momentos devueltos se pueden anotar después según tu propia taxonomía, con subtítulos densos escritos por mano y por fotograma.
La entrega es estructurada, no en bruto. Cada segmento se envía como JSON con mano, etiqueta, inicio, fin y subtítulo, justo la forma que consumen los flujos de aprendizaje robótico. La empresa también opera su propia captura mediante una red de sitios y equipos, ofrece una cámara ponible 4K en primera persona llamada LUCI Pin, y tiene una app de colaboradores donde la gente graba tareas y cobra. Los equipos que llegan con su propio material pueden usar los servicios de indexado y anotación sin contribuir al lago público.