A Memories.ai se tornou uma empresa de infraestrutura de dados de vídeo para IA física, robótica, modelos de mundo e humanoides. O produto central é um data lake: trabalho real gravado em locais reais com os rigs próprios da empresa, incluindo um par estéreo montado na cabeça e uma visão de pulso sincronizada, além de dados brutos de IMU e calibração de câmera. Todo clipe passa por controle de qualidade e é indexado por mão, por ação e por tarefa antes de entrar no lake.
É a indexação que torna o lake pesquisável por comportamento. Modelos de pesquisa como o Memories-H0 para pose de mão e o EgoAction para segmentação de ações dividem os clipes em segmentos com marca temporal, para que você recupere exatamente os momentos necessários. Uma consulta pode especificar local, cenas específicas, nível de habilidade e uma restrição como ambas as mãos na ferramenta, excluindo estados irrelevantes como mão ociosa ou caminhada. Os momentos retornados podem então ser anotados conforme sua própria taxonomia, com legendas densas por mão e por quadro.
A entrega é estruturada, não bruta. Cada segmento sai em JSON com mão, rótulo, início, fim e legenda, exatamente o formato que os pipelines de aprendizado robótico consomem. A empresa também opera sua própria captura por meio de uma rede de locais e rigs, oferece uma câmera vestível 4K em primeira pessoa chamada LUCI Pin e tem um app de contribuidores no qual as pessoas gravam tarefas e recebem. Equipes que trazem seu próprio material podem usar os serviços de indexação e rotulagem sem contribuir com o data lake público.