Memories.ai đã phát triển thành một công ty hạ tầng dữ liệu video cho AI vật lý, robot, mô hình thế giới và robot hình người. Sản phẩm cốt lõi là một hồ dữ liệu: công việc thực được ghi tại hiện trường thực bằng thiết bị riêng của công ty, gồm cặp stereo gắn trên đầu và góc nhìn cổ tay được đồng bộ, cùng dữ liệu IMU thô và hiệu chuẩn camera. Mọi clip đều qua kiểm soát chất lượng và được lập chỉ mục theo từng bàn tay, từng hành động và từng nhiệm vụ trước khi vào hồ.
Chính lớp lập chỉ mục khiến hồ dữ liệu có thể tìm kiếm theo hành vi. Các mô hình nghiên cứu như Memories-H0 cho tư thế bàn tay và EgoAction cho phân đoạn hành động chia clip thành những đoạn có mốc thời gian, để bạn lấy ra đúng những khoảnh khắc cần thiết. Một truy vấn có thể chỉ định địa điểm, bối cảnh cụ thể, trình độ kỹ năng và ràng buộc như cả hai tay trên dụng cụ, đồng thời loại trừ các trạng thái không liên quan như tay rảnh hoặc đang đi. Những khoảnh khắc trả về sau đó có thể được gán nhãn theo hệ phân loại của riêng bạn, với chú thích dày đặc theo từng tay và từng khung hình.
Việc bàn giao được cấu trúc hóa thay vì để ở dạng thô. Mỗi đoạn được xuất dưới dạng JSON gồm tay, nhãn, thời điểm bắt đầu và kết thúc cùng chú thích, đúng dạng mà pipeline học của robot tiêu thụ. Công ty còn vận hành hoạt động thu thập riêng qua mạng lưới hiện trường và thiết bị, cung cấp camera 4K góc nhìn thứ nhất dạng đeo tên LUCI Pin, và có ứng dụng cộng tác viên để mọi người ghi lại nhiệm vụ và được trả tiền. Các nhóm mang tư liệu của riêng mình có thể dùng dịch vụ lập chỉ mục và gán nhãn mà không cần đóng góp vào hồ dữ liệu công khai.