- 입력 2026.11.11 09:18
메모리즈.ai, 긱워커에 촬영 과제 지급
엔비디아 기술로 영상 검색·라벨링
로봇 훈련용 1인칭 영상 데이터를 수집하는 플랫폼이 출시됐다.
10일(현지시간) 미국 경제지 포춘에 따르면 샌프란시스코 소재 스타트업 메모리즈.ai가 긱워크 플랫폼 '메모리즈 업로드'를 선보였다. 참여자들은 보상을 받고 로봇 훈련에 필요한 영상 촬영 과제를 수행한다.
메모리즈.ai는 전 메타 연구원인 숀 센과 벤 저우가 공동 창업했다. 지난해 7월 수사 벤처스 주도로 800만달러(약 107억원) 규모의 시드 투자를 유치했으며 삼성넥스트도 투자자로 참여했다.
이 회사는 무게 45g 미만의 웨어러블 카메라 '루시 핀'을 개발했다. 머리, 가슴, 손목에 자석으로 부착해 사용자의 시점에서 영상을 촬영한다. 두 대를 연결하면 입체 촬영이 가능해 깊이 추정에 도움이 된다.
메모리즈.ai는 베타 서비스 첫 달에 100만 시간 이상의 1인칭 영상을 확보했으며 2027년 3월까지 1000만 시간 이상을 모으는 것이 목표라고 밝혔다.
휴머노이드 로봇 스타트업 피규어와 AI 소프트웨어 '두뇌'를 개발하는 피지컬 인텔리전스도 1인칭 영상 활용을 모색 중이다. 피규어는 자사 플랫폼 '인덱스'를 통해 일상 작업 영상을 유료로 수집하고 있다. 피지컬 인텔리전스는 인간 영상과 원격 조작 데이터를 결합하는 실험을 진행했다.
메모리즈.ai는 엔비디아의 '메트로폴리스 비디오 서치 앤 서머리제이션' 도구로 영상 스트리밍과 처리를 최적화한다. 영상 캡션 모델은 엔비디아의 물리 세계 이해 모델 '코스모스'를 미세 조정해 구축했다. 고객사 맞춤형 작업에는 코스모스를 추가 훈련하는 포스트 트레이닝 방식을 쓴다.
이렇게 생성된 설명은 특정 순간과 연결돼 개발자가 원하는 동작을 검색하고 관련 예시를 빠르게 찾을 수 있다. 엔비디아 코스모스 제품·엔지니어링 담당 릭 좡은 포춘에 "메모리즈.ai의 차별점은 일상적 인간 경험을 검색 가능하고 로봇 학습에 유용하게 만드는 데 초점을 맞춘 것"이라고 말했다.
메모리즈.ai는 상위 5개 프런티어 AI 연구소 중 3곳을 고객사로 두고 있다고 밝혔다. 비밀유지계약을 이유로 구체적인 이름은 공개하지 않았다. 숀 센 CEO는 고객들이 더 다양한 작업 환경과 과제, 카메라 각도를 담은 영상을 원한다고 전했다.
엔비디아의 비전 에이전트 물리 AI 생태계 책임자 애덤 스크라바는 중공업 분야의 다양한 특수 작업과 높은 정확도 요구가 가장 어려운 과제라고 지적했다. 그는 "비전 AI와 비디오 분석을 위한 훈련 데이터셋은 모든 물리 AI 솔루션에 매우 중요하다"고 강조했다.
유료 촬영 방식은 개인정보 보호 문제를 야기할 수 있다. 메모리즈.ai는 촬영자와 정기적으로 등장하는 동료가 사전에 동의서를 작성해야 한다고 밝혔다. 영상이 촬영 국가를 떠나거나 고객에게 전달되기 전에 자동화 도구로 다른 사람의 얼굴을 가리고 배지, 화면, 번호판 등 식별 정보를 마스킹한다. 각 배치에서 일부 프레임을 수동 검토해 민감 정보가 제대로 가려졌는지 확인한다.