Ex-Meta scientists want to bring visual AI to the factory floor

개요

Perceptron은 전 Meta 연구 과학자들이 설립한 스타트업으로, 산업 현장에서 머신이 물리적 환경과 더 능숙하게 상호작용하도록 돕는 최첨단 비전 모델을 개발합니다.

주요 내용

* Perceptron은 최근 산업 환경에서 "인지, 추론, 행동" 능력을 머신에 부여하는 것을 목표로 하는 Isaac 0.5 모델을 출시했습니다.
* Isaac 0.5는 물류 창고나 공장 바닥과 같은 복잡한 환경에서 비전 유도 로봇의 탐색을 지원하며, 로봇이 촬영한 비디오에서 시각적 정보를 추출하는 데에도 도움을 줍니다.
* 이 모델은 공개 가중치(open-weight) 모델로 릴리스되어 파라미터와 학습 자료를 누구나 검사할 수 있습니다.
* Perceptron의 공동 설립자들은 Isaac 0.5가 특정 반복 작업에 국한되지 않고 다양한 환경과 상황에 유연하게 적응할 수 있는 범용 모델임을 강조하며, 기존의 특정 기능에만 집중하거나 별도의 클라우드 GPU가 필요한 모델들과 차별화된다고 설명합니다.
* Isaac 0.5는 100만 시간의 일반 비디오 데이터와 함께, 개인의 시점에서 물리적 작업을 수행하는 모습을 담은 이고 비디오(ego video), 반복적인 인간의 행동을 녹화한 UMI 비디오 등을 학습하여 운영 기술을 습득합니다.
* Perceptron은 내부적으로 페타바이트 규모의 데이터셋을 구축했으며, 이미지, 텍스트, 비디오, 로봇 궤적 등 다양한 양식을 포함하고 있습니다.
* 이 소프트웨어는 제조, 물류 및 창고, 보안, 모빌리티, 미디어 및 엔터테인먼트 등 다양한 산업 분야에 통합될 잠재력을 가지고 있습니다.

시사점

Perceptron의 Isaac 0.5 모델은 로봇의 물리적 환경에서의 유연성과 지능적인 행동 능력을 크게 향상시켜, 산업 자동화의 새로운 시대를 열고 다양한 산업 현장에 적용될 것으로 기대됩니다.