Prophesee의 이벤트 기반 비전 센서가 환자의 시력 회복부터 야간 우주 잔해물 탐지까지 다양한 분야를 재편하고 있습니다. 전 세계 2,200명의 개발자 커뮤니티와 함께 이 기술은 빠르고 저전력 비전이 실제 애플리케이션에서 실질적 결과를 제공함을 입증하고 있습니다.
시각 장애 환자의 시력 회복
Gensight Biologics는 Prophesee와 협력해 시각 정보를 호박색 빛(590nm)으로 변환하는 고글을 개발했습니다. 이 빛은 환자의 망막에 전달된 광감도 단백질을 활성화해 눈이 신호를 해석하도록 합니다. 7개월 사용 후 환자는 횡단보도 식별, 테이블 위 노트북 92% 탐지, 필통 36% 탐지가 가능해졌으며, 물체를 잡고 세는 것도 가능해졌습니다. 이 연구는 바젤 대학-UPMC와 협력해 Nature Medicine에 게재되었으며, 이미지 재인코딩 오버헤드 없이 빠르고 연속적인 시각 데이터 전달 능력을 입증했습니다.
Gensight Biologics 고글이 이미지를 호박색 빛으로 변환해 변형된 망막 세포가 세상을 인식하게 합니다. (출처: Gensight Biologics / Prophesee)
세포 치료제 제조 가속화
환자 맞춤형 세포 치료제 제조는 시간과 비용이 많이 소요됩니다. 평균 투여 비용이 47만 5천 달러에 달합니다. Cambridge Consultants는 Prophesee 센서를 사용해 세포 배양을 실시간 모니터링하며, 기존 7-14일 배양 대비 18ms 만에 세균 오염을 탐지합니다. PureSentry 시스템은 저조도와 고유량 조건에서도 대장균 등의 병원체를 식별, 추적, 분류하며, 비파괴 자동 무균 시험으로 고숙련 기술자 의존도를 낮춥니다.
글래스고, 헤리엇와트, 스트래스클라이드 대학 컨소시엄은 Prophesee 센서로 1µm 입자가 1.54m/s로 이동하는 것을 20,000fps의 시간 해상도로 포착했습니다. 표준 형광 현미경과 결합한 이 설정은 더 빠르고 저렴한 미세유체 분석을 약속합니다.
로봇 촉각 비전
싱가포르 국립대학 연구진은 Prophesee의 이벤트 기반 비전과 새로운 촉각 어레이인 NeuTouch를 결합해 로봇 팔에 촉각을 부여했습니다. 사람 손가락 크기의 39픽셀 '택텔' 어레이는 Intel Loihi 뉴로모픽 프로세서가 시각 데이터와 함께 해석하는 스파이크 신호를 생성합니다. 로봇은 다양한 액체 함량의 용기를 들어 올리며 변형을 관찰해 종류와 무게를 판별했습니다. 미끄러짐 테스트에서 결합 센서 스위트는 사람 촉각보다 1,000배 빠르게 미끄러짐을 감지해 회전 미끄러짐을 0.08초 만에 식별했습니다.
NeuTouch: Prophesee 비전과 통합된 손가락 크기 촉각 센서 어레이로 로봇 인지 구현. (출처: NUS / Prophesee)
우주 잔해물 추적
서시드니 대학의 Astrosite 이동 관측소는 Prophesee 센서와 망원경을 결합해 궤도 잔해물을 모니터링합니다. 지구 궤도에 4,850개 위성이 있고 그중 약 40%만 활성 상태이므로 수동 잔해물 추적이 필수적입니다. 기존 카메라는 과도한 데이터를 생성하고 주간 관측에 어려움이 있습니다. Astrosite의 이벤트 기반 접근은 데이터를 10-1,000배 줄여 주야간 연속적인 마이크로초 해상도 모니터링을 저전력으로 가능케 합니다.
배치 준비 중인 Astrosite 관측소들. (출처: 서시드니 대학)
이러한 다양한 프로젝트는 이벤트 기반 비전이 헬스케어부터 우주 탐사까지 속도, 효율성, 강건성을 제공함을 보여줍니다.
관련 주제:
스파이킹 신경망용 뉴로모픽 AI 칩 데뷔
센서 융합으로 로봇 그립 구현
스택드 센서 아키텍처로 고급 비전 역량 확보
머신러닝 알고리즘이 ReRAM 가변성 활용
비전 AI의 미스터리를 풀기 위한 툴 체인 진화
더 많은 Embedded 콘텐츠를 원하시면 Embedded 주간 이메일 뉴스레터를 구독하세요.