Renesas와 Syntiant, 음성 제어 비전 AI 솔루션 공동 제공

Renesas Electronics Corporation과 에지 장치의 저전력 지능형 음성 및 센서 처리 제공업체인 Syntiant Corp.는 음성 제어 다중 모드 인공 지능(AI) 솔루션을 공동으로 개발하여 임베디드 비전에서 이미지 처리를 위한 저전력 비접촉식 작동을 가능하게 합니다. AI 기반 사물 인터넷(IoT) 및 에지 시스템.

새로운 솔루션은 Renesas RZ/V 시리즈 비전 AI 마이크로프로세서 유닛(MPU)과 저전력 다중 모드, Syntiant NDP120 신경 의사 결정 프로세서를 결합하여 셀프 계산대, 보안 카메라, 비디오와 같은 애플리케이션에서 고급 음성 및 이미지 처리 기능을 제공합니다. 회의 시스템 및 로봇 청소 장치와 같은 스마트 가전 제품입니다.

공동 솔루션은 대기 모드에서 빠른 음성 트리거 활성화와 함께 상시 작동 기능을 제공하여 보안 카메라 및 기타 시스템에서 중요한 기능인 물체 인식, 얼굴 인식 및 기타 비전 기반 작업을 수행합니다. 예를 들어 사용자 정의 음성 신호가 활성화 및 시스템 작동을 유도하는 반면 비전 AI 인식은 운영자 행동을 추적하고 작동을 제어하거나 의심스러운 작업이 감지되면 경고를 발행합니다.

다중 모드 아키텍처를 사용하면 비전 AI 기반 시스템을 위한 비접촉 사용자 경험을 더 쉽게 생성할 수 있습니다. 음성 인식을 위한 전력 효율적인 전용 칩을 사용하면 비전 AI 기능과 독립적으로 소프트웨어를 개발할 수 있어 시스템 개발 속도를 높이는 동시에 대기 전력 소비를 줄입니다.

Renesas RZ/V 시리즈 MPU는 Renesas의 DRP-AI(동적 재구성 가능한 프로세서-AI) 가속기를 통합하고 Renesas가 업계 최고라고 주장하는 전력 효율성과 고정밀 AI 추론을 결합합니다. 이러한 우수한 전력 성능은 방열판 또는 냉각 팬과 같은 열 분산 측정의 필요성을 제거하여 BOM(자재 명세서) 비용을 줄이고 비전 AI를 광범위한 임베디드 애플리케이션에 통합할 수 있게 합니다. DRP-AI는 AI-MAC와 DRP(Dynamicly reconfigurable processor)로 구성되며 내부 스위치로 데이터 흐름을 최적화해 컨볼루션 레이어와 올결합 레이어에서 연산을 효율적으로 처리할 수 있다. DRP는 하드웨어 구성을 동적으로 변경하여 이미지 전처리 및 AI 모델 풀링 레이어와 같은 복잡한 처리를 유연하고 빠르게 처리할 수 있습니다. 제공되는 DRP-AI 변환기는 AI 모델의 각 프로세스를 AI-MAC 및 DRP에 자동으로 할당하여 사용자가 하드웨어를 인지하지 않고도 DRP-AI를 쉽게 사용할 수 있도록 합니다. DRP-AI 변환기가 출력한 여러 실행 파일을 외부 메모리에 저장할 수 있습니다. 이를 통해 여러 AI 모델을 하나의 시스템으로 동적으로 전환할 수 있습니다. 또한 DRP-AI 변환기는 하드웨어 변경 없이 새로 개발된 AI 모델을 지원하도록 지속적으로 업데이트될 수 있습니다.

Syntiant NDP120 칩은 화자 인식, 키워드 감지, 다중 깨우기 단어 및 로컬 명령 인식을 포함하여 많은 고정밀 핸즈프리 음성 기능을 구현하는 데 사용할 수 있는 정교한 AI 기능을 통합합니다. Syntiant Core 2 신경망 추론 엔진과 함께 패키지된 NDP120은 전력 소비를 1mW 배터리 전력으로 최소화하면서 동시에 여러 애플리케이션을 실행할 수도 있습니다.

Nitta 히로토는 Renesas에 대해 "이미지와 음성 모두의 여러 입력 정보 스트림을 사용하는 다중 모드 시스템에 대한 수요가 사용 편의성과 안전성을 모두 개선하는 방법으로 앞으로 증가할 것으로 예상합니다."라고 말했습니다. IoT 및 인프라 사업부의 SoC 사업부 수석 부사장 겸 책임자인 Nitta는 “저전력 이미지 AI 기술의 선두주자인 Renesas와 음성 AI 기술의 선두주자인 Syntiant의 협력을 통해 우리는 임베디드 시스템에서 저전력, 초소형 스마트 음성 AI 기술의 채택을 가속화하고 전 세계 고객에게 새로운 결합 솔루션을 제공합니다.”

신티언트의 커트 부시(Kurt Busch) CEO는 “음성 기반 사용자 인터페이스를 통해 고객은 차세대 혁신적인 아이디어를 개념에서 현실로 가져오는 새로운 사용자 경험을 제공할 수 있을 것입니다. 우리는 이미 1,500만 개 이상의 딥 러닝 NDP를 전 세계적으로 출하하여 다양한 소비자 및 산업용 IoT 애플리케이션에서 상시 통화를 지원합니다. Renesas와의 협력은 다양한 기기와 사용 사례에서 전 세계 고객 기반의 관심을 가속화할 강력한 저전력 음성 및 이미지 솔루션을 제공합니다.”

새로운 음성 제어 다중 모드 AI 솔루션은 광범위한 Renesas 포트폴리오의 여러 상호 호환 장치를 사용하여 고객에게 더 빠른 시장 출시 및 위험 감소를 위한 향상된 프로토타이핑 플랫폼을 제공합니다. 새로운 솔루션은 고객이 설계를 가속화하고 시장에 더 빨리 출시할 수 있도록 지원하는 강력한 아날로그, 전력 및 임베디드 프로세싱 제품 조합을 특징으로 하는 Renesas의 "우수 조합"의 일부입니다.

회로도 및 BOM 목록을 포함하여 새로운 다중 모드 AI 솔루션에 대한 참조 설계를 지금 사용할 수 있습니다.