세계 최대 차랑용 반도체 제조사 NXP 반도체는 i.MX 8M Plus 애플리케이션 프로세서를 출시하며, 업계를 선도하는 엣지버스(EdgeVerse) 포트폴리오를 확대했다. i.MX 8M Plus 애플리케이션 프로세서는 산업 및 IoT(사물인터넷) 엣지에서의 고급머신러닝 추론을 위한 전용 신경망 처리 장치(Neural Processing Unit, NPU)가 탑재된 첫 번째 i.MX 제품군이다.
i.MX 8M Plus는 2.3 TOPS(초당 테라 연산)의 고성능 NPU를 최대 2GHz까지 지원하는 쿼드 코어 Arm® Cortex-A53 서브 시스템, 800MHz Cortex-M7을 갖춘 독립적인 실시간 서브 시스템, 음성 및 자연어 처리를 위한 고성능 800MHz 오디오 DSP(디지털 신호 처리), 듀얼 카메라 이미지 시그널 프로세서(Image Signal Processors, ISP), 풍부한 그래픽 렌더링을 위한 3D GPU 등을 탑재했다. 고성능 Cortex-A53 코어와 NPU가 탑재된 엣지 디바이스는 사람이 약간 개입하거나 전혀 개입하지 않고 입력된 정보를 학습, 추론해 지능적인 의사결정을 현장에서(locally) 내릴 수 있을 것이다. 비용 효율적인 i.MX 8M Plus는 치안, 산업용 머신 비전, 로봇공학, 손을 이용한 제스처, 그리고 초고속 응답시간과 높은 정확도를 갖춘 인간과 디바이스의 원활한 상호작용을 위한 자연어 처리기능을 지원하는 감정(emoticon) 감지 등 다양한 사람 및 물체 인지 분야에 적용할 수 있다.
마틴 험프리스(Martyn Humphries) NXP 소비자 및 산업 시장용 i.MX 애플리케이션 프로세서 부문 부사장은 “엣지는 머신 러닝 애플리케이션을 도입하기 위한 최적의 장소다. NXP는 소비자 및 산업용 IoT 시장의 선두 기업들과 협력하고 있으며, 이 기업들이 i.MX 8M Plus에 기반해 선보일 혁신적인 제품들이 기대된다. i.MX 8M Plus는 ‘스마트’ 엣지를 ‘지능형’ 엣지로 전환할 수 있는 프로세싱 솔루션의 중대한 이정표이자 트렌드 세터"라고 말했다.
고급 14nm LPC 핀펫(FinFET) 공정 기술을 통해 개발된 NXP i.MX 8M Plus는 다중 객체 식별, 4만 개 이상의 영단어 음성 인식, 의료 영상 등 여러 개의 매우 복잡한 신경망을 동시에 실행할 수 있다. 강력한 NPU는 초당 500개 이상의 이미지를 다루는 인기 이미지 분류 네트워크인 모바일넷(Mobilenet)을 처리할 수 있다.
개발자들은 NPU에 머신러닝 추론 기능을 오프로드(off-load) 해서, 고성능 Cortex-A와 Cortex-M 코어, DSP, GPU로 다른 시스템이나 사용자 애플리케이션 작업을 실행할 수 있다. 비전 파이프라인은 실시간 스테레오 비전용 고화질 카메라 2대 또는 12M Pixel 해상도 카메라 1대를 지원하는 듀얼 통합 ISP로 고정되며, HDR(High Dynamic Range)과 어안렌즈(fisheye lens) 왜곡 교정 기능도 지원한다. 이러한 기능들로 감시, 스마트 리테일 애플리케이션, 로봇 비전, 가정용 건강관리 모니터와 같은 실시간 이미지 프로세싱 애플리케이션을 구현할 수 있다.
i.MX 8M Plus는 음성 애플리케이션을 구현하기 위해 음성 스트림(voice stream)을 사전/사후 처리해 자연어 처리 성능을 강화하는 고성능 HiFi 4 DSP를 탑재했다. 강력한 Cortex-M7 도메인은 실시간 응답 시스템을 실행하는 데 사용될 수 있다. 이때 호출 단어 감지(wake work detection)를 위해 Cortex-M 도메인만 활성 상태로 유지하면서 애플리케이션 프로세서 도메인은 끄면, 애플리케이션 프로세서 도메인이 복잡한 비실시간 애플리케이션을 실시함으로써, 전체 시스템 전력 소비량을 줄일 수 있다. i.MX 8M Plus는 클라우드 스트리밍 또는 로컬 스토리지용 H.265나 H.264 HD 비디오 인코더/디코더로 여러 영상 피드를 압축할 수 있는 시스템, 그리고 돌비 애트모스(Dolby Atmos®)와 DTS:X®를 갖춘 이머시브3D(Immersiv3D) 오디오와 3D/2D 그래픽으로 구현한 풍부한 사용자 경험을 바탕으로, 고급 멀티미디어와 영상 처리 기능을 확장한다.
