자율주행 기술이 발달하며 ADAS 애플리케이션으로 차량 미러 대체, 졸음 운전 감지, 보행자 보호 시스템과 같은 향상된 이미지 처리 기술이 요구되고 있다. 시장조사기관 스트래터지 애널리틱스(Strategy Analytics)는 "기술 구현을 위해 필요한 카메라 수가 증가할 것"이라며 "향후 5년 안에 고급형 자동차 대부분에 최대 12대의 카메라가 장착될 것"으로 전망했다. 

이런 유형의 복잡한 카메라 기술은 최악의 기상 조건에서도 영상을 신속하게 처리하고 분석할 수 있어야 하고, 엄격한 자동차 안전 기준을 충족하도록 설계해야 한다. 스마트폰이나 소비자용 비디오 카메라에 사용되는 일반 카메라 기술을 통합하는 것으로는 불가능하다.

 
이미지 신호 프로세서(ISP) 역할의 변화
ISP는 원시 픽셀을 디스플레이용 고화질 영상으로 변환한다. 자동차에 탑재되는 카메라 수가 증가하고 센서 융합 기술이 고도화되면서 컴퓨터 비전 알고리즘에 의해 인코딩 및 추가적으로 처리되는 ISP 기능은 ADAS용 SoC 내에 집중되고 있다. SoC는 다수의 카메라를 관리할 수 있을 뿐 아니라, 자동차 시장에 신뢰성과 안전성을 제공할 수 있다. 이를 위해 자동차 기능 안전과 컴퓨터 비전 애플리케이션용 가상 병렬 처리에 대해 새롭게 접근 해야 한다. 

차량용 카메라는 최상의 선명도와 신뢰성을 제공해야 한다. Mali-C71은 노출 값의 차이가 최대 24단계인 UWDR(ultra-wide dynamic range)을 제공한다. 경우에 따라 육안으로 볼 수 없는 상세한 이미지도 제공한다. 약 15단계의 DR(dynamic range)을 제공하는 고성능 DSLR 카메라 대비 선명도와 신뢰성에서 최상의 성능을 지원한다. 또한, 영상잡음을 제거하고 카메라의 다중 노출을 처리할 뿐 아니라 UWDR 프레임을 만들어 디스플레이나 컴퓨터 비전 엔진으로 전송한다.

보행자 보호나 졸음 운전 감지 시스템 같은 ADAS용으로 카메라가 사용되는 경우, 안전 기준은 한층 더 엄격해진다. Mali-C71은 300개 이상의 결함검출 전용 회로를 통해 짧은 지연시간 및 첨단 오류 탐지 기능을 제공한다. ISO26262, ASIL D, IEC 61508, SIL3 표준의 시스템 수준 인증이 가능해 진다.

ARM 관계자는 "ISP, 센서, 자동 화이트 밸런스, 자동 노출 등을 제어하기 위한 모든 소프트웨어 참조 코드를 제공하며, ASIL을 준수하도록 설계된 차량용 소프트웨어 전반을 개발할 계획"이라고 밝혔다. 

ARM 이미징 및 비전 그룹 총괄 부사장인 팀 램스데일(Tim Ramsdale)은 “자동차 산업이 자율 주행을 실현하기 위해 빠르게 움직이고 있다. ARM Mali-C71은 운전자의 신속하고 정확한 판단을 위해 필요한 정보를 높은 수준의 디스플레이로 나타낼 것이며 동시에 자동차도 제어할 수 있도록 컴퓨터 엔진에 신뢰할 만한 데이터를 제공하게 될 것”이라고 말했다.