Mikrokontroler z akceleratorem AI do przetwarzania i rozpoznawania obrazu z wielu kamer
Renesas powiększa serię mikrokontrolerów RZ/V do aplikacji AI o nowy model RZ/V2MA z wbudowanym akceleratorem OpenCV, zaprojektowany do zastosowań w systemach rozpoznawania obrazu korzystających z wielu kamer. Zawiera on dwie 64-bitowe jednostki obliczeniowe, oparte na rdzeniach ARM Cortex-A53 taktowanych zegarem o maksymalnej częstotliwości 1 GHz oraz energooszczędny akcelerator DRP-AI (Dynamically Reconfigurable Processor) o przeliczniku szybkości obliczeniowej do poboru mocy równym 1 TOPS/W. Obsługuje interfejsy LPDDR4 (3200 Mbps), USB 3.1 (do 5Gbps) i PCI Express oraz kodeki H.265 i H.264.
Oprócz akceleratora DRP-AI, mikrokontroler zawiera też akcelerator OpenCV, umożliwiający równoczesne przetwarzanie obrazu z wielu kamer, oparte na regułach. Daje to szerokie możliwości rozpoznawania obrazu np. w serwerach wideo, bramkach bezpieczeństwa, terminalach POS i ramionach robotów.
RZ/V2MA oferuje pełen zestaw narzędzi programistycznych, wspomagających projektowanie systemów wizyjnych korzystających ze sztucznej inteligencji. Oprócz translatora DRP-AI, wprowadzono nowe narzędzie DRP-AI TVM, oparte na technologii open source kompilatora głębokiego uczenia Apache TVM. Podczas, gdy translator DRP AI jest przeznaczony do konwersji modeli AI na pliki wykonywalne, kompilator DRP-AI TVM umożliwia współpracę akceleratora DRP-AI z jednostką CPU, umożliwiając konwertowanie i generowanie większej liczby modeli AI niż dotychczas. W pierwszej fazie Renesas zapewnia wsparcie formatów ONNX i PyTorch AI, a w przyszłości również Tensorflow.
Firma Renesas opracowała platformę Vision AI Gateway Solution do wykrywania i rozpoznawania obiektów, opartą na sztucznej inteligencji. Realizuje ona bezprzewodowe gromadzenie i przesyłanie danych z wielu kamer. Poza mikrokontrolerem RZ/V2MA zawiera inne układy z oferty Renesas, m.in. generator zegara VersaClock, moduły komunikacyjne (Wi-Fi, Bluetooth, LTE) i układy sekcji zasilania oraz zawiera interfejsy do zewnętrznej pamięci SSD i karty SD. Do komunikacji bezprzewodowej przewidziano moduły Wi-Fi, Bluetooth Low Energy i LTE Cat-M1.
