Ожидалось, что Rockchip RK3399Pro станет первым процессором компании, в котором используется NPU (блок обработки нейронной сети) для ускорения рабочих нагрузок искусственного интеллекта, но в конечном итоге он подвергся изменениям, и теперь, просмотрев файл дерева устройств, в ядре Linux, мы можем обнаружить NPU RK1808.
Rockchip официально объявил NPU на CES 2019, и теперь нам стало известно о нем немного больше.
Вот спецификации, предоставленные компанией:
- Двухъядерный процессор Arm Cortex-A35
- Производительность вычислений NPU до 3.0 TOPs с поддержкой гибридной работы INT8 / INT16 / FP16
- VPU с поддержкой видеокодека 1080P
- Встроенный SRAM 2 МБ системного уровня
- Дисплей – видео выход MIPI / RGB
- Камера – ввод видеосигнала MIPI / CIF / BT1120 со встроенным ISP
- Аудио
- Поддержка массива микрофонов с аппаратной функцией VAD для мониторинга низкого энергопотребления и пробуждения в дальней зоне.
- Аудио выход
- I / O
- PWM / I2C / SPI / UART
- USB 3.0 / USB 2.0
- Интерфейс PCIe
- Поддержка Gigabit Ethernet и внешних модулей WiFi / Bluetooth
- Техпроцесс – 22 нм процесс FD-SOI
Устройство имеет много аналогичных функций, что и стандартные медиа-SoC, но, похоже, ему не хватает GPU, это не платформа, способная обрабатывать расширенный пользовательский интерфейс с 3D-графикой.
NPU совместим с платформами TensorFlow, MXNet, PyTorch и Caffe, и компания предоставляет SDK для разработки приложений для системы Linux, поддерживающий языки программирования C / C ++ и Python.
Ожидается, что решение Rockchip RK1808 будет использоваться в различных приложениях ИИ в области безопасности, образования, автомобилей, интеллектуальных носимых устройств, бытовой техники, систем хранения и т. д. , все это благодаря функциям ИИ, включая пробуждение голосом, распознавание речи, распознавание лиц и анализ характерных черт, распознавание лиц, анализ осанки, обнаружение и распознавание целей, обработка изображений и т. д.
Выражаем свою благодарность источнику с которого взята и переведена статья, сайту cnx-software.com.
Оригинал статьи вы можете прочитать здесь.