Экономичная плата обработки изображений FWD-RK3588, оснащенная 8-ядерным 64-битным процессором с частотой часов до 2,4 ГГц

Этот продукт представляет собой встроенную карту обработки изображений, работающую на процессоре Rockchip RK3588, в основном состоящую из двух компонентов: карты обработки ядра (SoM) и карты-носителя интерфейса.RK3588 - это флагманский высококачественный процессор нового поколения Rockchip., изготовленный с использованием продвинутого 8нм процесса узла. Он оснащен 8-ядерным 64-битным процессором с первичной тактовой скоростью до 2,4 ГГц. Процессор интегрирует встроенный ускоритель ИИ NPU,предоставление 6 TOPS вычислительной мощности и поддержка основных рамок глубокого обучения.

Карта обработки изображений включает три интерфейса ввода видео, в том числе два интерфейса MIPI CSI и один цифровой видеоинтерфейс BT.1120, что позволяет захватывать видео высокой четкости из нескольких источников.Оснащены множеством бортовых коммуникационных интерфейсов, панель обеспечивает стабильную и эффективную передачу видеоданных для удовлетворения требований высокопроизводительных встроенных систем зрения.Продукт завершил адаптацию основных драйверов в среде Linux (Ubuntu RootFS), позволяя пользователям непосредственно приступать к разработке на уровне приложения.

Этот продукт завершил адаптацию и проверку всех основных драйверов периферийных устройств на базе системы Linux (оснащенных файловой системой Ubuntu по умолчанию).Пользователи не должны беспокоиться о сложных драйверах низкого уровня и могут напрямую проводить разработку на уровне приложения с использованием стандартных системных вызовов.

• Драйверы процессоров:Адаптированы контроллеры управления питанием, часов, прерывания и DMA RK3588, обеспечивающие эффективное планирование вычислительной мощности ЦП и НПУ.

• Драйверы ввода видео:

  • Драйвер MIPI:Адаптирован интерфейс камеры MIPI CSI-2 и датчики изображения, поддерживающие получение данных изображения камеры.

  • BT.1120 Водитель:Адаптирован чип цифрового видеоприемника для получения видеоданных через интерфейс BT.1120.

• Драйвер сетевого интерфейса:адаптивный гигабитный Ethernet, поддерживающий потоковую передачу сетевого видео (RTSP) и дистанционное управление командой.

• Драйверы интерфейсов связи:Приспособленные бортовые интерфейсы, такие как UART, I2C и GPIO. Пользователи могут напрямую контролировать и взаимодействовать с данными с внешними устройствами с помощью операций с файлами или системных вызовов.

Карта интегрирует два типа интерфейсов видеоввода для удовлетворения требований к подключению различных датчиков:

• MIPI цифровой видео вход:Предоставляет стандартный интерфейс V4L2. Пользователи могут получать данные о кадрах изображений через стандартные системные вызовы, такие какоткрытоиИоктл.

• BT.1120 Цифровой вход видео:Предоставляет единый интерфейс видеоустройства для слоя приложения через фреймворк V4L2, облегчая единую обработку программного обеспечения.

Интегрирует трехъядерную архитектуру NPU, которая поддерживает гибридные операции INT4/INT8/INT16/FP16, легко обрабатывая сложные задачи зрения, такие как обнаружение объектов, классификация и отслеживание.Предоставляет RKNN Runtime API, который отвечает за загрузку моделей RKNN, управление входами/выводами и выполнение вычислений на НПУ.

Чтобы помочь пользователям быстро начать, мы предоставляем примеры выполнения алгоритма.мы не несем ответственности за производительность или эффективность самих алгоритмов):

• Обнаружение объекта:Предоставляет пример развертывания YOLOv5, который может непосредственно выполнять обнаружение объектов в режиме реального времени на захваченном видеопотоке и выводить ограничивающие поля и категории.

• Отслеживание объектов:Интегрирует соответствующие примеры алгоритмов отслеживания, позволяя пользователям достичь контроля в замкнутом цикле на основе данных о расстоянии пропуска.

• Интеграция с видеопотоками:Примерная программа показывает, как вводить кадры изображений в NPU для выводов,и наложить результаты вывода (например, рамки) на выходное видео с помощью функции OSD (на экране), образуя полную замкнутую цепь с применением от конца до конца.