Prophesee комплектует датчики событийного видения набором ИИ для технического зрения AMD
07.05.2024 | Фекла Дербинова
Компания Prophesee, французский разработчик нейроморфных систем технического зрения, используемых в датчиках технического зрения и сопутствующих продуктах, заключила соглашение с AMD, чтобы сделать свой датчик Metavision HD и искусственный интеллект доступными для использования со стартовым набором AMD Kria KV260 Vision AI Starter Kit.
Эта пара будет представлена на выставке технологий автоматизации Automate 2024 в Чикаго на этой неделе.
Семейство систем-на-модуле (SoM) Kria FPGA было представлено три года назад компанией Xilinx до приобретения этой компании AMD. С тех пор, по мере роста интереса к обработке ИИ на границах, AMD продолжала инвестировать в SoM и расширять его за счет устройств, ориентированных на различные вертикали и приложения, такие как искусственное зрение, автомобилестроение, робототехника и другие. Она также выпустила стартовые наборы для некоторых из этих целевых областей, чтобы помочь разработчикам быстро освоить и внедрить устройства Kria в свои продукты и приложения.
Хотя представители Prophesee уже говорили Fierce Electronics, что ее датчики, основанные на событиях, будут работать с различными марками и моделями ПЛИС для разработки новых предложений, это первый раз, когда Prophesee предлагает комплект для разработки, включающий ПЛИС в качестве части полного предложения, сказал представитель компании.
Компания добавила, что этот анонс также представляет собой первый набор для разработки системы технического зрения на основе событий, совместимый с платформой AMD, что поможет пользователям реализовать такие целевые приложения, как «умный город» и машинное зрение, камеры безопасности, аналитика розничной торговли и многие другие.
Стартовый набор KV260 Vision AI Starter Kit - это платформа разработки для AMD Kria K26 SoM, предназначенная для передовых приложений технического зрения с потребностями в обработке данных искусственного интеллекта. Этот набор избавляет разработчиков от необходимости обладать сложными знаниями в области проектирования аппаратного обеспечения или навыками программирования ПЛИС перед началом реализации проектов.
Лука Верре, соучредитель и генеральный директор Prophesee, говорит, что объединение сенсорной технологии его компании с Kria SoM и стартовым набором в новое предложение поможет продвинуть рынок продуктов и приложений для технического зрения на основе событий, во многих случаях выходящих за рамки традиционных подходов, основанных на покадровом зондировании.
«Никогда еще не было так просто разрабатывать приложения Event-based Edge с этой комбинацией средств разработки от AMD и Prophesee», - сказал он. «Мы предоставляем все необходимое, чтобы в полной мере воспользоваться преимуществами низкого энергопотребления и низкой задержки, присущими событийному зрению, а также обеспечиваем среду для оптимизации систем машинного зрения на основе конкретных KPI для приложений и сценариев использования, определяемых заказчиком».
Компания также заявила, что новое предложение включает в себя прорывное подключаемое приложение Active Markers Tracking, которое позволяет оценивать 3D-позу с частотой >1000 Гц, полностью отбрасывая фон на уровне пикселей и обеспечивая чрезвычайную устойчивость к сложным условиям освещения. По словам Prophesee, эта возможность позволяет реализовать новый спектр сверхскоростных задач, таких как отслеживание игровых контроллеров, безопасность на строительных площадках, системы защиты от опрокидывания тяжелых грузов и многое другое. По словам компании, в ближайшие месяцы будут доступны несколько дополнительных готовых к использованию алгоритмов.
Компания Prophesee добавляет, что новый комбинированный набор представляет собой «готовое» решение для разработки, позволяющее быстро начать работу с Prophesee Metavision SDK и датчиком IMX636 HD Event, созданным в сотрудничестве Prophesee и Sony, что позволяет легко переносить алгоритмы на коммерческие и промышленные SoM, работающие на базе специально разработанной компанией AMD многопроцессорной SoC Zynq UltraScale+.
«Постоянно расширяющаяся экосистема Kria помогает сделать приложения для захвата движений, подключения и краевого ИИ более доступными для робототехников и разработчиков», - говорит Четан Кхона (Chetan Khona), старший директор AMD по промышленным рынкам, рынкам Vision, Healthcare и Sciences. «Prophesee Event-based Vision предлагает уникальные преимущества для приложений машинного зрения. Низкое потребление данных обеспечивает эффективное энергопотребление, меньший объем вычислительных ресурсов и памяти, а также быстрое время отклика».