Периферийные узлы восприятия для человекоподобных роботов PERCEPTION-PHYSICAL-AI-HOLOSCAN-SENSOR-BRIDGE

Описание

Процессоры NXP i.MX работают в человекоподобных роботах распределёнными узлами восприятия на периферии, дополняя централизованные вычисления NVIDIA: они берут на себя критичную по времени предварительную обработку данных датчиков и задачи управления. Через мост NVIDIA Holoscan Sensor Bridge устройства i.MX с малой задержкой передают согласованные и предварительно подготовленные данные — необработанное и цветное видео, объединённые показания инерциальных датчиков, сигналы датчиков касания — в вычислительный тракт робота, построенный вокруг графического процессора.

Такая схема «периферия — графический процессор» снижает требования к полосе связи с центральным вычислителем, обеспечивает предсказуемую по времени обработку данных датчиков на месте и позволяет платформе NVIDIA сосредоточиться на задачах верхнего уровня: планировании движений всего тела, выводе больших многомодальных моделей и оптимизации управления. В итоге получается наращиваемый модульный тракт от измерения до вычисления, рассчитанный на сложные системы человекоподобной робототехники.