Открытые AR-очки с OLED-дисплеем 1080p и тепловизором

1.1 Общий обзор

Первая глава знакомит с проектом в целом и с тем, как собирается оптическая часть.

Вторая глава подробно разбирает схемную и программную части AR.

Третья глава рассказывает о текущем состоянии проекта.

Весь процесс сборки таков: сначала собирается оптическая часть, затем совмещается с экраном, а потом в схему прошивается прошивка.

1.2 Возможности

OSAR ориентированы на исследования и оснащены OLED-дисплеем 1920 × 1080. В верхней части — съёмный тепловизионный модуль, внутри которого инфракрасная камера.

Так выглядит просмотр видео:

А это демонстрация распознавания жестов (на основе MediaPipe):

1.3 О главной плате

Чтобы управлять дисплеем, нужна вычислительная платформа. Сначала я пробовал напрямую выводить изображение с телефона, но не мог задействовать инфракрасную камеру очков, а без неё не работают ни ночное видение, ни собственные приложения. Пробовал и свою плату разработки (шестислойная, иммерсионное золочение): под Linux оптическая часть работала, но Android-приложения AR не запускались. Нужна совместимость и полный набор функций — и я вспомнил про встраиваемый Android-модуль RK3399. Со временем я купил серийные AR-очки Thunderbird Air и, изучив рынок, решил: в 2024-м AR-индустрии незачем гнаться за амбициями — достаточно запустить Android, заменить телефон, но хорошо делать специализированные задачи, мыслить в духе B2B и стать «незаменимым» в определённых сценариях.

По сути AR-очки — это монитор и камера, висящие на лице, поэтому они дружат и с телефоном, и с компьютером, и с платой разработки, включая Raspberry Pi. На раннем этапе я тестировал на Raspberry Pi, а теперь выбрал доработку на базе H616 — так достигается наилучшее соотношение эффективности и стоимости и закрываются ключевые задачи: просмотр видео, тепловизор, ночное видение. Инструкция по тепловизору — в приложенном документе.

Это краткое изложение проекта. Полную версию с подробностями смотрите на сайте оригинала: https://oshwlab.com/oshwhub.com/open-source-ar-glasses