Все о Цифровых системах - новости, статьи, обзоры, аналитика. Более 1000 компаний, товаров и услуг в каталоге.
Добавить компаниюПредложить публикацию

Китайская VeriSilicon представила новую платформу Nano-XR для умных очков с ИИ

Рубрики: «Искусственный интеллект (AI)», «Платформы», «Умные очки»

Китайская VeriSilicon представила новую платформу Nano-XR для умных очков с ИИ

Решение объединяет готовые функциональные модули для проектирования микросхем, или IP-блоки, для обработки изображения, графики, звука и нейросетевых вычислений, включая новую серию Nano-XR. Производители могут лицензировать эти модули и использовать их для создания собственных процессоров умных очков. Для компактных очков особенно важен баланс вычислительных возможностей, массы, нагрева и времени автономной работы. В одном устройстве могут одновременно работать камеры, микрофоны, дисплеи, сенсоры положения и локальные алгоритмы искусственного интеллекта. Простое объединение мощных процессорных модулей не решает проблему: передача данных между ними и обращение к внешней памяти сами по себе расходуют энергию. Поэтому компания VeriSilicon сделала акцент не только на отдельных IP-блоках, но и на организации их совместной работы.

Серия Nano-XR включает несколько специализированных компонентов:

  • ISPNanoUltra-XR предназначен для обработки фотографий и видео с уровнем качества, который компания сравнивает со смартфонами, при ограничениях по площади кристалла и энергопотреблению.
  • ISPPico-XR рассчитан на инфракрасные сенсоры и постоянно активные функции: отслеживание взгляда и распознавание жестов. Такие задачи требуют экономичного режима работы даже тогда, когда пользователь не запускает тяжёлые приложения.
  • За подготовку изображения для дисплеев отвечает модуль DCNanoUltra-XR. Он поддерживает сценарии с тремя или шестью степенями свободы — 3DoF и 6DoF. В первом случае система отслеживает преимущественно повороты головы, во втором также учитывает перемещение в пространстве. Разработчик заявляет поддержку нескольких высокоскоростных интерфейсов вывода и механизмов отключения неиспользуемых участков схемы для экономии энергии.
  • Графический блок GCNanoOptimaV-XR развивает семейство маломощных графических процессоров GCNanoUltraV и ориентирован на рендеринг для очков дополненной реальности. Компания VeriSilicon сообщает об его улучшенной обработке проекционных преобразований, более высокой графической производительности и уменьшении потребности в памяти.

Помимо Nano-XR платформа может включать блоки нейропроцессоров NPU для нейросетевых вычислений, звуковых процессоров DSP для обработки звука, видеокодеки и другие модули из портфеля компании. С их помощью производитель очков сможет настраивать систему под конкретный сценарий: от голосового управления и шумоподавления до улучшения изображения и распознавания визуальных объектов. В настоящее время система поддерживает программные платформы RTOS, Linux и Android.

Ключевыми технологиями новой архитектуры являются FLEXA и DECNano. Первая организует обмен данными между вычислительными блоками с использованием встроенной памяти SRAM, снижая количество обращений к внешней памяти. Вторая сжимает графические данные с визуально незаметными потерями качества, чтобы сократить требования к пропускной способности и объёму памяти PSRAM или DDR. По замыслу разработчиков из VeriSilicon, это должно уменьшить задержки и расход энергии при непрерывной обработке видеопотока.

Дай Вэйцзинь, директор по стратегии, исполнительный вице-президент и генеральный менеджер подразделения IP VeriSilicon, связывает развитие носимых устройств с усложнением их функций. «Для таких возможностей нужны не только энергоэффективные IP-блоки, но и их согласованная работа во всей подсистеме».

Помимо этого, компания VeriSilicon занимается поставкой готовых архитектурных компонентов и услугами по созданию заказных микросхем. Такой подход позволяет производителям устройств не разрабатывать графические, дисплейные и сенсорные блоки с нуля, а объединять лицензируемые функциональные модули в собственный чип. Компания также сообщила о совместной работе с клиентами над специализированными микросхемами для умных очков с использованием новой платформы Nano-XR.

Источник: