Audi на Конференции по нейронным вычислениям и машинному обучению (NIPS) в Лонг-Бич (Калифорния, США) рассказала о передовой монокамере, которая использует искусственный интеллект для создания высокоточных трёхмерных моделей окружающего пространства.

Система разработана специалистами дочернего предприятия Audi Electronics Venture (AEV). Основа комплекса — фронтальная камера с углом обзора около 120 градусов. Она делает 15 снимков в секунду с разрешением 1,3 млн пикселей.

Полученные изображения обрабатываются нейронной сетью с использованием семантической сегментации, в ходе которой каждый пиксель анализируется и распределяется по 13 классам объектов. Это позволяет системе идентифицировать и различать другие автомобили, строения, дорожную разметку, людей и знаки.

Нейронная сеть выполняет и ещё одну функцию: она решает задачу по определению дистанции. Для этого выстраивается изображение с помощью изометрических линий, представляющих собой виртуальные границы, определяющие постоянное расстояние между объектами.

Утверждается, что такое сочетание семантической сегментации и расчётов глубины позволяет создать детализированную трёхмерную модель в точном соответствии с фактическими параметрами окружения автомобиля.

Для обучения нейронной сети использовалось множество видеозаписей дорожных ситуаций, сделанных с помощью стереокамеры. В процессе тренировок система училась самостоятельно усваивать правила построения трёхмерной картины на основе изображений с монокамеры.

Новая система найдёт применение в передовых платформах автопилотирования. Специалисты Audi уверены, что комплекс обладает огромным потенциалом для интерпретации дорожных ситуаций.