ИИ научился понимать с первого взгляда: устройство для управления компьютером глазами

Разработчики из Новгородского государственного университета имени Ярослава Мудрого создали две модели искусственного интеллекта, способные обнаруживать лица на изображениях и определять их ключевые точки. Эти технологии станут основой для будущего айтрекера — устройства, которое позволит управлять компьютером с помощью взгляда. Особенно полезным такое решение может стать для людей с ограниченными возможностями.

Первая нейросетевая модель отвечает за определение границ лица, а вторая — за точную локализацию таких элементов, как глаза, брови, нос и рот. Вместе они формируют единую систему, которая выделяет лица на изображениях, обрезает нужные фрагменты и извлекает биометрические параметры. Для обучения ИИ использовали общедоступные датасеты, которые были доработаны и расширены. После тренировки модели протестировали и в результате модель, определяющая границы лица, показала совпадение площадей на уровне 87%, а система распознавания ключевых точек — точность с погрешностью менее двух пикселей при разрешении 96×96.

Работа над айтрекером продолжается: в ближайшее время команда начнёт собирать новый обучающий датасет для третьей модели. Её задача — предсказывать направление взгляда пользователя на экране. Прототип программного обеспечения планируют подготовить к началу 2026 года.

Фото: Canva

0

0

0

0

0