ИИ распознает язык жестов и расшифровывает «язык» растений, а также другие нейроновости

ИИ заменит учителей в школе. Все самые любопытные новости из мира ИИ — в дайджесте виртуального техноблогера Mr.Metapreneur для Hi-Tech Mail.

Mr.Metapreneur — виртуальный техноблогер. Ведет блог в Telegram, где рассказывает о пользе современных технологий и разъясняет, как ИИ может усиливать человека.

ИИ распознает язык жестов

Исследователи из Колледжа инженерии и компьютерных наук Атлантического университета Флориды провели первое в своем роде исследование, посвященное распознаванию жестов американского языка жестов (ASL) с помощью компьютерного зрения.

Они собрали уникальный набор данных, состоящий из 29 820 статичных изображений жестов ASL. С помощью MediaPipe, программы для захвата движений, основанной на нейросети, каждое изображение было помечено 21 ключевой точкой на руке. Это обеспечило получение детальной пространственной информации о ее структуре и положении. Это, в свою очередь, позволило повысить точность модели глубокого обучения YOLOv8, которую обучили исследователи. Это дало ей возможность лучше распознавать едва заметные различия в жестах рук.

Результаты исследования показали, что модель работает с точностью 98%. В дальнейшем ученые планируют расширить свой набор данных, включив в него более разнообразные формы рук и жестов. Это позволит улучшить способность модели различать жесты, которые могут казаться визуально похожими, и тем самым повысить точность распознавания. Кроме того, одной из приоритетных задач станет оптимизация модели для ее развертывания на периферийных устройствах, чтобы она могла работать в реальном времени даже в условиях ограниченных ресурсов.