Розпізнавання облич вже не новинка, воно вміє розрізняти і емоції людини, і інтонацію, цим не здивуєш сучасних користувачів. 55% інформації людина передає жестами і це зацікавило вчених з Інституту робототехніки університету Карнегі — Меллон і вони вирішили створити програму, яка змогла б читати людські жести.
Для розробки вчені задіяли 500 високоточних відеокамер, які встановлені в куполі висотою в два поверхи. Всі камери створюють величезну кількість матеріалу, і щоб обробити хоча б один кадр потрібні значні обчислювальні ресурси. Система одночасно аналізує положення голови, тулуба, ніг і всіх пальців рук, а також вираз обличчя.
Лідер проекту Ясер Шейх вважає, що до їх розробки комп’ютери були сліпі до невербальних знаків, але їх розробка все змінить. Зараз вони працюють для того, щоб використовувати тільки одну камеру для аналізу при цьому, щоб комп’ютер міг аналізувати цілу групу людей, які взаємодіють один з одним.
Вихідний код програми знаходиться у вільному доступі, а більш детальну інформацію розробники планують надати на конференції Computer Vision and Pattern Recognition Conference (CVPR) 2017, яка проходить з 21 по 26 липня.
