Роботы научатся понимать невербальное поведение человека

Если ваш собеседник говорит, что он спокоен, но при этом сжимает кулаки – это повод усомниться в его искренности. А вот роботы приняли бы словесное утверждение за чистую монету. Даже умея распознавать лица, они до сих пор не понимают язык тела. Но теперь-то они научатся считывать социальные сигналы: программисты из Университета Карнеги-Меллона разработали систему слежения за жестами и мимикой человека – OpenPose расскажет роботам все, что вы бы хотели от них скрыть.

Система фиксирует движения тела в режиме реального времени. Для этого разработчики использовали Panoptic Studio CMU – сферу, оснащенную 500 камерами. Под этим куполом люди танцевали, играли и всячески дурачились. А камеры снимали движущиеся объекты под разными углами.

Затем полученное видео собрали в единую базу данных. Из 2D изображения перевели в формат 3D. Определенные части тела идентифицировали и промаркировали. В результате система смогла определить, как, к примеру, выглядит рука, когда она находится в определенном положении, даже если несколько пальцев скрыты от обзора.

Теперь, когда OpenPose располагает полным спектром данных, для работы системы достаточно только одной камеры и ноутбука. Технология становится мобильной и доступной. Разработчики уверены — это упростит невербальное общение между роботами и людьми, а также откроет новые перспективы для дополненной реальности и пользовательских интерфейсов. Ну а для домашнего или производственного робота вообще будет достаточно одного жеста, чтобы коммуникация состоялась. К примеру, робот сможет предложить человеку, потерявшему работу, платок. Чтобы тот вытер слезы и уступил ему свое рабочее место.