Выделение отдельных участков тела человека на изображении с использованием нейронных сетей и модели внимания

Abstract

Выделение отдельных участков тела человека является сложной задачей, которая имеет множество приложений. В данной работе предлагается алгоритм выделения частей тела человека на изображениях с помощью системы OpenPose и модели внимания. Новизна представленного алгоритма заключается в том, что он основан на сверточной нейронной сети, использующей непараметрическое представление для связывания частей тела с людьми на изображении, в сочетании с моделью внимания, которая учится сосредоточиваться на определенных областях входного изображения. Алгоритм является частью разработанной авторами системы Smart Cropping, цель которой – вырезать на изображении нужные части одежды и подготовить каталог электронной коммерции.