Отчёт по практике: Отчет по производственной практике (Создание набора 3D-данных для обучения нейросети генерации 3D-выражения лица)

Индивидуальное задание
Глобальная задача, которая существует в рамках предприятия − создание набора 3D-данных для обучения нейросети, которая будет на основе обучающей выборки генерировать 3D-выражения лица. На основе нейросети в будущем планируется создание 3D-помощника для пользовательских приложений.
Лицевая мимика помощника будет генерироваться с помощью обученной нейросети. В дальнейшем наработки могут использоваться для коммерческих и исследовательских проектов.
В рамках глобальной задачи можно выделить подзадачу для учебной
практики − создание обучающих данных для нейросети. Нетривиальность задачи заключается в том, что необходимо создать обучающую выборку на основе большого количества 3D сканов реальных людей. Выборка в перспективе должна содержать сканы двухсот людей, для каждого человека должна содержать двадцать эмоций. Таким образом, выборка будет содержать внушительное количество данных, которые необходимо получить за минимальное количество времени и минимальное количество ресурсов. Тогда
подзадачу можно сформулировать таким образом − разработать алгоритм создания набора 3D сканов лица. Критерием качества такого алгоритма должна быть выбрана скорость и эффективность обработки дата сета (наборе данных) с большим количеством сканов. Также отдельно стоить отметить, что сканы в дата-сете должны иметь качество, которое будет приемлемо для обучения нейросети.
После создания дата-сета можно выделить следующую подзадачу −
разработать алгоритм обработки “сырого” скана, который позволит
использовать сканы как обучающие данные для нейронной сети. Конечным продуктом сканирования для компьютерной графики является модель, которую можно использовать для визуализации реалистичного изображения объекта в новых условиях, то есть в местоположении или в условиях освещения, которые существуют только при компьютерном моделировании.