Вид виртуального зеркального приложения в android

Question

Я хочу разработать приложение для виртуального зеркала, похожее на this . В моем исследовании в Интернете оно основано на дополненной реальности. У меня есть некоторые знания в расширенной реальности, используя Qualcomm. Но я обсуждал на форуме Qualcomm и узнал, что я не могу разработать приложение Virtual Mirror с помощью Qualcomm. Я изучаю другие способы в Интернете, но не получаю должных ресурсов. Просьба предоставить мне несколько вводных данных, чтобы начать и разработать приложение.

Answer 1

Приложение AR, к которому вы обращаетесь, объединяет трехмерное лицо/головной трекер с визуальным трехмерным увеличением.

3D-трекер лица предоставляет вам трехмерную позу обнаруженного объекта лица (в системе координат камеры). Вы можете использовать эту 3D-позу (преобразование) для размещения виртуального 3D-объекта в наложении лица (с OpenGL, DirectX). Вы можете, наконец, добавить видео вход в фоновом режиме, чтобы сделать AR-приложение с ним.

Они довольно много методов для 3D лица трекере: AAM + POSIT, Optical Flow + Tracking (КЛТ), используя информацию о глубине (Kinect) и т.д.

Некоторые указатели для запуска:

OpenCV, AAM+POSIT

OpenCV, Pose Estimation + Visual Augmentation

(+ faceAPI от Проводы машины, Face Tracking SDK от Microsoft, и т.д.)

Опрос по теме: Эрик Мерфи-Чуториан, Мохан М. Тривиди: оценка позы в компьютерном зрении: обзор. IEEE Trans. Образец анальный. Мах. Интелл. 31 (4): 607-626 (2009)