Дополненная реальность: визуализировать видео поверх маркера

Question

Я бы хотел сделать видео (может быть любой формат до тех пор, пока он работает) поверх маркера, но я не уверен, как это сделать. Я использую Artoolkit для настольных AR и QCAR для мобильных AR. В конце концов я хочу сделать это для обеих систем, поэтому я предпочитаю видео-библиотеку, которую я мог бы использовать на обеих платформах.

В основном я знаю, что те шаги, которые должны быть сделаны:

- load video file 
- extract image according to current time 
- use image as texture 
- apply marker's transformation matrix to textured rectangle 

Какие библиотеки могут использовать для достижения первых двух шагов?

Answer 1

Какие библиотеки можно использовать для достижения первых двух шагов?

Загляните в библиотеку libavcodec (вы можете начать here), но учтите, что это довольно сложно.