Нужно ли нам использовать оптический поток компьютера в трекерах Kanade-Lucas-Tomasi?

Question

Я пытаюсь понять отслеживание Kanade-Lucas-Tomasi. Это обзор (я прочитал от некоторых лекций) о том, как это должно быть сделано:

1. Find harris corners 
2. For each corner compute displacement to next frame 
using the Lucas-Kanade method 
3. Store displacement of each corner, update corner position 
4. (optional) Add more corner points every M frames using 1 
5. Repeat 2 to 3 (4) 
6. Returns long trajectories for each corner point 

Мои сомнения в это мы должны вычислить оптический поток в некоторой точке или просто смещение вектора достаточно, чтобы нести из алгоритма? Если нет, то почему оптический поток касается этой темы?

Answer 1

Отслеживатель Kanade-Lucas-Tomasi связан с оптическим потоком, поскольку векторы перемещения являются оптическими векторами потока, но в разреженном смысле, а не в плотном поле оптического потока. Это потому, что трекер основан на методе Лукаса Канаде, оценивая вектор смещения. Метод Лукаса Канаде основан на предположении о постоянстве интенсивности, которое решается с помощью аппроксимации Тейлора первого порядка. Это приближение называется уравнением оптического потока и было изобретено Хорном и Шукком. Метод Lucas Kanade классифицируется как метод локального оптического потока, тогда как большинство современных методов оптического потока являются глобальными методами, которые создают плотные поля движения.

Answer 2

Вектор перемещения представляет собой один образец (плотного) оптического потока в угловом положении. Кстати, хотя углы Harris обычно являются хорошим местом для инициализации поиска, строго говоря, для этого нужен слабый детектор, см. Shi & Классические «хорошие функции» Томаси для отслеживания «paper.