Да, это возможно, но дескрипторы SIFT являются лишь одной частью метода и не очень связаны с предсказанием, но с обнаружением.
Вам необходимо использовать SIFT для обнаружения.
Как только вы обнаружите объект, вы преобразуете прогноз и обновите шаг, например, Фильтр Калмана .