Можно попробовать смотреть с главной изображения и по тегам. Если по тегам нет и в главной - значит не видели. Не факт, но большая вероятность.
Можно ли брать ограниченное количество точек (50 лучших) на целевом изображении и точек 100 на таргетах. Сохраняем хорошие таргеты, чтобы потом прогнать их с большим количеством точек. Можно попробовать сперва грубым ORBом пройти, потом SIFTом для сокращения ошибок.