Всегда будут различия в положении ориентиров лица. Например, поскольку API предоставляет координаты X / Y для каждой точки на лице, когда угол между камерой и лицом отличается, координаты также изменятся.
API действительно предназначен для таких приложений, как маски и фильтры для лица. Как вы сказали, API не поддерживает распознавание лиц.