Проще говоря, вы не можете. Но вы, конечно, можете сделать некоторые образованные догадки.
У вас есть контур лица с указанием его размера, положения, рыскания и шага. Размер шеи в некоторой степени связан с размером лица, и он всегда находится под лицом. Зная это, вы можете нарисовать контур. Это не определит, покрыт ли он шарфом.