Определить, является ли текстовый фрагмент из простора полным предложением

Question

Мы работаем над предложениями, извлеченными из PDF.Проблема состоит в том, что он включает заголовок, нижние колонтитулы, оглавление и т. Д. Есть ли способ определить, является ли предложение, которое мы получаем при передаче документа в spacy, полным предложением.Есть ли способ отфильтровать части предложений, такие как названия

Answer 1

Попробуйте найти первый кусок существительного в каждом предложении.Это обычно (но не всегда) является заглавной темой предложения.

sentence_title = [chunk.text for chunk in doc.noun_chunks][0]