Есть ли семантический текстовый компрессор? - PullRequest
0 голосов
/ 05 ноября 2019

Здесь: https://www.quora.com/What-is-the-best-text-compression-algorithm. Они сказали: «Лучшие компрессоры близки к пониманию текста. Они моделируют лексическую, семантическую и грамматическую структуру языка. Например, словарь организован путем группировки связанных слов, таких как мать с отцом и понедельник со вторником. Это приводит к словарным кодам, которые отличаются только младшими битами. Затем некоторые контекстные модели будут отбрасывать младшие биты, что позволит компрессору предсказать, что я видел своего отца в понедельник после того, как увидел, что видел мою мать во вторник ».

Мне нужно использовать работающий текстовый компрессорподобным образом. То есть «его словарь организован путем группировки связанных слов». Мне нужна библиотека на Python, которая предоставляет этот компрессор.

Спасибо за вашу помощь.

...