Как удалить дубликаты слов в массиве?

Question

У меня есть эти массивы в python:

noDuplicateArr = ['"foo barr', '"foo corp', '"barr corp']
wordsArr = ['"fool barr', '"fool corp"']

Теперь, как лучше всего не добавлять в noDuplicateArr слова "fool barr" & "fool corp", потому что "barr" и "corp" уже присутствуют в noDuplicateArr?

Answer 1

Чтобы лучше сформулировать это, вы хотите запретить добавление строки в список строк, если она содержит слово / подстроку, которая уже существует в нем. Вам нужно будет использовать набор для отслеживания слов, которые уже были добавлены.

noDuplicateArr = ['"foo barr', '"foo corp', '"barr corp']
wordsArr = ['"fool barr', '"fool corp"']

seen_words = set()
for words in noDuplicateArr:
  words = words.strip('"')
  seen_words |= set(words.split())

for words in wordsArr:
  seen = False
  words = words.strip('"')
  for word in words.split():
    if word in seen_words:
      seen = True
      continue
  if not seen:
    noDuplicateArr.append(words)

Answer 2

list(set(noDuplicateArr.extend(wordsArr)))

Это даст вам массив только с уникальными записями.