У меня есть фрейм данных Pyspark, который выглядит следующим образом
>>> df1.show(1,False)
+---------------------------+
|col1 |
+---------------------------+
|[this, is, a, sample, text]| => Not a fixed array elements
+---------------------------+
И таблица поиска / df, подобная этой
>>> lookup.show()
+------+
|lookup|
+------+
| this|
| is|
| a|
|sample|
+------+
Для каждой строки, каждого элемента массива df1Мне нужно поискать в lookup фрейме данных и вернуть true или false [T,T,T,T,F]
Как я могу просмотреть df1?