Добавить коллекцию Scala (takeSample) в качестве столбца данных - PullRequest
0 голосов
/ 02 октября 2018

Я хотел бы взять выборочные значения для каждого столбца в фрейме данных ordi и добавить эти выборочные значения в качестве столбца для другого элемента данных DataFrame (Metrics) OrderFare.Пожалуйста, дайте мне знать, как добиться этого.Мой выходной dataFrame (Metrics) должен иметь вид

Столбец NOTNulls в DATaframe указывает на отсутствие пустых значений в полях

+------------------------+--------++-----------+
|Fields                  |NOTNulls|SampleValues
+------------------------+--------+-------------+
|order_item_id           |0       |(1234,53665,766,757,... Soon 10 Sample Values)
|order_item_order_id     |0       |(78,794,52,24552,4455..Soon 10 Sample Values)
|order_item_product_id   |0       |(98,52,5151,515266,Soon 10 Sample Values)
|order_item_quantity     |0       |(52.52 , 98.566..Soon 10 Sample Values)
|order_item_subtotal     |0       |(95959.,45151,......Soon 10 Values)
|order_item_product_price|0       |(98,52,5151,515266,Soon 10 Sample Values)
+------------------------+--------+

OrderItems DF

Pickвсе ненулевые значения из каждого столбца в фрейме данных

Df со столбцами NotNull из каждого столбца элементов заказа dataFrame

Метод преобразования коллекции в строку SQLи добавить в столбец

Метод добавления в столбец

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...