Как убрать кавычки с начала и конца строки Scala - PullRequest
Новая
       20

Как убрать кавычки с начала и конца строки Scala

2 голосов
/ 19 мая 2019

У меня есть датафрейм, где некоторые строки содержат "" в начале и конце строки.

Например: 

+-------------------------------+
|data                           |
+-------------------------------+
|"john belushi"                 |
|"john mnunjnj"                 |
|"nmnj tyhng"                   |
|"John b-e_lushi"               |
|"john belushi's book"          |

Ожидаемый результат: 

+-------------------------------+
|data                           |
+-------------------------------+
|john belushi                   |
|john mnunjnj                   |
|nmnj tyhng                     |
|John b-e_lushi                 |
|john belushi's book            |

Я пытаюсь удалить только "двойные кавычки из строки. Может кто-нибудь сказать мне, как я могуудалить это в Scala?

Python предоставляет слова ltrim и rtrim. Есть ли что-нибудь эквивалентное этому в Scala?

Ответы [ 3 ]

4 голосов
/ 19 мая 2019

Используйте expr, подстроку и length и получите подстроку из 2 и length() - 2

val df_d = List("\"john belushi\"", "\"John b-e_lushi\"", "\"john belushi's book\"")
.toDF("data")

Input:

+---------------------+
|data                 |
+---------------------+
|"john belushi"       |
|"John b-e_lushi"     |
|"john belushi's book"|
+---------------------+

Using expr, substring and length functions:

import org.apache.spark.sql.functions.expr

df_d.withColumn("data", expr("substring(data, 2, length(data) - 2)"))
    .show(false)

Output:

+-------------------+
|data               |
+-------------------+
|john belushi       |
|John b-e_lushi     |
|john belushi's book|
+-------------------+
2 голосов
/ 19 мая 2019

Попробуйте 

scala> val dataFrame = List("\"john belushi\"","\"john mnunjnj\"" , "\"nmnj tyhng\"" ,"\"John b-e_lushi\"", "\"john belushi's book\"").toDF("data")

scala> dataFrame.map { row => row.mkString.stripPrefix("\"").stripSuffix("\"")}.show

+-------------------+
|              value|
+-------------------+
|       john belushi|
|       john mnunjnj|
|         nmnj tyhng|
|     John b-e_lushi|
|john belushi's book|
+-------------------+
2 голосов
/ 19 мая 2019

Как убрать кавычки с начала и конца строки Scala?

myString.substring(1, myString.length()-1) удалит двойные кавычки. 

  import spark.implicits._
val list = List("\"hi\"", "\"I am learning scala\"", "\"pls\"", "\"help\"").toDF()
list.show(false)
val finaldf = list.map {
  row => {
    val stringdoublequotestoberemoved = row.getAs[String]("value")

    stringdoublequotestoberemoved.substring(1, stringdoublequotestoberemoved.length() - 1)
  }
}
finaldf.show(false)

Результат: 

+--------------------+
|               value|
+--------------------+
|                "hi"|
|"I am learning sc...|
|               "pls"|
|              "help"|
+--------------------+

+-------------------+
|              value|
+-------------------+
|                 hi|
|I am learning scala|
|                pls|
|               help|
+-------------------+
...