Warning: file_get_contents(/data/phpspider/zhask/data//catemap/5/sql/76.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Spark SQL-适用于';包含';作用_Sql_Scala_Apache Spark_Apache Spark Sql - Fatal编程技术网

Spark SQL-适用于';包含';作用

Spark SQL-适用于';包含';作用,sql,scala,apache-spark,apache-spark-sql,Sql,Scala,Apache Spark,Apache Spark Sql,我有一个场景,其中我需要在另一个dataframe的另一列中的较大字符串中找到dataframe列中字符串的存在。 我正在使用Spark 2.4.4和Scala 2.11.12org.apache.Spark.sql.Column具有包含函数,您可以使用该函数在包含字符串的两列之间执行字符串样式的包含操作 val df = //a dataframe buiktas a result of join and has 2 columns - c1, c2 df.filter(col("c1").

我有一个场景,其中我需要在另一个dataframe的另一列中的较大字符串中找到dataframe列中字符串的存在。
我正在使用Spark 2.4.4Scala 2.11.12org.apache.Spark.sql.Column具有包含函数,您可以使用该函数在包含字符串的两列之间执行字符串样式的包含操作

val df = //a dataframe buiktas a result of join and has 2 columns - c1, c2

df.filter(col("c1").contains(col("c2"))).show()


您能展示输入数据帧和预期输出的示例吗?