sql – SPARK：失败：“union”预期但是#39;(‘找到了

我有一个名为df的数据框,名为employee_id.我在做：

df.registerTempTable("d_f")
val query = """SELECT *,ROW_NUMBER() OVER (ORDER BY employee_id) row_number FROM d_f"""
val result = Spark.getSqlContext().sql(query)

可是获得以下题目.有辅佐吗？

[1.29] failure: ``union'' expected but `(' found
SELECT *,ROW_NUMBER() OVER (ORDER BY employee_id) row_number FROM d_f
                            ^
java.lang.RuntimeException: [1.29] failure: ``union'' expected but `(' found
SELECT *,ROW_NUMBER() OVER (ORDER BY employee_id) row_number FROM d_f

办理要领

Spark 2.0引入了窗口函数的本机实现(SPARK-8641),因此不再必要HiveContext.然而,与窗口函数无关的相同错误如故可归因于SQL理会器之间的差别.

火花< = 1.6 Window 1.4.0中引入了窗口函数,必要HiveContext才气事变. SQLContext在这里不起浸染.

确保行使Spark> = 1.4.0并建设HiveContext：

import org.apache.spark.sql.hive.HiveContext
val sqlContext = new HiveContext(sc)

（编辑：湖南网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!