当前位置:  开发笔记 > 编程语言 > 正文

Spark AnalysisException无法解析给定输入列的"列名"

如何解决《SparkAnalysisException无法解析给定输入列的"列名"》经验,为你挑选了0个好方法。

我有一个包含列x,y的DataFrame

x     y
1     false
1     false
1     true
2     true
2     false
3     null
3     true

我尝试使用以下代码创建列联表,并期望以下结果:

myDataFrame.stat.crosstab("x", "y")

x_y  true    false     null
1    1       2         0
2    1       1         0
3    1       0         1

但是,我得到以下异常: AnalysisException cannot resolve 'true' given input columns [x, y]

列'true'(以及'false'和'null')是stat.crosstab在运行时自动创建的.如果不先对数据进行完全传递,静态分析就无法检测到新的列名.

我正在使用Spark 1.6.1.5.这是一个错误吗?我可以以某种方式禁用分析仪吗?

推荐阅读
雨天是最美
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有