pipelinedRDD?报错
为什么类型为"PipelinedRDD"的对象不能做collect、count、take操作，而正常的RDD就可以，二者有什么区别？只要对象是PipelinedRDD，就会报错：Exception in thread "stdin writer for R" java.lang.ClassCastException: java.lang.String cannot be cast to [B
at edu.berkeley.cs.amplab.sparkr.RRDD$$anon$4$$anonfun$run$3.apply(RRDD.scala:300)
at edu.berkeley.cs.amplab.sparkr.RRDD$$anon$4$$anonfun$run$3.apply(RRDD.scala:298)
at scala.collection.Iterator$class.foreach(Iterator.scala:727)
at scala.collection.AbstractIterator.foreach(Iterator.scala:1157)
at edu.berkeley.cs.amplab.sparkr.RRDD$$anon$4.run(RRDD.scala:298)
写回答
-
https://developer.aliyun.com/profile/5yerqm5bn5yqg?spm=a2c6h.12873639.0.0.6eae304abcjaIB把map方法或者reduce方法定义成了类方法，就会报这个错。改成内部方法或者静态方法
2020-06-14 19:58:47赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
