spark streaming 和 kafka ,打成jar包后((相关第三方依赖也在里面)),放到集群上总是报StringDecoder 找不到class,但我确定是存在的,就算换成另一种--jars提交了相关kafka的依赖包,spark-submit执行后不是TopicMetadataRequest类找不到就是StringDecoder找不到,kafka是0.8.2.1,spark'是1.6.0-cdh5.8.0的,大家遇到过这种问题吗-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

spark streaming 和 kafka ,打成jar包后((相关第三方依赖也在里面)),放到集群上总是报StringDecoder 找不到class,但我确定是存在的,就算换成另一种--jars提交了相关kafka的依赖包,spark-submit执行后不是TopicMetadataRequest类找不到就是StringDecoder找不到,kafka是0.8.2.1,spark'是1.6.0-cdh5.8.0的,大家遇到过这种问题吗

2019-01-30 15:34:40 4166 2

spark streaming 和 kafka ,打成jar包后((相关第三方依赖也在里面)),放到集群上总是报StringDecoder 找不到class,但我确定是存在的,就算换成另一种--jars提交了相关kafka的依赖包,spark-submit执行后不是TopicMetadataRequest类找不到就是StringDecoder找不到,kafka是0.8.2.1,spark'是1.6.0-cdh5.8.0的,大家遇到过这种问题吗

取消 提交回答
全部回答(2)
  • 游客frilnf57c73ia
    2019-07-17 23:27:21

    我的问题和你的差不多,import kafka.serializer.StringDecoder直接就是不能导入,serializer标红,然后用尽了各种办法就是不能导入这个包,楼主怎么看

    0 0
  • 1426694731350515
    2019-07-17 23:27:21

    路过

    0 0
添加回答
相关问答

1

回答

ptyhon gen_create_table_sql API方法在java 中有没有替换方法

2022-09-17 11:09:49 81浏览量 回答数 1

0

回答

请问Dataworks SQL里面的编码除了base64还提供了哪些呢?

2022-09-19 15:55:08 128浏览量 回答数 0

1

回答

如何根据多元索引查询最后一条数据,达到 sql order by desc limit 1的效果呢?

2022-06-28 11:18:44 202浏览量 回答数 1

1

回答

kafka Streams DSL API提供了几种数据转换操作算子?

2021-12-10 17:38:07 374浏览量 回答数 1

1

回答

kafka数据写入kafka flink1.10-sql解析复杂json中字段string,数据丢失

2021-12-05 06:06:17 513浏览量 回答数 1

1

回答

str.rfind(str, beg=0 end=len(string))参数str代表什么意思?

2021-11-04 19:47:38 111浏览量 回答数 1

1

回答

str.rfind(str, beg=0 end=len(string))参数end代表什么意思?

2021-11-04 19:49:18 87浏览量 回答数 1

1

回答

str.rfind(str, beg=0 end=len(string))参数beg代表什么意思?

2021-11-04 19:48:24 87浏览量 回答数 1

0

回答

CDN url鉴权B模式返回的md5与demo的也不一致

2018-08-24 14:59:15 619浏览量 回答数 0

1

回答

OSS MEDIA C SDK 在什么情况下用oss_media_hls_stream_close

2018-02-17 18:47:38 674浏览量 回答数 1
+关注
社区小助手
社区小助手是spark中国社区的管理员,我会定期更新直播回顾等资料和文章干货,还整合了大家在钉群提出的有关spark的问题及回答。
12
文章
824
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载