余额不足个人页面-阿里云开发者社区

个人头像照片 余额不足 TA的个人档案
0
3

个人介绍

暂无个人介绍

擅长的技术

获得更多能力
通用技术能力:

暂时未有相关通用技术能力~

云产品技术能力:

暂时未有相关云产品技术能力~

阿里云技能认证

详细说明
  • 高分内容
  • 最新动态
  • 文章
  • 问答
正在加载, 请稍后...
暂无更多信息
正在加载, 请稍后...
暂无更多信息
正在加载, 请稍后...
暂无更多信息
  • 回答了问题 2019-07-17

    如何建立一个实时数据仓库系统?

    踩0 评论0
  • 回答了问题 2019-07-17

    spark读取parquet 找不到 org/apache/hadoop/fs/FSDataInputStream

    检查下你的项目中是不是引入了版本不兼容的包,或者冲突。

    踩0 评论0
  • 回答了问题 2019-07-17

    针对Integer >MAX_VALUE 有什么好建议吗?

    描述不太清楚,看情况是 Spark RDD 的分区限制,不能超过 2GB。建议做如下尝试:

    • 1、如果是 Spark core 的应用,则不要对 RDD 做 persist
    • 2、如果是 Spark sql 的应用,则增大 spark.sql.shuffle.partitions ,默认值是 200

    希望能有效解决这个问题。

    踩0 评论0
正在加载, 请稍后...
滑动查看更多