windows端部署python开发环境
应用场景
在本地windows端，想开发python代码，或者运行python代码，需要在windows端安装python开发环境，来测试python代码，学习python。
Spark On HBase Idea远程调试
本文介绍如何在本地IDEA远程调试Spark On HBase。
前提条件：
1、已经安装了Intellij IDEA，Git、Maven。2、HBase集群开通了外网地址。3、HBase集群为IDEA运行的机器开通了白名单。
Spark Codegen浅析
Codegen是Spark Runtime优化性能的关键技术，核心在于动态生成java代码、即时compile和加载，把解释执行转化为编译执行。Spark Codegen分为Expression级别和WholeStage级别，分别针对表达式计算和全Stage计算做代码生成，都取得了数量级的性能提升。本文浅析Spark Codegen技术原理。
MaxCompute计费方式有几种？
MaxCompute对存储、计算、下载操作进行计量计费。本文向您介绍如何选择MaxCompute按量计费和包年包月两种购买方式，以及如何进行初步的成本估算。
Apache Carbondata接入Kafka实时流数据
1.导入carbondata依赖的jar包
将apache-carbondata-1.5.3-bin-spark2.3.2-hadoop2.7.2.jar导入$SPARKHOME/jars;或将apache-carbondata-1.
Spark 源码分析之ShuffleMapTask内存数据Spill和合并
- Spark ShuffleMapTask 内存中的数据Spill到临时文件
- 临时文件中的数据是如何定入的，如何按partition升序排序，再按Key升序排序写入(key,value)数据
- 每个临时文件，都存入对应的每个分区有多少个(key,value)对，有多少次流提交数组，数组中...