Spark企业级应用开发和调优
1.Spark企业级应用开发和调优
Spark项目编程优化历程记录，主要介绍了Spark企业级别的开发过程中面临的问题和调优方法。包含合理分配分片，避免计算中间结果（大数据量）的collect,合理使用map,优化广播变量等操作，降低网络和磁盘IO，提高计算效率。
2.核心技术优化方法对比
首先如下图（2.1），Spark应用开发在集群（伪分布式）中的记录,每一种不
如何在Kubernetes上玩转TensorFlow ？
前言
Tensorflow作为深度学习领域逐渐成熟的项目，以其支持多种开发语言，支持多种异构平台，提供强大的算法模型，被越来越多的开发者使用。但在使用的过程中，尤其是GPU集群的时候，我们或多或少将面临以下问题：
资源隔离。
npm打包前端项目太慢问题分析以及暂时解决方案
npm build 打包前端项目实际上是执行 node build/build.js，但是随着项目的依赖包越来越多，项目打包时间不断延长，为了改善这个问题，需要从node入手
暂时解决方案：扩大node运行程序的内存，经本人测试（项目和机器固定）
2G：308.
【番外】线性回归和逻辑回归的 MLE 视角
版权声明：License CC BY-NC-SA 4.0 https://blog.csdn.net/wizardforcel/article/details/83345186
线...
Hadoop history
*The genesis of Hadoop came from the Google File System paper[11] that was published in October 2003. This paper spawned another research paper from Google – MapReduce: Simplified Data Processin