开源大数据周刊-第36期

• [阿里云E-MapReduce动态]

  • 1.6.0版本上线，增加交互式工作台、支持独享机型
  • 国际站上线，海外用户可以购买E-MapReduce服务

资讯

• 看行业观察家和技术专家对大数据在2017年的发展预测
  业界权威市场研究和咨询机构Ovum公司日前估计，大数据市场规模将从2016年的17亿美元增长到2020年的94亿美元。随着市场的增长，企业的挑战正在转变，对人们的技能需求正在改变，而大数据服务供应商的景观也在风云变幻。2017年将是大数据专业人士更为忙碌的时刻。文章介绍了来自相关行业观察家和技术专家对大数据在2017年的发展预测
• 上海大数据中心正式成立，将专注于大数据软件开源技术研究
  由上海交通大学联合复旦大学、闵行区政府、上海大数据联盟、华为、星环科技等在内的众多高校、政府以及企业共同发起成立的，旨在实现上海市政务大数据的开放共享，并进一步促进政校企联合创新，推动上海大数据产业的发展。此外，该中心还将致力于在开源社区提供大数据开源软件，并孵化一批有影响力的软件项目
• 这家税务大数据公司是如何进了“比哈佛还难进”的微软加速器，还拿了千万级投资
  "税务大数据"是在最近一两年才被提出来,罗格数据是首批提出提供税务数据价值挖掘能力的大数据公司，为政府（税务机关）、金融机构、专业咨询机构等对税务风险敏感的机构提供数据挖掘能力服务，帮助其实现在企业画像、风险管控、行业咨询等方面的需求

技术

• 首次揭秘|为6.4亿人次出行提供无线网络的技术架构
  掌慧纵盈基于阿里云产品，率先构建了业界领先的大数据平台。文章详细介绍了数据架构、技术选型、阿里云产品的选择、以及对E-MapReduce等阿里云产品的使用心得
• 流处理技术谬见大消除
  文章选出了6个对流计算的谬见，纠正人们对流处理的错误认识

• ELK在Spark集群的应用
  ELK已经应用到了各种场合，包括Hadoop集群的监控，Spark集群的监控等，文章展示了ELK在Spark集群监控中的实战总结
• 每秒上百万次的跨数据中心写操作？Uber是如何使用Mesos和Cassandra来处理的
  司机和乘客App每30秒就要发出一次定位数据，而你就要把这些数据全保存下来，你会怎么做?Uber在Mesos上面运行了Cassandra，基于这样的底层构建了自己的系统

欢迎加入阿里云开源大数据交流钉钉群