2013年上海QCon全球软件开发者大会见闻

简介: 笔者有幸参加了上海的qcon,笔者演讲的主题是《Hadoop2.0应用 – 基于Yarn的淘宝海量数据服务平台》。目前yarn是hadoop的升级版本,yarn比hadoop有着天然的优势,最大的优势就是yarn支持多种计算框架在一个集群内运行,这极大的从存储和计算层面节约了成本。

引言

这三天来,笔者有幸参加了上海的qcon,笔者演讲的主题是《Hadoop2.0应用 – 基于Yarn的淘宝海量数据服务平台》,ppt下载地址。目前yarn是hadoop的升级版本,yarn比hadoop有着天然的优势,最大的优势就是yarn支持多种计算框架在一个集群内运行,这极大的从存储和计算层面节约了成本。

过程

由于笔者是从事海量数据计算的,所以Qcon上所关心的演讲并不多,笔者个人感觉这次有一些特点:

这次qcon涉及的方面十分丰富,且有些方面还有一个更细致的主题,如:javaScript、PHP、java innovation等。对于不是十分专的同学可以听很多东西的。
此次主流的大公司出来的人相对不多,由于如淘宝、百度、腾讯等大公司面对的问题并不是大部分小公司遇到的问题,所以听听中小公司他们的发展也很有借鉴意义。
可以听听鬼脚七等IT的大牛他们的人生路,他们对于后备的建议。
对笔者感触比较深的是:

  • 目前很多的小的创业公司是基于数据的创业,特别是数据的挖掘,做出与BAT等有差异的点,如:百分点
  • 很多小公司在网站架构及技术走的路都是淘宝支付宝以前走的路。

在会场跟微信、微博等公司的同事聊了一些,无线目前确实是一个趋势,笔者去上海啥都离不开手机了。

还基本达成一些共识是:

  • 软件 基本 从大数据,数据挖掘,让社会更加智能。当然需要其它更多的技术,如物联网、web等来提供数据,最终要反馈到 三大产业中去。
  • 硬件 基本 从可穿戴的设备,笔者看到有人已经穿戴设备看步行数了,360的儿童卫士就是一个很好的 例子。
    对笔者个人有点建议是:
  • 多关注一些大数据的业务,笔者太关注基础平台了。
  • 多写点文字,发布到公网。
  • 提高英语口语,呵呵
目录
相关文章
|
7月前
|
人工智能 机器人 开发者
上海举办全球开发者先锋大会GDC
全球开发者先锋大会在上海举行,聚焦大模型与AI创新,展示24款已备案大模型和人形机器人,推动AI产业发展。业界领袖如史蒂夫·霍夫曼强调AI成功在于创造客户价值,Zack Kass预测2030年将迎AGI时代,沈向洋和徐立讨论大模型挑战与潜力,乔宇提出超越OpenAI的策略。展会呈现AI在各领域的广泛影响,预示技术将深度融入生活。
41 1
上海举办全球开发者先锋大会GDC
|
人工智能 边缘计算 物联网
云栖深圳峰会开幕 阿里云高调宣布全面进军物联网领域
3月28日,阿里巴巴集团资深副总裁、阿里云总裁胡晓明在2018云栖大会•深圳峰会上宣布:阿里巴巴将全面进军物联网领域,IoT是阿里巴巴集团继电商、金融、物流、云计算后新的主赛道;阿里云将自己定位于物联网基础设施的搭建者,在未来5年内连接100亿台设备。
5912 0
|
人工智能 安全 物联网
【云周刊】第164期:云栖深圳峰会开幕 阿里云高调宣布全面进军物联网领域
云栖深圳峰会开幕 阿里云高调宣布全面进军物联网领域 ,深入解读:获Forrester大数据能力高评价的阿里云DataWorks思路与能力,架构师如何应对复杂业务场景?领域建模的实战案例解析 ...更多精彩内容,尽在云周刊!
7267 0
【云周刊】第164期:云栖深圳峰会开幕 阿里云高调宣布全面进军物联网领域