引言
这三天来,笔者有幸参加了上海的qcon,笔者演讲的主题是《Hadoop2.0应用 – 基于Yarn的淘宝海量数据服务平台》,ppt下载地址。目前yarn是hadoop的升级版本,yarn比hadoop有着天然的优势,最大的优势就是yarn支持多种计算框架在一个集群内运行,这极大的从存储和计算层面节约了成本。
过程
由于笔者是从事海量数据计算的,所以Qcon上所关心的演讲并不多,笔者个人感觉这次有一些特点:
这次qcon涉及的方面十分丰富,且有些方面还有一个更细致的主题,如:javaScript、PHP、java innovation等。对于不是十分专的同学可以听很多东西的。
此次主流的大公司出来的人相对不多,由于如淘宝、百度、腾讯等大公司面对的问题并不是大部分小公司遇到的问题,所以听听中小公司他们的发展也很有借鉴意义。
可以听听鬼脚七等IT的大牛他们的人生路,他们对于后备的建议。
对笔者感触比较深的是:
- 目前很多的小的创业公司是基于数据的创业,特别是数据的挖掘,做出与BAT等有差异的点,如:百分点
- 很多小公司在网站架构及技术走的路都是淘宝支付宝以前走的路。
在会场跟微信、微博等公司的同事聊了一些,无线目前确实是一个趋势,笔者去上海啥都离不开手机了。
还基本达成一些共识是:
- 软件 基本 从大数据,数据挖掘,让社会更加智能。当然需要其它更多的技术,如物联网、web等来提供数据,最终要反馈到 三大产业中去。
- 硬件 基本 从可穿戴的设备,笔者看到有人已经穿戴设备看步行数了,360的儿童卫士就是一个很好的 例子。
对笔者个人有点建议是: - 多关注一些大数据的业务,笔者太关注基础平台了。
- 多写点文字,发布到公网。
- 提高英语口语,呵呵