用Shell写一个日志收集脚本
有时候想了想Flume框架的原理，其实也是对文件或者文件夹进行监控，那我自己也可以写一个脚本来简单的实现监控我们想监控的文件，然后对其进行上传。
1.
hadoop+spark集群搭建
1.选取三台服务器（CentOS系统64位）
114.55.246.88 主节点
114.55.246.77 从节点
114.55.246.93 从节点
之后的操作如果是用普通用户操作的话也必须知道root用户的密码，因为有些操作是得用root用户操作。
大数据未来发展行情之是否值得转职学习
前言
有很多人想转行做大数据，但是很少成功，有很多学校陆续开大数据相关专业，大数据为什么这么火，大数据的未来又将何去何从呢？以至于现在普通的大数据开发师的工资能达到2w+的水平，请持续关注小编，每天不定时发布大数据最新消息，学习方法，就业形式
大数据背景
据职业社交平台LinkedIn发布的《2017年中国互联网最热职位人才报告》显示，研发工程师、产品经理、人力资源、市场营销、运营和数据分析是当下中国互联网行业需求最旺盛的六类人才职位。