我是计算机专业的,现在工作是数据的处理ETL,在此之前没毕业时候培训过java,oracle。
目前是sql写的比较顺手,对oracle和db2熟悉一点,还有就是对于仓库优化有一些好的理解。
自己现在再看hadoop权威指南,还有一本hive的书准备后面看,
现在发现了个问题,书里面会有一些java,或者是python,自己的java忘记的差不多了,python也仅仅是刚入门,
目前的情况就是会建模,分析数据,和写sql。
对于以后的方向很迷茫,请有经验的前辈来指点迷津
语言只是工具,每个建议花一周左右的时间,短期快速高效的了解,知道每个语言大概是语法、特性与使用情景,然后就是持续不断的大量练习了
对于少量数据:30w行以内的,excel就可以用
中小数据:100w行左右,用SQLite 就可以
中等或者中大规模数据10T内(5亿条左右):mysql oracle
大规模数PB量级: hadoop
另外还可以用采样等方式减少数据量,然后用R或者python里面的包来处理。
数据挖掘很少用到java,一般是最后模型参数跑出来了以后,用java上到应用层。
建模和模型评估还是用python和R比较多。SAS和SPSS也可以用,当然比较贵就是了
java,python 豆可以 , 有的公司需要java , 有的是python , python入门简单 , 可以先学习下