大数据-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

大数据

许四爷 2017-08-27 10:27:33 1238

学习大数据运维需要具备哪些条件

运维 大数据
分享到
取消 提交回答
全部回答(3)
  • 不语奈何
    2019-09-11 15:31:05

    java,linux,sql

    0 0
  • 大财主
    2019-07-17 21:32:11

    补充回答
    这里有具体课程https://edu.aliyun.com/course/explore/bigdata
    还有其它地方的http://www.ibeifeng.com/job_quanzhai.html?hmsr=com-bdss&hmmd=cpc&hmpl=p325-operation&hmcu=mk004-operation.bigdata&hmkw=66661340160_%E5%A4%A7%E6%95%B0%E6%8D%AE%E8%BF%90%E7%BB%B4%E5%AD%A6%E4%B9%A0&hmci=17511342016&matchtype=2&adposition=cl1&pagenum=1#liuliang=0
    建议先学习基础的,加油
    欢迎尊敬的题主来到阿里云云栖社区,希望我私人的回答能对你有帮助,你可以继续留言或者到论坛参与更多的互动。

    0 0
  • 51干警网
    2019-07-17 21:32:11

    下面是StuQ 发布的大数据工程师技能图谱(仅供参考)

    大数据通用处理平台
    Spark
    Flink
    Hadoop
    分布式存储

    HDFS

    资源调度

    Yarn

    Mesos

    机器学习工具

    Mahout

    Spark Mlib
    TensorFlow (Google 系)
    Amazon Machine Learning
    DMTK (微软分布式机器学习工具)
    数据分析/数据仓库(SQL类)

    Pig
    Hive
    kylin
    Spark SQL,
    Spark DataFrame
    Impala
    Phoenix
    ELK
    8.1 ElasticSearch

    8.2Logstash

    8.3Kibana

    消息队列

    Kafka(纯日志类,大吞吐量)
    RocketMQ
    ZeroMQ
    ActiveMQ
    RabbitMQ
    流式计算

    Storm/JStorm
    Spark Streaming
    Flink
    日志收集

    Scribe

    Flume

    编程语言

    Java
    Python
    R
    Ruby
    Scala
    数据分析挖掘

    MATLAB

    SPSS

    SAS

    数据可视化

    R
    D3.js
    ECharts
    Excle
    Python
    机器学习
    机器学习基础

    聚类
    时间序列
    推荐系统
    回归分析
    文本挖掘
    决策树
    支持向量机
    贝叶斯分类
    神经网络
    机器学习工具

    Mahout
    Spark Mlib
    TensorFlow (Google 系)
    Amazon Machine Learning
    DMTK (微软分布式机器学习工具)
    算法
    一致性

    paxos
    raft
    gossip
    数据结构

    栈,队列,链表
    散列表
    二叉树,红黑树,B树

    常用算法
    1.排序

    插入排序

    桶排序

    堆排序

    2.快速排序

    3,最大子数组

    4.最长公共子序列

    5.最小生成树

    最短路径

    6.矩阵的存储和运算

    云计算
    云服务

    SaaS
    PaaS
    IaaS
    Openstack
    Docker
    End.

    掌握这些都差不多了。

    0 0
添加回答
大数据
使用钉钉扫一扫加入圈子
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题