开发者社区> 问答> 正文

大数据

学习大数据运维需要具备哪些条件

展开
收起
许四爷 2017-08-27 10:27:33 2227 0
3 条回答
写回答
取消 提交回答
  • 精于基础,广于工具,熟于业务。

    java,linux,sql

    2019-09-11 15:31:05
    赞同 展开评论 打赏
  • 域名投资、域名选择、域名交易、域名行情等@我

    补充回答
    这里有具体课程https://edu.aliyun.com/course/explore/bigdata
    还有其它地方的http://www.ibeifeng.com/job_quanzhai.html?hmsr=com-bdss&hmmd=cpc&hmpl=p325-operation&hmcu=mk004-operation.bigdata&hmkw=66661340160_%E5%A4%A7%E6%95%B0%E6%8D%AE%E8%BF%90%E7%BB%B4%E5%AD%A6%E4%B9%A0&hmci=17511342016&matchtype=2&adposition=cl1&pagenum=1#liuliang=0
    建议先学习基础的,加油
    欢迎尊敬的题主来到阿里云云栖社区,希望我私人的回答能对你有帮助,你可以继续留言或者到论坛参与更多的互动。

    2019-07-17 21:32:11
    赞同 展开评论 打赏
  • 阿里云论坛版主,QQ 1978638808

    下面是StuQ 发布的大数据工程师技能图谱(仅供参考)

    大数据通用处理平台
    Spark
    Flink
    Hadoop
    分布式存储

    HDFS

    资源调度

    Yarn

    Mesos

    机器学习工具

    Mahout

    Spark Mlib
    TensorFlow (Google 系)
    Amazon Machine Learning
    DMTK (微软分布式机器学习工具)
    数据分析/数据仓库(SQL类)

    Pig
    Hive
    kylin
    Spark SQL,
    Spark DataFrame
    Impala
    Phoenix
    ELK
    8.1 ElasticSearch

    8.2Logstash

    8.3Kibana

    消息队列

    Kafka(纯日志类,大吞吐量)
    RocketMQ
    ZeroMQ
    ActiveMQ
    RabbitMQ
    流式计算

    Storm/JStorm
    Spark Streaming
    Flink
    日志收集

    Scribe

    Flume

    编程语言

    Java
    Python
    R
    Ruby
    Scala
    数据分析挖掘

    MATLAB

    SPSS

    SAS

    数据可视化

    R
    D3.js
    ECharts
    Excle
    Python
    机器学习
    机器学习基础

    聚类
    时间序列
    推荐系统
    回归分析
    文本挖掘
    决策树
    支持向量机
    贝叶斯分类
    神经网络
    机器学习工具

    Mahout
    Spark Mlib
    TensorFlow (Google 系)
    Amazon Machine Learning
    DMTK (微软分布式机器学习工具)
    算法
    一致性

    paxos
    raft
    gossip
    数据结构

    栈,队列,链表
    散列表
    二叉树,红黑树,B树

    常用算法
    1.排序

    插入排序

    桶排序

    堆排序

    2.快速排序

    3,最大子数组

    4.最长公共子序列

    5.最小生成树

    最短路径

    6.矩阵的存储和运算

    云计算
    云服务

    SaaS
    PaaS
    IaaS
    Openstack
    Docker
    End.

    掌握这些都差不多了。

    2019-07-17 21:32:11
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大数据在新制造领域的应用 立即下载
点融网金融科技的大数据解决方案 立即下载
大数据在旅游业中的应用初探 立即下载