科多大数据培训
全国24小时免费热线
15328019568
联系QQ
3048661160
开班时间
当前位置:首页 > 学习资讯 > 大数据内容 >

科多大数据详解大数据工程师技能图谱

下面是StuQ 发布的大数据工程师技能图谱,科多大数据整理的,仅供参考! 大数据通用处理平台 1.Spark 2.Flink 3.Hadoop 分布式存储 HDFS 资源调度 Yarn Mesos 机器学习工具 Mahout 1.Spark Mlib 2.Te

   下面是StuQ 发布的大数据工程师技能图谱,科多大数据整理的,仅供参考!

    大数据通用处理平台
    
    1.Spark
    
    2.Flink
    
    3.Hadoop
    
    分布式存储
    
    HDFS
    
    资源调度
    
    Yarn
    
    Mesos
    
    机器学习工具
    
    Mahout
    
    1.Spark Mlib
    
    2.TensorFlow (Google 系)
    
    3.Amazon Machine Learning
    
    4.DMTK (微软分布式机器学习工具)
    
    数据分析/数据仓库(SQL类)
    
    1.Pig
    
    2.Hive
    
    3.kylin
    
    4.Spark SQL,
    
    5.Spark DataFrame
    
    6.Impala
    
    7.Phoenix
    
    8.ELK
    
    8.1 ElasticSearch
    
    8.2Logstash
    
    8.3Kibana
    
    消息队列
    
    1.Kafka(纯日志类,大吞吐量)
    
    2.RocketMQ
    
    3.ZeroMQ
    
    4.ActiveMQ
    
    5.RabbitMQ
    
    流式计算
    
    1.Storm/JStorm
    
    2.Spark Streaming
    
    3.Flink
    
    日志收集
    
    Scribe
    
    Flume
    
    编程语言
    
    1.Java
    
    2.Python
    
    3.R
    
    4.Ruby
    
    5.Scala
    
    数据分析挖掘
    
    MATLAB
    
    SPSS
    
    SAS
    
    数据可视化
    
    R
    
    D3.js
    
    ECharts
    
    Excle
    
    Python
    
    机器学习
    
    机器学习基础
    
    聚类
    
    时间序列
    
    推荐系统
    
    回归分析
    
    文本挖掘
    
    决策树
    
    支持向量机
    
    贝叶斯分类
    
    神经网络
    
    机器学习工具
    
    Mahout
    
    Spark Mlib
    
    TensorFlow (Google 系)
    
    Amazon Machine Learning
    
    DMTK (微软分布式机器学习工具)
    
    算法
    
    一致性
    
    paxos
    
    raft
    
    gossip
    
    数据结构
    
    栈,队列,链表
    
    散列表
    
    二叉树,红黑树,B树
    
    图
    
    常用算法
    
    1.排序
    
    插入排序
    
    桶排序
    
    堆排序
    
    2.快速排序
    
    3,最大子数组
    
    4.最长公共子序列
    
    5.最小生成树
    
    最短路径
    
    6.矩阵的存储和运算
    
    云计算
    
    云服务
    
    SaaS
    
    PaaS
    
    IaaS
    
    Openstack
    
    Docker

  科多大数据,随时为您带来大数据技术资讯。
标签: 数据工程师
最新资讯更多+
内容推荐更多+
在线课堂
猜你喜欢