Ansys和Matlab培训课程班

Hadoop与Spark大数据架构专题培训课程

5 (9653人评价)
  • 精品
  • 笔记:(65387)

  • 学员:(217537)

  • 浏览:(277013)

  • 加入课程

课程介绍

 

其他精品课程班:
  • Inventor钣金设计培训课程
  • Deepfake培训课程
  • Stata金融面板培训课程
  • 以案释法--《民法典》物业现场的实操运用及风险规避培训
  • 新形势下-物业人工作压力及情绪管理培训
  • 提升满意度及运营水平--业主服务触点管理培训课程
  • 写字楼物业综合运营管理培训课程
  • 文献处理与搜索引擎架构实践培训
  • AI人工智能算法培训
  • VxWorks设备驱动培训
  • 量化算法工程师培训
  • 大模型框架搭建与模型分析培训
  • 自然语言处理(NLP)算法工程师培训
  • OpenCASCADE内核基础架构培训
  • 液压与气动技术培训课程
  • 塑料加工技术培训
  • Aspen Plus技术经济分析与工艺优化培训
  • 芯片集成电路产品设计之可靠性培训
  • VxWorks系统管理培训
  • FPGA接口设计与实现培训
  • ABU Kick Test仿真培训
  • AI LLM 大语言模型算法工程师培训
  • 大型语言模型Large Language Model (AI LLM)培训
  • UG产品设计培训
  • UG模具设计培训
  •  
     

    曙海教学优势

      本课程面向企事业项目实际需要,秉承二十一年积累的教学品质,Hadoop与Spark大数据架构专题培训课程以项目实现为导向,老师将会与您分享设计的全流程以及工具的综合使用技巧、经验。线上/线下/上门皆可,Hadoop与Spark大数据架构专题培训课程专家,课程可定制,热线:4008699035。

      大批企业和曙海
    建立了良好的合作关系,20多年来,合作企事业单位以达30多万。曙海的课程培养了大批受企业欢迎的工程师。曙海的课程在业内有着响亮的知名度。

     

    精品课程班级列表

    •   培训对象

        本次Hadoop培训对象针对各类IT/软件企业和研发机构的软件架构师、软件设计师、程序员。对于怀有设计疑问和问题,需要梳理解答的团队和个人,效果最佳。

        学员基础

        了解Java语言、Linux系统;

        课程大纲

        大数据架构概述

        1.1大数据层级架构及各层软件设计要求,包括数据收集、存储、计算框、应用

        1.2 Hadoop生态系统概述以及版本演化,并给出版本选择建议。

        1.3 Spark生态系统概述及其特点,并与Hadoop对比

        数据收集系统Flume与Sqoop

        2.1使用flume和sqoop两个系统将外部流式数据(比如网站日志,用户行为数据等)、关系型数据库(比如MySQL、Oracle等)中的数据导入Hadoop中进行分析和挖掘

        大数据存储系统HDFS与HBase

        3.1 与HDFS1.0进行对比介绍2.0原理、特性与基本架构(快照、缓存、异构存储)。

        3.2 HBase原理,基本架构与案例分析

        3.3 HBase应用场景、原理和架构,典型应用案例(互联网、银行)

        集群资源管理与调度系统

        4.1 介绍YARN应用场景、基本架构与资源调度

        Zookeeper部署及典型应用

        5.1 介绍Zookeeper是什么,基本原理及在应用

        大数据计算平台

        介绍主流的三大类大数据计算框架,分别是批处理、交互式计算和流式计算框架,并选取当下主流的开源实现进行介绍。

        6.1 批处理计算框架

        6.1.1 MapReduce2.0基本原理与架构、程序编写(使用java、C++、php语言)

        6.1.2 数据分析系统Hive与Pig应用与比较,如何使用其中的海量数据

        6.1.3 Spark计算框架,背景及应用案例

        6.2 交互式计算框架,Impala和presto应用场景,基本架构和典型应用案例

        6.3 流式/实时计算框架,storm、SparkStreaming基本架构特点,及应用案例

        数据挖掘与机器学习库

        7.1 Mahout与MLlib两个主流的分布式数据挖掘与机器学习库的实现以及应用案例。




    • 联系曙海客服