课程 Big Data Hadoop and Spark Developer
iLEARN 提供的大数据 Hadoop 和 Spark 开发人员培训课程
Big Data Hadoop and Spark Developer 课程的可用性和价格
特色产品
在本展示中,您可以找到大数据 Hadoop 和 Spark 开发人员 方面的精选培训课程和考试。
如果您没有找到想要的课程或考试,请联系我们。
大数据 Hadoop 和 Spark 开发人员
世界正变得越来越数字化,大数据和数据分析的重要性在未来几年将继续增长。选择大数据和分析领域的职业可能正是你一直想要找到的,以满足你的职业期望。
大数据 Hadoop 培训课程将向您传授 Hadoop 框架的概念及其在集群环境中的形成,并为Cloudera 的 CCA175 大数据认证做好准备。
Big Data Hadoop 和 Spark 开发人员认证
没有考试,但您必须完成 85% 的课程、一个项目和一个模拟测试,且得分不低于 80%,才能获得证书。
大数据 Hadoop 和 Spark 开发人员课程
通过本大数据 Hadoop 课程,您将学习使用Hadoop 和 Spark 的大数据框架,包括HDFS、YARN 和MapReduce。课程还将涵盖Pig、Hive 和Impala,以处理和分析存储在HDFS中的大型数据集,并使用Sqoop和Flume进行数据摄取。
您将学习使用 Spark 进行实时数据处理,包括使用 Spark 进行函数式编程、实施 Spark 应用程序、了解 Spark 中的并行处理以及使用 Spark RDD 优化技术。您还将学习 Spark 中的各种交互式算法,并使用Spark SQL创建、转换和查询数据表。
最后,您需要使用CloudLab在银行、电信、社交媒体、保险和电子商务领域执行基于行业的真实项目。
下面您可以阅读课程表,了解大数据 Hadoop 和 Spark Developer 的相关信息。
Objectives
课程结束后,您将能够了解
- Hadoop 生态系统的不同组件,如 Hadoop 2.7、Yarn、MapReduce、Pig、Hive、Impala、HBase、Sqoop、Flume 和 Apache Spark
- Hadoop 分布式文件系统(HDFS)和 YARN 架构
- MapReduce 及其特点和吸收高级 MapReduce 概念
- 不同类型的文件格式、Avro 模式、与 Hive 一起使用 Avro 以及 Sqoop 和模式演化
- Flume、Flume 架构、源、Flume 汇、通道和 Flume 配置
- HBase 及其架构和数据存储,了解 HBase 与 RDBMS 的区别
- 弹性分布数据集(RDD)详解
- Spark 的常见用例和各种交互式算法
您还将能够
- 使用 Sqoop 和 Flume 摄取数据
- 在 Hive 和 Impala 中创建数据库和表格,了解 HBase,并使用 Hive 和 Impala 进行分区
- 获得有关 Pig 及其组件的工作知识
- 使用 Spark 进行函数式编程,并实现和构建 Spark 应用程序
- 深入了解 Spark 中的并行处理和 Spark RDD 优化技术
- 使用 Spark SQL 创建、转换和查询数据帧
Who it is aimed at
大数据职业机会不断增加,Hadoop 正迅速成为大数据架构中的必备技术。大数据培训适合 IT、数据管理和分析专业人士,包括
- 软件开发人员和架构师
- 分析专业人员
- 高级 IT 专业人员
- 测试和大型机专业人员
- 数据管理专业人员
- 商业智能专业人员
- 项目经理
- 有抱负的数据科学家
- 希望在大数据分析领域建功立业的毕业生
Contents
课程包括以下内容:
- 课程介绍
- 第 1 课- 大数据和 Hadoop 生态系统简介
- 第 2 课- HDFS 和 YARN
- 第 3 课- MapReduce 和 Sqoop
- 第 4 课- Hive 和 Impala 基础知识
- 第 5 课- 使用 Hive 和 Impala
- 第6课- 数据格式类型
- 第7课- 高级Hive概念和数据文件分区
- 第 8 课- Apache Flume 和 HBase
- 第9课- Pig
- 第10课:Apache Spark 基础知识
- 第11课- Spark中的RDDs
- 第12课- Spark应用程序的实现
- 第13课- Spark并行处理
- 第14课- Spark RDD 优化技术
- 第15课- Spark算法
- 第16课- Spark SQL
- 免费课程 - Apache Kafka
- 免费课程 - 核心 Java
Prerequisites
本课程没有先决条件。但是,掌握一些Core Java和SQL 知识是有益的。如果您需要补习 Core Java 技能,我们提供免费的自定进度在线课程"Java essentials for Hadoop"。
Duration
在线课程持续时间:
- 1 年 平台访问权