会议详情 菜单
Cloudera Apache Hadoop 管理员培训(上海站)

Cloudera Apache Hadoop 管理员培训(上海站)

2017-03-23 08:00 至 2017-03-26 18:00

上海   None

cloudera   

报名截止

推荐会议:SECON 2024全球软件工程技术大会·上海

发票类型:增值税普通发票 增值税专用发票

-培训内容-

Cloudera Apache Hadoop 管理员培训

Cloudera Apache Hadoop 培训及认证帮助您进阶大数据知识及

技能

Cloudera 大学为期 4 天的 Hadoop 管理员培训将帮助学员综合理解并全面掌握通过 Cloudera Manager 对 Hadoop 机群的运维管理,包括:安装,配置、负载平衡及性能调优等。通过该培训,Hadoop 系统管理员将能准备好应对实际运维中遇到的挑战。


培训内容

通过讲师在课堂上的讲解,以及实操练习,学员将学习以下内容:

Cloudera Manager 管理机群的特性,譬如日志汇总、配置管理、报告、

报警及服务管理。

YARN、MapReduce、Spark 及 HDFS 的工作原理。

如何为你的机群选取合适的硬件和架构。

如何将 Hadoop 机群和企业已有的系统进行无缝集成。

如何使用 Flume 进行实时数据采集以及如何使用 Sqoop 在 RDBMS 和 Hadoop 机群之间进行数据导入导出。

如何配置公平调度器为 Hadoop 上的多用户提供服务级别保障。

产品环境中 Hadoop 机群的最佳运维实践。

Hadoop 机群排错、诊断问题和性能调优。


培训对象及学员基础

面向系统管理员和 IT 经理,需具备 Linux 经验,无需 Apache Hadoop 基础。


认证

结束本课程培训后,我们建议学员准备并注册参加 Cloudera 认证 Hadoop 管理员考试(CCAH)。通过并获取该证书是向公司及客户证明个人在 Hadoop 领域的技术和专长的有力依据

-主办方介绍-

cloudera cloudera

由于Hadoop深受客户欢迎,许多公司都推出了各自版本的Hadoop,也有一些公司则围绕Hadoop开发产品。在Hadoop生态系统中,规模最大、知名度最高的公司则是Cloudera。Cloudera由来自Facebook、谷歌和雅虎的前工程师杰夫·哈默巴切(Jeff Hammerbacher)、克里斯托弗·比塞格利亚(Christophe Bisciglia)、埃姆·阿瓦达拉(Amr Awadallah)以及现任CEO、甲骨文前高管迈克·奥尔森(Mike Olson)在2008年创建。

-课程大纲-

课程介绍


Apache Hadoop 介绍

Hadoop 动机

基本概念

Hadoop 核心部件


Hadoop 机群安装

机群管理方案

Cloudera Manager 特性

Cloudera manager 安装

Hadoop (CDH) 安装


Hadoop 分布式文件系统 (HDFS)

HDFS 特性

读写文件

NameNode 内存考虑

HDFS 安全简介

HDFS Web UI

使用 HDFS Shell


YARN 上的 MapReduce 和 Spark

计算平台在 Hadoop 里扮演的角色

YARN:机群资源管理器

MapReduce 概念

Apache Spark 概念

Yarn 上的计算平台

YARN Web UI 及 Shell

YARN 应用运行日志


Hadoop 配置及服务运行日志

Cloudera Manager 配置管理机制

定位配置参数及进行配置变更

管理角色实例及添加服务

配置 HDFS 服务

配置 Hadoop 服务运行日志

配置 YARN 服务


HDFS 导入数据

使用 Flume 从外部数据源实时导入数据

使用 Sqoop 从关系数据库导入数据

REST 接口

导入数据的最佳实践


Hadoop 机群规划

规划考虑因素

硬件选择

虚拟化选项

网络因素

节点配置


Hive,Impala 及 Pig 的安装及配置

Hive

Impala

Pig


Hadoop 客户端及 Hue

什么是 Hadoop 客户端

安装及配置 Hadoop 客户端

安装及配置 Hue

使用 Hue 进行身份验证及授权


机群高级配置

高级配置参数

Hadoop 端口配置

HDFS 机柜感知配置

HDFS 高可靠性配置


Hadoop 安全

Hadoop 安全的重要性

Hadoop 安全性概念

Kerberos 简介

使用 Kerberos 保护Hadoop 机群

其他安全特性


资源管理

使用静态服务池配置 Linux cgroup

公平调度器

配置动态资源池

YARN 内存及 CPU 设置

Impala 查询调度


机群维护

检查 HDFS 状态

机群间复制数据

添加/移除机群节点

机群数据负载平衡

目录快照

机群升级


机群监控及排错

Cloudera Manager 监控特性

监控 Hadoop 机群

Hadoop 机群排错

常见配置不当问题


总结

-培训费用-

培训费9200元/人,认证考试费2200元/人。

会议标签:

Hadoop IT技术 Linux

温馨提示
酒店与住宿: 异地参会客户请注意,为防止会议临时变动,建议您先与活动家客服确认参会信息,再安排出行与住宿事宜。
退款规则: 活动各项资源需提前采购,购票后不支持退款,可以换人参加。

相关会议

分享到

QQ好友 QQ空间 微博 ×