你的位置: 首页 > 公开课首页 > 互联网/语言 > 课程详情

details

Cloudera授权Hadoop大数据管理员培训

暂无评价   
淘课价格
待定
你还可以: 收藏

培训受众:

具备基本Linux系统管理经验。不需要事先掌握Hadoop相关知识。

培训颁发证书:

Cloudera ApacheHadoop资格管理员考试提供业界进行Hadoop安装部署及管理调优领域里唯一且最具权威性、并得到全球认可的认证。为企业提供了高质量可以依赖的Hadoop管理员,保障了海量数据存储和处理计算平台系统的高质量;为工程师技术人员提供了最新的技术装备,开拓了职业发展。

课程大纲:

• Hadoop分布式文件系统(HDFS)和MapReduce的工作原理
• 如何优化Hadoop机群所需要的硬件配置
• 搭建Hadoop机群所需要考虑的网络因素
• 如何利用Hadoop配置选项进行系统性能调优
• 如何利用FairScheduler为多用户提供服务级别保障
• Hadoop机群维护和监控
• 如何使用Flume从动态生成的文件加载数据到Hadoop
• 如何使用Sqoop从关系型数据库加载数据
• 使用其他Hadoop相关系统工具(诸如Hive,Pig和HBase)所涉及到的系统管理问题



• 为什么使用Hadoop?
• HDFS介绍
• MapReduce介绍
• Hive, Pig, HBase和其他Hadoop生态系统项目
• 上机实验
Hadoop机群规划
• 一般考虑因素
• 选择合适的硬件
• 网络考虑
• 配置节点
配置和部署Hadoop机群
• 部署种类
• 安装Hadoop
• 使用Cloudera Manager进行简易安装
• 典型配置参数
• 机柜配置(Rack Awareness)
• 使用配置管理工具
• 上机实验
管理调度任务
• 管理运行的任务
• 上机实验
• 先进先出调度器(FIFO Scheduler)
• 公平调度器(FairScheduler)
• 配置公平调度器
• 上机实验
Hadoop维护
• 检查HDFS状态
• 上机实验
• Hadoop机群之间的数据拷贝
• 增减Hadoop机群节点
• Hadoop机群数据负载平衡
• 上机实验
• 名字节点(NameNode)元数据(Metadata)的备份
• 机群升级
Hadoop机群监控和故障排除
• 一般性系统监控
• 管理Hadoop日志文件
• 使用NameNode和JobTracker的Web UI
• 上机实验
• 使用Ganglia来监控机群
• 常见故障问题
• 用基准测试工具测试机群性能
为Hadoop机群加载外部数据源
• Flume概述
• 上机实验
• Sqoop概述
• 导入数据的最佳实践
安装和管理其他Hadoop项目
• Hive
• Pig
• 上机实验
• HBase

培训师介绍:

 
Android架构师、高级工程师、咨询顾问、培训专家,通晓Android、HTML5、Hadoop.
致力于Android和HTML5软、硬、云整合,精通Android安全。
国内最早(2007年)从事于Android系统移植、软硬整合、框架修改、应用程序软件开发以及Android系统测试和应用软件测试的技术专家和技术创业人员之一。
HTML5技术领域的最早实践者之一,成功为多个机构实现多款自定义HTML5浏览器,参与某知名的HTML5浏览器研发;

王老师致力于HTML5和Android的软、硬、云整合,智慧家庭,智能城市,精通Android安全,精通企业级Android应用开发实战,对Android的HAL与AF框架的原理、IoC、设计模式有深刻独特的理解,精通C/C++组件通过JNI调用移植成为Android应用框架的核心组件,擅长修改应用框架。精通JPA、Struts、Spring、MySQL, 熟练LAMP技术。2010年10月份至今为多家企业提供Android技术咨询服务及企业内部培训。一直关注HTML5的发展动态和技术实现,擅长HTML5的Web开发、HTML5的游戏开发、HTML5和本地的软硬整合高级技术、HTML5与云计算。成功对包括三星、摩托罗拉、华为等世界500强企业实施Android底层移植、框架修改、应用开发等培训。成功对平安保险、英特尔等实施HTML5培训;撰写了《大话企业级Android应用开发实战》、《基于Android平台的商业软件---手机守护神开发全程实战》、《Android 4.0网络编程详解》、《细说AndroidNDK编程》、《Android软、硬、云整合实战》、《Android开发三剑客——UML、模式与测试》等多部Android著作。 项目案例包括Android移植工作、Android上特定硬件的垂直整合、编写Java虚拟机、Android框架修改、Android手机卫士、Android娱乐多媒体软件(针对酷六、优酷、土豆等类型的网站)、大型B2C电子商务网站、大型SNS网站等。
工作经验
l 三次技术创业经历:B2C电子商务创业、SNS创业、Android创业、
l 多家著名公司的技术顾问
所出书籍
l 《大话企业级Android应用开发实战》
l 《基于Android平台的商业软件---手机守护神开发全程实战》
l 《Android 4.0网络编程详解》
l 《Android软、硬、云整合实战》
l 《Android开发三剑客——UML、模式与测试》等多部Android著作
l 《Android手机卫士》

本课程名称: Cloudera授权Hadoop大数据管理员培训

查看更多:互联网/语言公开课

Cloudera授权Hadoop大数据管理员培训 相关的最新课程
讲师动态评分 与同行相比

授课内容与课纲相符00%

讲师授课水平00%

服务态度00%