课程介绍Course Introduction
课程长度:2天/12小时
授课方式:培训课程 + 案例讲解 + 小组讨论,60%案例讲解,40%实践演练
课程目标:本次课程以实际的演练(环境部署,程序开发)为主,分享大规模Hadoop应用的较有效实用经验,实践与理论相结合,让学员能够对Hadoop生态系统有一个清晰明了的认识,理解Hadoop系统适用的场景,掌握MapReduce与Hive的中应用开发技能,搭建稳定可靠的Hadoop集群,满足生产环境的标准。
课程内容的分为4个部分:
进入Hadoop的精彩世界,介绍Hadoop生态系统的各个组成模块与适用场景。
Hadoop部署,编程与管理,讲解演示在生产环境中选用和配置服务器需要注意的事项,介绍HDFS编程的Java API使用。
MapReduce编程:讲解演示MapReduce的中应用开发技能。
Hive与HBase编程:根据实际例子讲解Hive的使用与UDF的开发,以及如何通过JAVA编写HBase应用。
培训内容:
进入Hadoop的精彩世界
文件存储-HDFS
HDFS-工作原理
数据计算MapReduce
MapReduce工作原理
SQL分析-Hive
海量实时读写-HBase
工作流调度-Ooize
分布式协调系统--Zookeeper
Hadoop部署与编程
Hadoop版本介绍与选择
Hadoop部署实践
Hadoop安装文件构成与配置体系
机器硬件建议配置
系统环境配置
基本参数配置与说明
进程分布规划与启动
Hadoop基本使用操作
HDFS
权限
MapReduce
HDFS编程
开发环境准备
读文件
写文件
Hadoop系统容灾策略
Hadoop资源调度策略
Hadoop安全
Hadoop系统监控与报警策略
MapReduce编程
MapReduce的定义与工作机制
MapReduce与分布式计算
编程实战
MapReduce程序编写
基于MapReduce的Sort操作
基于MapReduce的Join操作
Hadoop多语言编程框架Streaming
代码调试
运行日志
Hive与HBase编程
Hive环境部署与搭建
Hive工作机制
Hive语法与实践
数据压缩选择
gzip
bz2
lzo
rcfile
HBase编程示例
HBase系统架构
HBase性能测试
Hadoop系统管理
Hadoop系统容灾策略
Hadoop资源调度策略
Hadoop配置参数
Hadoop安全
Hadoop系统监控与报警策略
更多详情资讯杭州博学教育培训学校:http://hzboxue.soxsok.com/
咨询方式
学校介绍University Profile
杭州博学信息技术服务有限公司即博学国际教育培训中心,国内IT领域O2O教育,国内的专业IT培训机构,致力于培养且具备培养OCM、RHCA、CCIE人才条件的中心,成立于2003年8月,是一家以教育培训、技术服务为主的IT服务型企业,其宗旨在于为社会各界人士提供全方位、定制的专业IT 培训,国际认证培训,职业就业培训等服务。目前是电子信息产业基地实训中心,杭州市服务外包人才培训机构,浙江省别的Oracle 授权培训中心,浙江省Cisco授权培训中心,浙江省红帽授权培训中心,同时也是IBM 培训合作伙伴,HP 培训合作伙伴,Prometric、VUE 授权考试中心,每年培训学员5000人次,是100余家世界500 强、政府单位、大型国企、上市公司的专业IT培训供应商。
博学致力于IT教育,在计算机软件(Oracle、Microsoft、VMware、CIW、RedHat Linux等),硬件(如HP、IBM、SUN 等),网络(Cisco、华为)等与世界厂商有着良好的合作关系并通过长期努力赢得了厂家别的授权合作,并与多家国内、外IT企业建立了合作伙伴关系。
博学拥有一支强大的技术服务队伍,具有的技术服务力量和教学设施,同时与专业伙伴紧密结合,拥有丰富的计算机培训服务经验以及为政府部门、电信、教育、金融等行业提供专业计算机技术服务经验,专职培训老师均为业内的经验丰富讲师或经验丰富技术工程师。
培训客户:
通信领域:浙江电信、浙江移动、河北移动、浙江联通、重庆电信、西安电信、山西电信、江苏电信、南京电信、贵州电信、江苏网通、江西联通、武汉电信、四川电信、湖州电信、宁波电信、绍兴电信、嘉兴电信等等
电力领域:浙江电力、贵州电力、安徽电力、丽水电力、绍兴电力、台州电力、宁波电力、杭州电力、嘉兴电力、衢州电力、浙江电力培训中心等等
烟草公司:浙江烟草、杭州烟草、湖州烟草、台州烟草、绍兴烟草、宁波烟草、温州烟草、嘉兴烟草等等
机关:浙江省厅、广东省厅、杭州、宁波、温州、台州、金华、绍兴、嘉兴、衢州、湖州、丽水、舟山等等
国企公司:国航浙江、南方航空、中国石化、杭钢、杭氧、水业集团、厦门广电、民航空管局、河南石油勘探局、中国石油、中国银行等等
外企公司:HP、TOSHIBA、博世电动、博世包装、AMDOCS中国、德国拜耳、威睿电通、博克软件、美国道富、英国灵川、BP、马尼托瓦(中国)、法液空、NEC、华三、赛诺菲安迈特、依赛通信、安费诺飞凤、诺基亚西门子、伊莱克斯等等
政府机关:杭州海关、浙江地税、黄山地税、舟山港航管理局、浙江省委办公厅、浙江省环保局、浙江出入境检验检疫局、宁波发改局、浙江省质量技术监督局、浙江省劳动和社会保障厅等等
上市公司:恒生电子、阿里巴巴、支付宝、淘宝、UTStarcom中国、东方通信、新世纪信息、中程科技、浙大快威、浙大网新、用友软件、沙钢集团、浙江传化、信雅达、西子奥的斯、大和热磁、华数集团、创联软件、浙大兰德、盾安控股、天玑科技、中控集团、顾家工艺、浙江正泰、顺丰速运、美达房产、万科南都、英特药业、神州数码、宁波华翔、德山化工、北仑电厂、开元旅业、圣奥集团、吉利汽车、亿阳信通、斯凯网络、士兰微、大华股份、聚光科技、云南盐化等等
咨询热线电话:400-0088-352
咨询王老师QQ:1374204056