【 大数据工程师】小象学院Hadoop进阶教程第一期(价值699元)

下载地址 2018.5.22 502

这个教程需要有一定的Hadoop基础,没基础的可以论坛找一些基础的教程

课程大纲:
授课对象:Hadoop高级、具有一定Hadoop系统使用经验
适用Hadoop版本:兼顾所有Hadoop版本,包括Apache、Hortonworks和CDH发行版

第 1 章: MapReduce-1
第 2 章: MapReduce-2
第 3 章: hdfs
第 4 章: hadoop工具及调试
第 5 章: hadoop问题排查及监控
第 6 章: hadoop配置管理及mapreduce示例

第一部分. MapReduce
Mapreduce工作流程及基本架构回顾
运维相关
参数调优
benchmark
reuse jvm
错误感知及speculative执行
task日志分析
可容忍错误百分比设置及跳过坏记录
选择fairescheduler等其他调度器优化性能
开发相关
数据类型选择
实现自定义writable数据类型、自定义key
一个mapper中输出不同类型value
InputFormat/OutputFormat,原理及定制
Mapper/Reducer/Combiner,Combiner的使用及其对mapreduce框架优化的作用
Partitioner定制
排序策略GroupingComparator/SortComparator
任务调度原理及修改方法(案例,map/reduce共享slot,按标识精准map/reduce调度)
Streaming
DistributedCache
mapreduce任务间依赖
counter
JobChild参数设置
性能优化

第二部分. hdfs
HDFS API
fuse(C API)
压缩
HDFS benchmark
Datanode添加及删除
多盘支持,磁盘错误感知
hdfs raid
HDFS block size设置相关问题
文件备份数设置
HDFS中合并文件

第三部分. Hadoop工具
dfsadmin/mradmin/balancer/distcp/fsck/fs/job
监控及报警
hadoop配置管理

第四部分. Hadoop调试
Log
本地模式调试map/reduce任务
远程调试

第五部分. 问题分析
Java GC介绍及java进程常用的分析工具jstat、jhat、jmap
top/iostat/netstat/lsof等
Jstack/kill -3
Strace
nload/tcpdump

第六部分.分析示例
MapReduce简单分析
用MapReduce实现Group-by
用MapReduce实现倒排索引
MapReduce实现直方图
MapReduce实现Join

 

收费下载地址:

 
隐藏内容: ********, 支付¥1.00下载,或者升级VIP可下载全站内容。
购买说明1:不注册用户名 扫码付款后 就可以看到收费下载地址
购买说明2:关闭网页重新打开还能看到下载链接(不注册用户名会默认绑定IP,所以不换IP就能看到下载链接)
购买说明3:推荐您花10秒钟注册本站账号后在刷新页面购买
购买说明4:支持支付宝和微信扫码付款,如果支付宝付款,那您支付宝绑定的邮箱将收到一封下载地址的邮件
购买说明5:付款时请不要关闭付款页面,等待浏览器自动跳转完成,否则将无法自动开通!
学习不怕没教程,花最少的钱,学最多的姿势~.默认下载工具下载慢,请使用百度网盘高速下载工具Pan Download

版权声明

本站所提供的资料来源于互联网,转载的目的在于传递更多信息及用于网络分享。
本站保证站内提供的所有内容都是按"原样"提供,本站未做过任何改动。
本站所提供的资料来源于互联网,本站不保证本站提供的资源的准确性、安全性和完整性,也不意味着赞同其观点或证实其描述。
同时本网站也不承担用户因使用这些资源对自己和他人造成任何形式的损失或伤害。
本站不储存任何资源,请在下载后24小时内删除。版权归作者所有,如果您觉得满意,请购买正版!
如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。
根据二○○二年一月一日《计算机软件保护条例》规定:为了学习和研究软件内含的设计思想和原理,
通过安装、显示、传输或者存储软件等方式使用软件的,可以不经软件著作权人许可,
不向其支付报酬!鉴于此,也希望大家按此说明研究软件!
           
 
也想出现在这里? 联系我们
八哥VIP教程网-VIP会员
 
  • 猛戳我吧
回到顶部