下资源

 找回密码
 立即注册
查看: 9131|回复: 348

[软件编程] 2015小象学院—hadoop进阶【价值699元】无KEY

  [复制链接]

2842

主题

3254

帖子

101万

积分

管理员

QQ:2011820123

Rank: 9Rank: 9Rank: 9

资源币
1010158
QQ
发表于 2015-7-23 13:33:23 | 显示全部楼层 |阅读模式


课程名称及简介

《Hadoop进阶》:本课程面向Hadoop高阶学习者,具有一定Hadoop系统使用经验,结合大规模使用Hadoop的实践经验,了解和掌握HDFS构建、Hadoop工具使用、调试优化,问题分析,通过分析示例掌握大量实际使用的经验,很多实战内容的示例是很少在网络上找到文档支持。

时间
共六周
培训方式
视频学习 + 在线答疑 + 每周作业 + 结业考试

课程大纲:

授课对象:Hadoop高级、具有一定Hadoop系统使用经验

适用Hadoop版本:兼顾所有Hadoop版本,包括Apache、Hortonworks和CDH发行版

第一部分. MapReduce

Mapreduce工作流程及基本架构回顾

运维相关

参数调优
benchmark
reuse jvm
错误感知及speculative执行
task日志分析
可容忍错误百分比设置及跳过坏记录
选择fairescheduler等其他调度器优化性能
开发相关

数据类型选择
实现自定义writable数据类型、自定义key
一个mapper中输出不同类型value
InputFormat/OutputFormat,原理及定制
Mapper/Reducer/Combiner,Combiner的使用及其对mapreduce框架优化的作用
Partitioner定制
排序策略GroupingComparator/SortComparator
任务调度原理及修改方法(案例,map/reduce共享slot,按标识精准map/reduce调度)
Streaming
DistributedCache
mapreduce任务间依赖
counter
JobChild参数设置
性能优化

第二部分. hdfs

HDFS API

fuse(C API)

压缩

HDFS benchmark

Datanode添加及删除

多盘支持,磁盘错误感知

hdfs raid

HDFS block size设置相关问题

文件备份数设置

HDFS中合并文件

第三部分. Hadoop工具

dfsadmin/mradmin/balancer/distcp/fsck/fs/job

监控及报警

hadoop配置管理

第四部分. Hadoop调试

Log

本地模式调试map/reduce任务

远程调试

第五部分. 问题分析

Java GC介绍及java进程常用的分析工具jstat、jhat、jmap

top/iostat/netstat/lsof等

Jstack/kill -3

Strace

nload/tcpdump

第六部分.分析示例

MapReduce简单分析

用MapReduce实现Group-by

用MapReduce实现倒排索引

MapReduce实现直方图

MapReduce实现Join

主讲人: 冼茂源

Apache Hama project PMC。

具有在朗讯、Sun Microsystems、搜狗等通信、传统IT以及互联网企业的工作经历。

针对互联网具体业务的特殊需求,对hadoop调度机制、安全管理、存储优化、监控及管理系统等进行深度修改。

同时,在将HBase与具体查询业务相结合,在实际项目中进行系统问题排查及调优方面有丰富经验。

百度云网盘资源下载:
链接: http://pan.baidu.com/s/1sj2x1oT 密码:
游客,如果您要查看本帖隐藏内容请回复


该贴已经同步到 阿波罗2014的微博

评分

参与人数 1资源币 +3 收起 理由
castiel + 3

查看全部评分

我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

1

主题

215

帖子

105

积分

瞅我就怀孕

资源币
105

社区居民

发表于 2015-7-23 13:41:57 | 显示全部楼层
每天逛逛下资源xiazy.net,免费下载最新VIP教程,最新破解软件,最新破解游戏
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

404

帖子

824

积分

瞅我就怀孕

资源币
824
发表于 2015-7-23 15:00:26 | 显示全部楼层
每天逛逛下资源xiazy.net,免费下载最新VIP教程,最新破解软件,最新破解游戏
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

250

帖子

289

积分

瞅我就怀孕

资源币
289
发表于 2015-7-23 16:18:59 | 显示全部楼层
自从加入下资源,她们都抢着叫我老公!
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

72

帖子

117

积分

瞅我就怀孕

资源币
117
发表于 2015-7-23 17:13:13 | 显示全部楼层
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

26

帖子

25

积分

蛋碎一地

资源币
25
发表于 2015-7-23 17:25:30 | 显示全部楼层
每天逛逛下资源xiazy.net,免费下载最新VIP教程,最新破解软件,最新破解游戏
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

129

帖子

49

积分

胸猛彪悍

资源币
49
发表于 2015-7-23 17:28:18 | 显示全部楼层
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

1

主题

237

帖子

2367

积分

荣誉会员

资源币
2367
发表于 2015-7-23 18:06:26 | 显示全部楼层
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

151

帖子

385

积分

瞅我就怀孕

资源币
385
发表于 2015-7-23 22:15:09 | 显示全部楼层
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

0

主题

273

帖子

89

积分

她们老亲我

资源币
89
发表于 2015-7-23 23:06:16 | 显示全部楼层
每天逛逛下资源xiazy.net,免费下载最新VIP教程,最新破解软件,最新破解游戏
我每天都来逛逛下资源,每天更新各种最新VIP教程、破解软件、破解游戏,各种百度云网盘资源下载,我要把朋友也介绍来!我也要加入VIP!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

联系站长
在线咨询

QQ|百度云网盘资源下载论坛

GMT+8, 2017-8-21 23:52 , Processed in 0.083106 second(s), 30 queries .

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表