您好!欢迎来到搜库源码网!本站资源24小时自动发货,请放心购买,有问题请提交工单!
搜库源码网 精品源码
广告!请自辨真伪
广
广告!请自辨真伪
也想出现在这里?联系我们
也想出现在这里?联系我们
广告!请自辨真伪
也想出现在这里?联系我们
也想出现在这里?联系我们
广告!请自辨真伪
广
这是广告!真假请自辩!
也想出现在这里?联系我们
也想出现在这里?联系我们
这是广告!真假请自辩!
也想出现在这里?联系我们
也想出现在这里?联系我们
广告!请自辨真伪
广
广告!请自辨真伪
广
小象学院Hadoop进阶教程 第一期 最后编辑:2019-01-25 10:43:07

小象学院Hadoop进阶教程 第一期

2019-01-25 10:43:07 大数据时代 已浏览2171次 我要投稿 您当前为普通用户
搜库网广告招租
广
特别提示:源码100%完整,但我们不免费提供任何技术咨询。小白请慎重下单!
搜库网广告招租
广

资源文字介绍:

    小象学院Hadoop进阶教程 第一期

    这个教程需要有一定的Hadoop基础,没基础的可以论坛找一些基础的教程

    课程大纲:

    授课对象:Hadoop高级、具有一定Hadoop系统使用经验

    适用Hadoop版本:兼顾所有Hadoop版本,包括Apache、Hortonworks和CDH发行版

    第 1 章: MapReduce-1

    第 2 章: MapReduce-2

    第 3 章: hdfs

    第 4 章: hadoop工具及调试

    第 5 章: hadoop问题排查及监控

    第 6 章: hadoop配置管理及mapreduce示例

    第一部分. MapReduce

    Mapreduce工作流程及基本架构回顾

    运维相关

    参数调优

    benchmark

    reuse jvm

    错误感知及speculative执行

    task日志分析

    可容忍错误百分比设置及跳过坏记录

    选择fairescheduler等其他调度器优化性能

    开发相关

    数据类型选择

    实现自定义writable数据类型、自定义key

    一个mapper中输出不同类型value

    InputFormat/OutputFormat,原理及定制

    Mapper/Reducer/Combiner,Combiner的使用及其对mapreduce框架优化的作用

    Partitioner定制

    排序策略GroupingComparator/SortComparator

    任务调度原理及修改方法(案例,map/reduce共享slot,按标识精准map/reduce调度)

    Streaming

    DistributedCache

    mapreduce任务间依赖

    counter

    JobChild参数设置

    性能优化

    第二部分. hdfs

    HDFS API

    fuse(C API)

    压缩

    HDFS benchmark

    Datanode添加及删除

    多盘支持,磁盘错误感知

    hdfs raid

    HDFS block size设置相关问题

    文件备份数设置

    HDFS中合并文件

    第三部分. Hadoop工具

    dfsadmin/mradmin/balancer/distcp/fsck/fs/job

    监控及报警

    hadoop配置管理

    第四部分. Hadoop调试

    Log

    本地模式调试map/reduce任务

    远程调试

    第五部分. 问题分析

    Java GC介绍及java进程常用的分析工具jstat、jhat、jmap

    top/iostat/netstat/lsof等

    Jstack/kill -3

    Strace

    nload/tcpdump

    第六部分.分析示例

    MapReduce简单分析

    用MapReduce实现Group-by

    用MapReduce实现倒排索引

    MapReduce实现直方图

    MapReduce实现Join



    Openstack实战演练及开发入门系列教程

资源图片介绍

下一篇:

上一篇:

售后服务:

  • 售后服务范围 1、服务器配置及主机购买推荐
    2、模板使用范围内问题免费咨询
    3、单价超过200元的模板免费一次安装,需提供服务器信息。(游戏源码、PHP以外的源码不含免费技术支持)
    付费增值服务 1、提供WordPress主题、插件汉化、优化等服务请详询在线客服
    2、承接 WordPress、DedeCMS、ThinkPHP 等系统建站、仿站、开发、定制等服务
    3、服务器环境配置(一般 ¥50-300)
    4、网站中毒处理(需额外付费,500元/次/质保三个月)
    售后服务时间 周一至周五(法定节假日除外) 9:00-23:00
    免责声明 本站所提供的模板(主题/插件)等资源仅供学习交流,若使用商业用途,请购买正版授权,否则产生的一切后果将由下载用户自行承担,有部分资源为网上收集或仿制而来,若模板侵犯了您的合法权益,请来信通知我们(Email: yuanma8@88.com),我们会及时删除,给您带来的不便,我们深表歉意!

Hi, 如果你对这款模板有疑问,可以跟我联系哦!

联系作者
  • 搜库源码网拥有海量网站模板及源码,站长亲测干净无后门。

  • 注册即能下载免费模板栏目资源,帮您更快的完成网站建设。

  • 每日更新模板资源,每日精品推荐,及时获取最新模板资源流行去向。

  • 完美的售后服务,帮助草根站长、企业等成功建站。

  • 将您最爱的资源收藏,建立自己的资源库,并与朋友分享。