吾爱编程

标题: 云帆大数据Hadoop从入门到上手企业开发8天培训视频教程 [打印本页]

作者: 小伊同学 时间: 2017-10-8 23:29
标题: 云帆大数据Hadoop从入门到上手企业开发8天培训视频教程
云帆大数据Hadoop从入门到上手企业开发8天培训视频教程课程介绍:
超级棒的hadoop课程1.x,2.x版本都有讲解，可以全面了解hadoop两个版本的各自特点。动手搭建环境伪分布与分布式都有教。课程都有讲义是PDF格式的，制作很精良。
课程目录:
第1天

000_上课方式和课程大纲介绍
001_Linux系统基本知识说明和启动Linux虚拟机
002_配置虚拟机IP地址和如何使用远程工具SecureCRT
003_Linux 环境下基本命令使用及Linux系统中文件的类型和权限
004_Linux 环境下基本命令讲解二
005_Linux 系统远程FTP工具与桌面工具XManager使用和培养三大能力
006_Linux 系统基本命令和基本配置的复习讲解
007_What is Apache Hadoop讲解
008_Hadoop 的发展史和版本发展与区别
009_Hadoop 1.x 生态系统介绍讲解
010_Hadoop 2.x 生态系统介绍讲解
011_Hadoop 1.x 服务讲解
012_HDFS 架构的讲解
013_MapReduce 架构讲解和MapReduce思想原理讲解
014_Apache Hadoop 三种安装部署模式讲解
015_Apache Hadoop 1.x 单机(本地)模式安装部署与测试
016_Hadoop 1.x 伪分布式安装部署
017_查看Hadoop 日志以及日志的格式和命名组成
018_Hadoop 1.x 守护进程服务三种启动停止方式

第2天

019_测试环境(HDFS Shell基本命令和运行WordCount程序)
020_结合WordCount实例讲解Hadoop的数据存储和数据计算
021_Hadoop 1.x五大服务与配置文件中的对应关系
022_分析Hadoop 1.x三种启动停止方式的Shell 脚本
023_去除警告【Warning$HADOOP_HOME is deprecated。】
024_Hadoop相关命令中的【--config configdir】作用
025_Hadoop 1.x目录结构
026_Eclipse导入Hadoop源码项目

第3天

027_HDFS 设计目标
028_HDFS 文件系统架构概述
029_HDFS架构之NameNode和DataNode
030_HDFS 架构讲解总结
031_回顾NameNode和DataNode
032_HDFS架构之Client和SNN功能
033_HDFS Shell 命令命令讲解和演示
034_讲解HDFS 文件读写流程
035_详解HDFS API之FileSystem方式基本操作一
036_HDFS Java API 两种方式介绍及使用URL API详解一
037_使用URL API详解二

第4天

038_使用HDFS FileSystem API 详解
039_HDFS文件系统读写流程及HDFS API两种方式读取文件
040_详解HDFS API之FileSystem方式基本操作二
041_讲解分析Configuration和FileSystem类源代码
042_引出HDFS实际应用场景之合并文件和使用getmerge命令并查看实现源码
043_分析getmerge功能实现思路和代码实现
044_演示讲解【百度网盘】功能与HDFS API对应说明

第5天

045_HDFS 专题结束和布置HDFS 作业
046_MapReduce架构原理介绍讲解
047_WordCount运行和MapReduce运行基本流程
048_MapReduce执行流程详解
049_MapReduce编程模型讲解及运行PI程序和JobWebUI监控Job运行
050_如何按照【八股文】方式编写MapReduce
051_复习MapReduce编写模型和【八股文】方式编写MapReduce
052_完成MyWordCount程序编写

第6天

053_打包运行MyWordCount程序并监控Job运行
054_优化MyWordCount程序和讲解GenericOptionsParser
055_安装Hadoop Eclipse插件并使用Eclipse查看文件系统
056_使用Eclipse运行MyWordCount程序并解决PriviledgedActionException问题

第7天

057_MyWordCount 处理过程详解
058_MapReduce提交作业源码跟踪讲解_
059_MR作业运行流程整体分析
060_MapReduce执行流程之Shuffle和排序流程以及Map端分析
061_MapReduce执行流程之Reduce端分析
062_MapReduce Shuffle过程讲解和Map Shuffle Phase讲解
063_Reduce Shuffle Phase讲解
064_源代码跟踪查看Map Task和Reduce Task数目的个数
065_回顾MapReduce执行过程以及MapReduce核心

第8天

066_Hadoop MapReduce框架数据类型讲解
067_Hadoop 数据类型之比较器Comparator讲解
068_复习总结如何自定义数据类型和查看源码深入进一步讲解数据类型
069_MapReduce应用案例之手机流量统计分析与数据类型定义和代码模板编写
070_MapReduce 应用案例之手机流量统计代码编写与测试

课程下载：

欢迎光临吾爱编程 (http://www.52pg.net/)