最新在学习hadoop 、storm大数据相关技术,发现网上hadoop 、storm 相关学习视频少之又少,这里整理了传智播客段海涛老师的hadoop学习视频,出来给大家学习交流。

视频下载地址:http://demo.liuy88.cn/jp0731.html

第一天        hadoop的基本概念  伪分布式hadoop集群安装  hdfs mapreduce 演示

01-hadoop职位需求状况.avi
  02-hadoop课程安排.avi
  03-hadoop应用场景.avi
  04-hadoop对海量数据处理的解决思路.avi
  05-hadoop版本选择和伪分布式安装.avi
  06-hadoop版本选择和伪分布式安装2.avi
  07-hdfs&mapreduce测试.avi
  08-hdfs的实现机制初始.avi
  09-hdfs的shell操作.avi
  10-hadoop集群搭建的无密登陆配置.avi

第二天  hdfs的原理和使用操作、编程

01-NN元数据管理机制.avi
  02-NN工作机制2.avi
  03-DN工作原理.avi
  04-HDFS的JAVA客户端编写.avi
  05-filesystem设计思想总结.avi
  06-hadoop中的RPC框架实现机制.avi
  07-hadoop中的RPC应用实例demo.avi
  08-hdfs下载数据源码跟踪铺垫.avi
  09-hdfs下载数据源码分析-getFileSystem.avi
  10-hdfs下载数据源码分析-getFileSystem2.avi

第三天  mapreduce的原理和编程

01-hdfs源码跟踪之打开输入流.avi
  02-hdfs源码跟踪之打开输入流总结.avi
  03-mapreduce介绍及wordcount.avi
  04-wordcount的编写和提交集群运行.avi
  05-mr程序的本地运行模式.avi
  06-job提交的逻辑及YARN框架的技术机制.avi
  07-MR程序的几种提交运行模式.avi
  08-YARN的通用性意义.avi
  09-yarn的job提交流程.avi

第四天  常见mr算法实现和shuffle的机制

01-复习.avi
  02-hadoop中的序列化机制.avi
  03-流量求和mr程序开发.avi
  04-hadoop的自定义排序实现.avi
  05-mr程序中自定义分组的实现.avi
  06-shuffle机制.avi
  07-mr程序的组件全貌.avi
  08-textinputformat对切片规划的源码分析.avi
  09-倒排索引的mr实现.avi
  10-多个job在同一个main方法中提交.avi

第五天  hadoop2.x中HA机制的原理和全分布式集群安装部署及维护

01-zookeeper.avi
  02-zookeeper2.avi
  03-NN高可用方案的要点1.avi
  04-hadoop-HA机制的配置文件.avi
  05-hadoop分布式集群HA模式部署.avi
  06-hdfs--HA测试.avi
  07-hdfs--动态增加节点和副本数量管理.avi
  08-HA的java api访问要点.avi
  09-hive入门.avi

第六天  hbase  hive

01-复习ha相关.avi
  02-hive的元数据库mysql方式安装配置.avi
  03-hive的使用.avi
  04-hive的常用语法.avi
  05-hql语法及自定义函数.avi
  06-hbase表结构.avi
  07-hbase集群架构及表存储机制.avi
  08-hbase-shell.avi
  09-hbase的java api.avi

第七天  storm+kafka

006-kafka整合storm.avi
  01-storm基本概念.avi
  02-storm编程规范及demo编写.avi
  03-storm的topology提交执行.avi
  04-kafka介绍.avi
  05-kafuka集群部署及客户端编程.avi
  06-kafka消费者java客户端编程.avi

第八天  实战项目

01-项目背景及技术架构.avi
  02-主要技术选型.avi
  03-flume介绍及演示.avi
  04-行为轨迹增强处理流程.avi
  05-样本url筛选模块开发.avi
  06-行为轨迹增强模块1.avi
  07-行为轨迹增强模块2.avi

大数据Hadoop入门视频教程:Hadoop的快如入门的更多相关文章

  1. 大数据学习笔记之Hadoop(一):Hadoop入门

    文章目录 大数据概论 一.大数据概念 二.大数据的特点 三.大数据能干啥? 四.大数据发展前景 五.企业数据部的业务流程分析 六.企业数据部的一般组织结构 Hadoop(入门) 一 从Hadoop框架 ...

  2. 大数据实时计算工程师/Hadoop工程师/数据分析师职业路线图

    http://edu.51cto.com/roadmap/view/id-29.html http://my.oschina.net/infiniteSpace/blog/308401 大数据实时计算 ...

  3. 大数据平台搭建(hadoop+spark)

    大数据平台搭建(hadoop+spark) 一.基本信息 1. 服务器基本信息 主机名 ip地址 安装服务 spark-master 172.16.200.81 jdk.hadoop.spark.sc ...

  4. 大数据学习系列之四 ----- Hadoop+Hive环境搭建图文详解(单机)

    引言 在大数据学习系列之一 ----- Hadoop环境搭建(单机) 成功的搭建了Hadoop的环境,在大数据学习系列之二 ----- HBase环境搭建(单机)成功搭建了HBase的环境以及相关使用 ...

  5. 大数据学习系列之六 ----- Hadoop+Spark环境搭建

    引言 在上一篇中 大数据学习系列之五 ----- Hive整合HBase图文详解 : http://www.panchengming.com/2017/12/18/pancm62/ 中使用Hive整合 ...

  6. 大数据学习系列之七 ----- Hadoop+Spark+Zookeeper+HBase+Hive集群搭建 图文详解

    引言 在之前的大数据学习系列中,搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试.其实要说的话,我开始学习大数据的时候,搭建的就是集群,并不是单机模式和伪分布式.至于为什么先写单 ...

  7. 阿里巴巴飞天大数据架构体系与Hadoop生态系统

    很多人问阿里的飞天大数据平台.云梯2.MaxCompute.实时计算到底是什么,和自建Hadoop平台有什么区别. 先说Hadoop 什么是Hadoop? Hadoop是一个开源.高可靠.可扩展的分布 ...

  8. 大数据软件安装之Hadoop(Apache)(数据存储及计算)

    大数据软件安装之Hadoop(Apache)(数据存储及计算) 一.生产环境准备 1.修改主机名 vim /etc/sysconfig/network 2.修改静态ip vim /etc/udev/r ...

  9. 想转行大数据,开始学习 Hadoop?

    学习大数据首先要了解大数据的学习路线,首先搞清楚先学什么,再学什么,大的学习框架知道了,剩下的就是一步一个脚印踏踏实实从最基础的开始学起. 这里给大家普及一下学习路线:hadoop生态圈——Strom ...

  10. 了解大数据的技术生态系统 Hadoop,hive,spark(转载)

    首先给出原文链接: 原文链接 大数据本身是一个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的.你能够把它比作一个厨房所以须要的各种工具. 锅碗瓢盆,各 ...

随机推荐

  1. ogg 12.3 for sqlserver 2016/2014 CDC模式配置

    本文主要讲述ogg 12.3 通过CDC抽取mssqlserver 2016 enterprise的过程,以sqlserver为目标端投递配置相对简单,所以在此不在赘述. 针对以前的mssqlserv ...

  2. vue 显示 webpack-dev-server不是内部命令的解决办法

    然后在cmd中cd到项目目录,依次运行命令: npm install 和 npm run build 最后运行 npm run dev 后项目成功运行.

  3. iperf详细使用方法

    Iperf  是一个网络性能测试工具.Iperf可以测试TCP和UDP带宽质量.Iperf可以测量最大TCP带宽, 具有多种参数和UDP特性.Iperf可以报告带宽,延迟抖动和数据包丢失. Iperf ...

  4. day09内存管理

    复习 ''' 文件处理 1.操作文件的三步骤 -- 打开文件:硬盘的空间被操作系统持有 | 文件对象被应用程序持续 -- 操作文件:读写操作 -- 释放文件:释放操作系统对硬盘空间的持有 2.基础的读 ...

  5. 如何使用postman传数组数据

    如何使用postman传数组数据 在我们做api接口数据调试的时候,大部分是会用到postman的,一般请求数据的参数都是字符串,但是特殊情况下我们是需要传一个数组数据的,那么为了实现这种需求,究竟该 ...

  6. Bigger-Mai 养成计划,Docker之安装,部署

    CentOS Docker 安装 Docker支持以下的CentOS版本: CentOS 7 (64-bit) CentOS 6.5 (64-bit) 或更高的版本 前提条件 目前,CentOS 仅发 ...

  7. 【转载】JVM 学习——垃圾收集器与内存分配策略

    本文主要是对<深入理解java虚拟机 第二版>第三章部分做的总结,文章中大部分内容都来自这章内容,也是博客 JVM 学习的第二部分. 简述 说到垃圾收集(Garbage Collectio ...

  8. ZOJ 2112 Dynamic Rankings(树状数组套主席树 可修改区间第k小)题解

    题意:求区间第k小,节点可修改 思路:如果直接用静态第k小去做,显然我更改一个节点后,后面的树都要改,这个复杂度太高.那么我们想到树状数组思路,树状数组是求前缀和,那么我们可以用树状数组套主席树,求出 ...

  9. iso移动端input的bug解决(vue)

    iso中input很奇怪,点击空白地方,键盘也不会消失,影响页面中其他功能 解决办法: 点击的元素不是input或者textarea,那么就让上一个获得焦点的输入框失去焦点. 涉及的代码: <i ...

  10. JavaWeb网上商城项目中sql语句问题的解决

    出现的问题 解决方法 对ProductDaoImpl建立Junit测试得到问题所在 学到了 Junit case测试验证和debug分步执行 mysql是关系型数据库.Redis是非关系型数据库且比m ...