用户登录
用户注册

分享至

hadoop教程免费视频

  • 作者: 手托红豆
  • 来源: 51数据库
  • 2020-09-30

您好,帮你推荐一下明义老师的Hadoop应用开发实战(flume应用开发、搜索引擎算法、Pipes、集群、PageRank算法)这套课程涉及项目:搜索引擎自动推荐、PageRank算法、 最短路径算法、好友智能推荐。总共28课时。                                                                                                                                第1章节: (4课时)
 
搜索引擎自动推荐(4课时)


> 新平台搭建: 使用VirtualBox创建CentOs虚拟机,并使用RPM的方式安装和使用Hadoop


> 内存数据库Redis的安装和基本使用


> 搜索引擎自动推荐算法讲解


> 使用JqueryUI + Ajax + Redis搭建前后台框架


> 使用Map Reduce实现数据统计算法


> 定制Map Reduce输出,将数据直接写入Redis内存数据库


第2章节: (3课时)
 
好友智能推荐 (3课时)


> 应用背景和算法详细讲解


> Web框架搭建Struts2 + Redis


> 使用Map Reduce结合Redis实现潜在好友查找算法


> 完整的应用逻辑实现:前台好友关注,后台潜在好友查找,再到前台潜在好友推荐


第3章节:(2课时)
 
Hadoop Streaming(2课时)


> 非Java的Map Reduce实现


> 如何使用脚本语言实现一个Map Reduce任务
 
> 如何使用C语言实现一个Map Reduce任务


第4章节: (1课时)
 
Hadoop Pipes (1课时)


> 基于Hadoop Pipes,使用C++实现Map Reduce任务


第5章节: (2课时)
 
Apache Flume基础 (2课时)


> Apache Flume概述


> Flume Agent详细介绍及使用


> 深入Flume子模块: Source, Sink及Channel的使用


第6章节:  (3课时)
 
Flume实践及分布式应用 (3课时)


> 与搜索引擎自动推荐应用的结合


> 搭建分布式的flume应用


第7章节: (5课时)
 
最短路径算法的Hadoop实现(约5课时)


> 最短路径算法介绍


> 如何使用MapReduce实现最短路径算法


> 找到城市任意公交站点之间的最短路径


第8章节: (3课时)
 
Hadoop集群管理(约3课时)


> Hadoop的日志管理


> 动态添加和删除Hadoop节点


> Namenode和Datanode目录结构介绍


> HDFS的数据安全性:fsimage和editlog
 
> Hadoop管理工具dfsadmin和fsck的使用


第9章节:(5课时)
 
PageRank算法的Hadoop实现(约5课时)


> Google的成名之作:PageRank算法介绍


> 如何使用Hadoop实现PageRank算法
 
软件
前端设计
程序设计
Java相关