查看: 24488|回复: 161

[Flume教程] 云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程

  [复制链接]

25

主题

42

帖子

462

积分

Kib

Rank: 3Rank: 3

贡献
33
技术
168
活跃
32
在线时间
3 小时
发表于 2016-5-24 23:24:35 | 显示全部楼层 |阅读模式
云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程

1(1).jpg

2(1).jpg


Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。


当前Flume有两个版本Flume 0.9X版本的统称Flume-og,Flume1.X版本的统称Flume-ng。由于Flume-ng经过重大重构,与Flume-og有很大不同,使用时请注意区分。


-------------------课程目录-------------------


1flume简介-基础知识
讲述flume的基础知识包括flume的基本概念和核心组件。flume是一个分布式、可靠、高可用的海量日志聚合系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据的简单处理,并写到各种数据接收方的能力。
2
flume安装与测试
讲述flume安装与测试,主要包括flume单机安装与测试、flume集群安装与测试、Arvo环境的搭建以及安装过程中的一些异常的解决方案讲解。
3
flume部署方式
讲述flume部署种类、流配置。其中详细讲解了单一代理、多代理、多路复用流的配置说明。
4
flume source相关配置及测试
讲述flume source相关的配置和案例分析,包括了Avro Source配置、Thrift Source配置、Exec Source配置、JMS Source配置、NetCat Source配置、Spooling Directory Source配置、Sequence Generator Source配置、Syslog TCP Source配置、Multiport Syslog TCP Source配置、Syslog UDP Source配置、Http Source配置、Custom Source配置。
5
flume sink相关配置及测试
讲述flume sink相关的配置以及flume channel配置和案例分析,包括了HDFS Sink配置、Logger Sink配置、Avro Sink配置、Thrift Sink配置、IRC Sink配置、File Roll Sink配置、Null Sink配置、Hbase Sink配置、AsyncHbase Sink配置、Custom Sink配置;Memory Channel配置、JDBC Channel配置、File Channel配置、Pseudo Transaction Channel配置、Custom Channel配置。

6
flume selector 相关配置与案例分析
讲述 flume selector相关配置和案例分析,包括了Replicating Channel Selector配置、Multiplexing Channel Selector配置、Custom Channel Selector配置。
7
Flume Sink Processors相关配置和案例分析
讲述 Flume Sink Processors相关配置和案例分析,包括了Default Sink Processor配置、Failover Sink Processor配置、Load balancing Sink Processor配置。
8
Flume Interceptors相关配置和案例分析
讲述 Flume Event Serializers、Flume Interceptors相关配置和案例分析,包括了Body Text Serializer配置、Avro Text Serializer配置、Timestamp Interceptor配置、Host Interceptor配置、Static Interceptor配置、Regex Filtering Interceptor配置。
9
Flume RPC Client开发
讲述如何进行 flume RPC Client开发,这个是在通常应用中使用的较多的一种方式。
10
Flume Sink和Flume Source开发
讲述如何进行 flume Sink、flume Source开发。


游客,如果您要查看本帖隐藏内容请回复

评分

参与人数 1技术 -1 收起 理由
llddy -1 链接失效

查看全部评分

9

主题

5869

帖子

4万

积分

Cib

Rank: 13Rank: 13Rank: 13Rank: 13

贡献
3
技术
15
活跃
6228
在线时间
1109 小时
发表于 2016-5-25 07:22:14 | 显示全部楼层
Flume视频教程分布式的海量日志采集

0

主题

4265

帖子

2万

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
3224
在线时间
918 小时
擅长技术
思科华为
发表于 2016-5-25 08:35:00 | 显示全部楼层
三通出品,必属精品

0

主题

1618

帖子

1万

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
864
在线时间
244 小时
发表于 2016-5-25 08:53:24 | 显示全部楼层
谢谢分享!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!111

0

主题

1618

帖子

1万

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
864
在线时间
244 小时
发表于 2016-5-25 08:55:53 | 显示全部楼层
百度网盘没有视频   360网盘才有视频

0

主题

496

帖子

3472

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
487
在线时间
88 小时
发表于 2016-5-25 09:31:06 | 显示全部楼层
好资源看看

1

主题

690

帖子

4698

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
733
在线时间
91 小时
发表于 2016-5-25 10:37:20 | 显示全部楼层
不错 谢谢分享!

3

主题

1261

帖子

9016

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
1436
在线时间
236 小时
擅长技术
思科华为
发表于 2016-5-25 11:28:38 | 显示全部楼层
谢谢楼主提供

0

主题

393

帖子

2590

积分

非洲旅游至今未归

贡献
-100
技术
0
活跃
356
在线时间
70 小时
发表于 2016-5-25 11:45:19 | 显示全部楼层
好资源看看
使用 高级模式(可批量传图、插入视频等)
您需要登录后才可以回帖 登录 | 立即注册

快速回复 返回顶部 返回列表