图书介绍

Flume日志收集与MapReduce模式【2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载】

（美）史蒂夫·霍夫曼（SteveHoffman），（美）斯里纳特·佩雷拉（SrinathPerera）著著
出版社：北京：机械工业出版社
ISBN：9787111502074
出版时间：2015
标注页数：164页
文件大小：42MB
文件页数：182页
主题词：数据采集

PDF下载

点此进入-本书在线PDF格式电子书下载【推荐-云解压-方便快捷】直接下载PDF格式图书。移动端-PC端通用
种子下载[BT下载速度快]温馨提示：（请使用BT下载软件FDM进行下载）软件下载地址页直链下载[便捷但速度慢] [在线试读本书] [在线获取解压码]

点击复制MD5值：629f04d2f6968402a2a13ff7c0ef756d

下载说明

Flume日志收集与MapReduce模式PDF格式电子书版下载

下载的文件为RAR压缩包。需要使用解压软件进行解压得到PDF格式图书。

点击复制85GB完整离线版磁力链接到迅雷FDM等BT下载工具进行下载详情点击-查看共享计划

建议使用BT下载工具Free Download Manager进行下载,简称FDM(免费,没有广告,支持多平台）。本站资源全部打包为BT种子。所以需要使用专业的BT下载软件进行下载。如BitComet qBittorrent uTorrent等BT下载工具。迅雷目前由于本站不是热门资源。不推荐使用！后期资源热门了。安装了迅雷也可以迅雷进行下载！

（文件页数要大于标注页数，上中下等多册电子书除外）

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

图书目录

上篇 Flume日志收集2

第1章概览与架构2

1.1 Flume 0.93

1.2 Flume 1.X （Flume-NG）4

1.3 HDFS与流式数据/日志的问题5

1.4 源、通道与接收器6

1.5 Flume事件7

1.5.1 拦截器、通道选择器与选择处理器8

1.5.2 分层数据收集（多数据流与代理）9

1.6 小结10

第2章 Flume快速起步11

2.1 下载Flume11

2.2 Flume配置文件概览13

2.3 从“Hello World”开始15

2.4 小结20

第3章通道22

3.1 内存通道23

3.2 文件通道25

3.3 小结29

第4章接收器与接收处理器31

4.1 HDFS接收器31

4.1.1 路径与文件名34

4.1.2 文件转储37

4.2 压缩编解码器38

4.3 事件序列化器38

4.3.1 文本输出39

4.3.2 带有头信息的文本39

4.3.3 Apache Avro39

4.3.4 文件类型41

4.3.5 超时设置与线程池43

4.4 接收器组44

4.4.1 负载均衡45

4.4.2 故障恢复45

4.5 小结46

第5章源与通道选择器48

5.1 使用tail的问题48

5.2 exec源50

5.3 假脱机目录源53

5.4 syslog源55

5.4.1 syslog UDP源56

5.4.2 syslog TCP源58

5.4.3 多端口syslog TCP源59

5.5 通道选择器61

5.5.1 复制62

5.5.2 多路复用62

5.6 小结63

第6章拦截器、ETL与路由65

6.1 拦截器65

6.1.1 Timestamp66

6.1.2 Host67

6.1.3 Static68

6.1.4 正则表达式过滤69

6.1.5 正则表达式抽取70

6.1.6 自定义拦截器74

6.2 数据流分层75

6.2.1 Avro源/接收器76

6.2.2 命令行Avro78

6.2.3 Log4J追加器79

6.2.4 负载均衡Log4J追加器81

6.3 路由82

6.4 小结83

第7章监控Flume85

7.1 监控代理进程86

7.1.1 Monit86

7.1.2 Nagios86

7.2 监控性能度量情况87

7.2.1 Ganglia87

7.2.2 内部HTTP服务器89

7.2.3 自定义监控钩子91

7.3 小结92

第8章万法皆空——实时分布式数据收集的现状93

8.1 传输时间与日志事件94

8.2 万恶的时区94

8.3 容量规划95

8.4 多数据中心的注意事项96

8.5 合规性与数据失效97

8.6 小结98

下篇 MapReduce模式102

第9章使用Java编写一个单词统计应用（初级）102

9.1 准备工作102

9.2 操作步骤103

9.3 示例说明103

第10章使用MapReduce编写一个单词统计应用并运行（初级）105

10.1 准备工作105

10.2 操作步骤106

10.3 示例说明106

10.4 补充说明109

第11章在分布式环境中安装Hadoop并运行单词统计应用（初级）110

11.1 准备工作111

11.2 操作步骤112

11.3 示例说明116

第12章编写格式化器（中级）117

12.1 准备工作118

12.2 操作步骤118

12.3 示例说明119

12.4 补充说明121

第13章分析——使用MapReduce绘制频度分布（中级）122

13.1 准备工作123

13.2 操作步骤123

13.3 示例说明125

13.4 补充说明128

第14章关系操作——使用MapReduce连接两个数据集（高级）129

14.1 准备工作130

14.2 操作步骤130

14.3 示例说明131

14.4 补充说明134

第15章使用MapReduce实现集合操作（中级）135

15.1 准备工作135

15.2 操作步骤136

15.3 示例说明137

15.4 补充说明140

第16章使用MapReduce实现交叉相关（中级）141

16.1 准备工作141

16.2 操作步骤142

16.3 示例说明142

16.4 补充说明145

第17章使用MapReduce实现简单搜索（中级）146

17.1 准备工作147

17.2 操作步骤147

17.3 示例说明148

17.4 补充说明150

第18章使用MapReduce实现简单的图操作（高级）151

18.1 准备工作152

18.2 操作步骤152

18.3 示例说明153

18.4 补充说明157

第19章使用MapReduce实现Kmeans（高级）158

19.1 准备工作159

19.2 操作步骤159

19.3 示例说明160

19.4 补充说明164