google guava类库介绍

发表于 2015-07-26 | 分类于 java | | 阅读次数

Guava是一个Google开发的基于java的扩展项目，提供了很多有用的工具类，可以让java代码更加优雅，更加简洁 ...

java内置的线程池笔记

发表于 2015-07-24 | 分类于 java | | 阅读次数

写这篇博客的时候又刚好想起了当时自己实习的时候遇到的一个问题。1000个爬虫任务使用了多线程的处理方式，比如开5个线程处理这1000个任务 ...

发表于 2015-07-20 | 分类于 flume | | 阅读次数

分析Flume HDFSSink写hdfs文件过程

发表于 2015-07-14 | 分类于 flume | | 阅读次数

根据项目的经验，介绍几个flume比较有用的功能...

发表于 2015-07-12 | 分类于 elasticsearch | | 阅读次数

Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，使用RESTful web暴露接口 ...

发表于 2015-07-07 | 分类于 flume | | 阅读次数

Flume运行的主类是org.apache.flume.node.Application的main方法 ...

发表于 2015-06-23 | 分类于 flume | | 阅读次数

Flume内置了很多Sink，比如HDFS Sink, Hive Sink, File Roll Sink, HBase Sink, ElasticSearch Sink等 ...

发表于 2015-06-22 | 分类于 flume | | 阅读次数

Flume内置了很多Channel，比如Memory Channel, JDBC Channel, Kafka Channel, File Channel等 ...

发表于 2015-06-21 | 分类于 flume | | 阅读次数

Flume内置了很多Source，比如Avro Source，Spooling Directory Source，NetCat Source，Kafka Source等 ...

发表于 2015-06-21 | 分类于 flume | | 阅读次数

Flume是一个分布式的，效率高的用来收集日志数据的开源框架。它的架构是基于流式数据，有3个重要的组件，分别是Source，Channel和Sink