在ELKK的架构中,各个框架的角色分工如下:
ElasticSearch1.7.2:数据存储+全文检索+聚合计算+服务端
Logstasch2.2.2:日志收集与分发推送
Kafka0.9.0.0:分布式高可靠消息队列+数据...
先来整体熟悉下Kafka的一些概念和架构
(一)什么是Kafka?
Kafka是由LinkedIn开发并开源的一个分布式消息系统,因其分布式和高吞吐率被广泛应用,现在已经在Hadoop和Spark等大数据的生态系统中成为一...
(一)Hbase协处理器的前世今生
Hbase是仿照Google的BigTable设计的,而其协处理器也是仿照BigTable的协处理实现完成的,具体链接可
参考:http://research.google.com/pe...
在大数据时代,列式存储变得越来越流行了,当然并不是说行式存储就没落了,只是针对的场景不同,行式存储的代表就是我们大多数时候经常用的数据库,比较适合数据量小,字段数目少,查询性能高的场景,列式存储主要针对大多数互联网公司中的业...
古时候,人们用一头牛拉不动一个耕地的犁时,不会去找个比这头牛更大的牛,而是会直接使用两个牛一起参与耕地。在分布式计算中,道理同样如此,Hadoop就是一个典型的例子。诸如此类的有很多,这就是典型水平切分架构。早期的solr仅...
Flume是Cloudrea公司开源的一款优秀的日志收集框架,主要经历了两个大的版本,分别是
Flume-OG
Flume-NG
OG是0.9.x的版本,依赖zookeeper,角色职责不够单一,
NG是新版本指1.x的版本...
文摘归档
- 2018年04月(5)
- 2018年03月(11)
- 2018年02月(2)
- 2018年01月(1)
- 2017年12月(1)
- 2017年11月(3)
- 2017年10月(1)
- 2017年07月(4)
- 2017年06月(3)
- 2017年05月(2)
- 2017年04月(7)
- 2017年03月(6)
- 2017年02月(3)
- 2017年01月(5)
- 2016年10月(1)
- 2016年09月(6)
- 2016年07月(2)
- 2016年06月(6)
- 2016年05月(8)
- 2016年04月(8)
- 2016年03月(7)
- 2016年02月(6)
- 2016年01月(11)
- 2015年12月(7)
- 2015年11月(12)
- 2015年10月(5)
- 2015年09月(5)
- 2015年08月(6)
- 2015年07月(11)
- 2015年06月(10)
- 2015年05月(3)
- 2015年04月(9)
- 2015年03月(11)
- 2015年02月(3)
- 2015年01月(6)
- 2014年12月(13)
- 2014年11月(9)
- 2014年10月(16)
- 2014年09月(17)
- 2014年08月(20)
- 2014年07月(5)
- 2014年06月(1)
- 2014年05月(1)
- 2014年03月(3)
- 2014年01月(2)
- 2013年12月(3)
- 2013年11月(19)
- 2013年10月(7)
- 2013年09月(4)
- 2013年08月(7)
- 2013年07月(2)
阅读排行榜
- 海量可视化日志分析平台之ELK搭建 (16933)
- 干货来袭之Python3.4如何读写Excel? (14624)
- Hadoop可视化分析利器之Hue (13682)
- 如何在Intellij IDEA中拉svn分支? (6969)
- Python3.4+Django1.7+SQLite3实现增删改查 (4385)
- Intellj IDEA +SBT + Scala + Spark Sql读取HDFS数据 (3329)
- 基于ELK+Beats进行系统监控 (3253)
- Hadoop集群搭建完毕后,如何测试是否正常工作? (2884)
- 请小心Hadoop2.5.0和Java Web项目集成bug (2473)
- 如何远程读取CDH的hadoop上的HDFS数据? (1946)