400+节点的 Elasticsearch 集群运维

  1. 云栖社区>
  2. 博客>
  3. 正文

400+节点的 Elasticsearch 集群运维

nodexy 2019-03-12 17:24:01 浏览567
展开阅读全文

本文首发于InfoQ https://www.infoq.cn/article/1sm0Mq5LyY_021HGuXer

作者:Anton Hägerstrand 

翻译:杨振涛 


目录

1.数据量

2.版本

3.节点配置

4.索引结构

5.性能


Meltwater 每天要处理数百万量级的帖子数据,因此需要一种能处理该量级数据的存储和检索技术。

1620

从0.11.X 版本开始我们就已经是Elasticsearch的忠实用户了。在经历了一些波折之后,最终我们认为做出了正确的技术选型。

Elasticsearch 用于支持我们的主要媒体监控应用,客户通过该应用可以检索和分析媒体数据,比如新闻文章、(公开的)Facebook 帖子、Instagram 帖子、博客和微博。我们通过使用一个混合API来收集这些内容,并爬取和稍作加工,使得它们可被Elasticsearc

网友评论

登录后评论
0/500
评论
nodexy
+ 关注