我想请问一下大家 ElasticSearch 的问题

2019-03-11 23:45:16 +08:00
 luozhiyun

最近我在做一个需求,这个需求需要用到千万级别的数据进行聚合统计做报表,这个报表的结果和前台的查询条件有关

所以我突然想起了 ES,不知道有没有老哥做过千万级别的数据进行复杂的数据聚合,这个聚合 ES 能吃的消吗?性能怎么样?能实时进行计算吗?

3823 次点击
所在节点    程序员
25 条回复
Wisho
2019-03-12 15:43:30 +08:00
讲道理，ES 的 aggregation 不是很快，也不是它的强项。以“实时”作为标准的话，当 aggregation 条件很复杂的时候 ES 还是挺慢的。
luozhiyun
2019-03-12 16:00:57 +08:00
@notreami 你说的这两个没有研究过呀 ....
fireapp
2019-03-12 16:01:44 +08:00
1 亿条，每条 1k，是 10G，单机 grep 加 awk 一两分钟的事，你们为啥要搞的那么复杂? 搞不懂
liyer
2019-03-12 16:10:46 +08:00
es 搭配 kibana
完美
90safe
2019-03-12 16:13:21 +08:00
千万级别小玩意啦，我玩 ES 都是单机上亿查

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/543509

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX