ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

【Elasticsearch】我们如何在 5 天内在同一个 Elasticsearch 集群中重新索引 360 亿份文档

2021-06-02 21:57:38  阅读:171  来源: 互联网

标签:映射 索引 文档 运行 集群 Elasticsearch 360


在这里插入图片描述

1.概述

翻译:https://thoughts.t37.net/how-we-reindexed-36-billions-documents-in-5-days-within-the-same-elasticsearch-cluster-cd9c054d1db8

这篇文章以及更多内容现在是我的免费电子书的一部分,可以在 Github 上找到运行 Elasticsearch for Fun and Profit 的内容。分叉它,给它加星标,打开问题并发送 PR!

在Synthesio,我们在各个地方使用ElasticSearch来运行复杂的查询,眨眼间从数百亿个文档中获取多达 5000 万个丰富的文档。Elasticsearch 使其快速且易于扩展,其中在多个 MySQL 集群上运行相同的查询需要几分钟,并且在途中会导致一些服务器崩溃。每一天,我们都在进一步推动 Elasticsearch 的边界,深入了解其内部结构会带来更多的爱。

上周,我们决定使用全新的映射重新索引 136TB 数据集。在大型索引上更新 Elasticsearch 映射很容易

标签:映射,索引,文档,运行,集群,Elasticsearch,360
来源: https://blog.csdn.net/qq_21383435/article/details/117459693

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有