Elastic Stack recipes

2022-08-28 15:46:41 ​Про методы оптимизации производительности Elasticsearch уже было написано много статей. Чтобы убедиться в улучшении производительности нет ничего лучше практического стресс-теста. Именно для этих целей и была придумана утилита Rally.

Можно сравнить разницу в производительности между различными версиями Elasticsearch еще до того, как вы решите обновиться с одной версии до другой. Стресс-тестирование позволит убедить начальника, что обновление необходимо.

Если вы не будете строить планы на развитие вашего кластера Elasticsearch, со временем можете упереться в предел производительности. Планирование мощностей — это долгосрочная деятельность. Нужно заранее знать, сколько узлов требуется кластеру Elasticsearch, конфигурацию каждого узла и ограничение производительности записи и чтения кластера. Если у вас нет этой информации, вы никогда не занимались планированием мощностей, то вам просто повезло, что у вас не возникало никаких проблем.

esrally: Official Stress Testing Tool for Elasticsearch Открыть/Комментировать

2022-08-27 12:31:44 Выбор шипперов/обработчиков для ElasticSearch/OpenSearch состоит не из полутора инструментов. Их достаточно много и каждый обладает определенным преимуществом. В этой статье краткий обзор Logstash, Fluentd, FluentBit и Vector.

Logstash, Fluentd, Fluent Bit, or Vector? How to Choose the Right Open-Source Log Collector Открыть/Комментировать

2022-08-26 15:18:27 ​В этой статье о том, как использовать Kubernetes Operator для автомасштабирования кластеров Elasticsearch.

Autoscaling Elasticsearch/OpenSearch Clusters for Logs: Using a Kubernetes Operator to Scale Up or Down Открыть/Комментировать

2022-08-23 11:00:05 ​Elasticsearch Multi Datacenter Deployment with Apache Kafka

Бесплатная кросс-кластерная репликация при помощи Kafka. Ссылка. Открыть/Комментировать

2022-08-22 12:40:25 ​How to Change Sharding of Existing Indices on an Elasticsearch Cluster

«Бэст прэктис» рекомендует поддерживать размер шардов в пределах от 10 до 50 Гб, чтобы был баланс между слишком большим количеством шардов, вызывающих перегрузку кластера, и наличием больших шардов, затрудняющих восстановление кластера. В дополнение к этому, поддержание одинакового размера шарда и количества шардов, кратного узлам, поможет равномерно распределить сегменты, уменьшив перекосы в хранении и производительности.

Ссылка. Открыть/Комментировать

2022-08-18 16:28:51 ​Elasticsearch custom sorting script

В этой статье о сортировке результатов поиска при помощи painless Открыть/Комментировать

2022-08-18 13:05:03 ​Monitor Elasticsearch with Kube-Prometheus

В этой статье:

How to monitor Elasticsearch with Kube-Prometheus
Elasticsearch Exporter
Elasticsearch Exporter — Helm
Elasticsearch Exporter and Terraform
Deploy Elasticsearch Exporter using Terraform
Kubernetes Servicemonitor

Читать дальше. Открыть/Комментировать

2022-08-17 11:07:52 ​Do you need ElasticSearch when you have PostgreSQL?

Когда Elasticsearch ту мач и когда будет достаточно PostgreSQL. В этой статье опыт компании Qonto и их небольшой ресерч производительности обоих конкурсантов. Открыть/Комментировать

2022-07-30 11:00:04 ​Data Pipeline from Kafka To Elastic-search using logstash

В этой статье о настройке logstash для ввода из топиков Kafka, трансформации данных и их публикации в индексе Elasticsearch. Открыть/Комментировать

2022-07-29 10:00:08 ​Elasticsearch Indexing Strategy in Asset Management Platform (AMP)

Статья о подходе Netflix к хранению каталога данных в Elasticsearch. Открыть/Комментировать