利用 Docker Compose 部署 Elasticsearch+Logstash+Kibana-JavaScript中文网-JavaScript教程资源分享门户

前言

Elasticsearch+Logstash+Kibana(ELK) 组合已经成为了处理大规模数据的热门方案之一，但是搭建 ELK 环境时存在很多挑战：

安装、配置、调优难度大，需要大量专业知识
ELK 节点之间的协作比较复杂，容易出现问题
数据存储和处理任务量大，通常需要大量计算和存储资源

这时候，Docker就成为了解决这些问题的利器。本文将介绍如何利用 Docker Compose 部署 ELK，让大家轻松搭建 ELK 环境。

Docker Compose 介绍

Docker Compose 是一个用于在 Docker 中定义和运行多个容器的工具，通过一个 YAML 文件来配置应用程序的服务，并通过一个命令就可以启动所有的服务。

Docker Compose 基本概念：

Service：服务，每个服务定义了容器的运行方式、依赖关系和其他配置信息。
Container：Docker 容器，一个独立的、运行中的 Docker 容器。
Image：镜像，一个用于创建 Docker 容器的文件，类似于虚拟机中的镜像文件。
Compose File：Docker Compose 的配置文件，用于定义多个服务、容器及其关系。

ELK 环境介绍

ELK 是一组开源软件：Elasticsearch、Logstash 和 Kibana。

Elasticsearch：分布式的实时搜索和分析引擎，能够处理海量数据，并可以通过 REST API 进行数据访问。
Logstash：一个开源的数据处理引擎，能够从各种数据源中实时采集、转换、解析和输出数据。
Kibana：一个基于 Web 的界面，提供了用于搜索、分析和可视化 Elasticsearch 数据的接口。

部署 ELK 环境

Docker Compose 配置

下面是一个简单的 Docker Compose 配置，用于启动 ELK 环境：

// javascriptcn.com 代码示例
version: '3'
services:

  elasticsearch:
    image: docker.elastic.co/elasticsearch/elasticsearch:6.4.2
    environment:
      - discovery.type=single-node
    ports:
      - 9200:9200

  logstash:
    image: docker.elastic.co/logstash/logstash:6.4.2
    volumes:
      - ./logstash/pipeline:/usr/share/logstash/pipeline/
    depends_on:
      - elasticsearch

  kibana:
    image: docker.elastic.co/kibana/kibana:6.4.2
    ports:
      - 5601:5601
    depends_on:
      - elasticsearch

在上面的配置文件中，我们定义了三个服务：

elasticsearch：Elasticsearch 服务。
logstash：Logstash 服务。
kibana：Kibana 服务。

启动 ELK 环境

首先，我们需要安装 Docker Compose。在本地命令行中执行以下命令：

$ curl -L https://github.com/docker/compose/releases/download/1.23.2/run.sh > /usr/local/bin/docker-compose
$ chmod +x /usr/local/bin/docker-compose

然后，在保存配置文件为 docker-compose.yml 文件后，使用以下命令启动 ELK 环境：

$ docker-compose up -d

启动后，可以通过以下命令查看容器的状态：

$ docker-compose ps

使用 ELK 环境

现在我们已经启动了 ELK 环境，可以通过以下地址访问 Kibana 界面：

http://<服务器 IP 地址>:5601

在这个页面上，我们可以搜索、分析和可视化 Elasticsearch 数据。

示例代码

为了更方便地使用 ELK 环境，我们提供以下示例代码：

#!/bin/bash

# 通过 curl 的方式向 Elasticsearch 中添加数据
curl -XPUT http://localhost:9200/my_index/my_type/1 -d '{"message": "Hello World"}'

# 通过 logstash 向 Elasticsearch 中添加数据
echo '{"message": "Hello World"}' | \
docker exec -i elk_logstash_1 logstash -e 'input { stdin { } } output { elasticsearch { hosts => ["elasticsearch:9200"] } }'

总结

通过 Docker Compose，我们可以很方便地搭建和管理 ELK 环境。在实际使用中，我们也可以将 Docker Compose 配置文件作为基础配置，按照需要进行扩展和优化。相信本文对大家了解 ELK 和 Docker Compose 的组合有所帮助，也对大家在实际工作中使用 ELK 环境有指导意义。

来源：JavaScript中文网，转载请注明来源本文地址：https://www.javascriptcn.com/post/653528987d4982a6ebb50c52