Docker 方式部署 ELK(Elasticsearch+Logstash+Kibana)

在现代化的应用程序中,日志是非常重要的一部分。日志可以帮助我们了解应用程序的运行情况,发现问题并进行调试。ELK(Elasticsearch+Logstash+Kibana)是一个非常流行的日志分析平台,它可以帮助我们收集、分析和可视化日志数据。在本文中,我们将介绍如何使用 Docker 方式部署 ELK。

前置条件

在开始之前,您需要安装 Docker 和 Docker Compose。如果您还没有安装,请前往 Docker 官网下载安装程序。

准备工作

为了部署 ELK,我们需要创建一个 Docker Compose 文件。在项目根目录下创建一个名为 docker-compose.yml 的文件,并添加以下内容:

-------- ---

---------
  --------------
    ------ ---------------------------------------------------
    --------------- -------------
    ------------
      - --------------------------
    ------
      - ---------
    --------
      - ----------------------------------

  ---------
    ------ -----------------------------------------
    --------------- --------
    -------- -------- -- ------------------------------------------
    -----------
      - -------------
    ------
      - ---------
    --------
      - ------------------------------------------------

  -------
    ------ -------------------------------------
    --------------- ------
    -----------
      - -------------
    ------
      - ---------

--------
  -----

上面的 Docker Compose 文件定义了三个服务:Elasticsearch、Logstash 和 Kibana。这三个服务都使用了 Elastic 官方提供的 Docker 镜像,并且定义了一些配置项。

Elasticsearch

Elasticsearch 是一个分布式的搜索和分析引擎,它可以帮助我们存储和查询大量的数据。在本例中,我们使用了 docker.elastic.co/elasticsearch/elasticsearch:7.9.2 镜像,它是 Elasticsearch 7.9.2 的官方 Docker 镜像。

我们定义了一个名为 elasticsearch 的服务,并将其映射到主机的 9200 端口。此外,我们还定义了一个名为 data 的 Docker 卷,用于持久化 Elasticsearch 的数据。

Logstash

Logstash 是一个数据收集和处理引擎,它可以帮助我们从不同的来源收集和处理数据。在本例中,我们使用了 docker.elastic.co/logstash/logstash:7.9.2 镜像,它是 Logstash 7.9.2 的官方 Docker 镜像。

我们定义了一个名为 logstash 的服务,并将其映射到主机的 5044 端口。我们还定义了一个名为 ./logstash/pipeline 的本地目录,并将其映射到 Logstash 容器中的 /usr/share/logstash/pipeline 目录,用于存放 Logstash 的配置文件。

Kibana

Kibana 是一个数据可视化工具,它可以帮助我们将数据转换为可视化的图表和仪表盘。在本例中,我们使用了 docker.elastic.co/kibana/kibana:7.9.2 镜像,它是 Kibana 7.9.2 的官方 Docker 镜像。

我们定义了一个名为 kibana 的服务,并将其映射到主机的 5601 端口。我们还指定了 depends_on 配置项,表示 Kibana 服务依赖于 Elasticsearch 服务。

配置 Logstash

在 Logstash 容器中,我们需要创建一个名为 logstash.conf 的配置文件,用于定义 Logstash 的数据管道。在 ./logstash/pipeline 目录下创建一个名为 logstash.conf 的文件,并添加以下内容:

----- -
  ----- -
    ---- -- ----
  -
-

------ -
  ------------- -
    ----- -- ----------------------
    ----- -- -------------------------------------------------------------
  -
-

上面的配置文件定义了一个 Beats 输入插件,用于从 Beats 客户端收集数据。我们还定义了一个 Elasticsearch 输出插件,用于将收集的数据存储到 Elasticsearch 中。

启动 ELK

现在,我们已经准备好了 Docker Compose 文件和 Logstash 配置文件,可以启动 ELK 服务了。在项目根目录下运行以下命令:

-------------- --

这个命令会启动 Elasticsearch、Logstash 和 Kibana 服务,并将它们连接到一个 Docker 网络中。在启动过程中,您可以在控制台中查看服务的日志输出。

使用 Kibana

一旦 ELK 服务启动完成,您可以通过浏览器访问 Kibana 的 Web 界面,地址为 http://localhost:5601。在 Kibana 中,您可以创建索引模式、可视化和仪表盘,以帮助您分析和可视化收集的数据。

总结

在本文中,我们介绍了如何使用 Docker 方式部署 ELK(Elasticsearch+Logstash+Kibana)。通过使用 Docker Compose 文件和 Logstash 配置文件,我们可以轻松地启动和管理 ELK 服务。ELK 是一个非常强大的日志分析平台,它可以帮助我们收集、分析和可视化日志数据,以便更好地了解应用程序的运行情况。

来源:JavaScript中文网 ,转载请联系管理员! 本文地址:https://www.javascriptcn.com/post/65045dcc95b1f8cacd104faa


猜你喜欢

  • 在 Ubuntu 上使用 PM2 启动 Node.js 应用

    简介 当我们部署一个 Node.js 应用时,我们需要确保它可以在后台长时间运行,并且在崩溃或异常情况下自动重启。PM2 是一个流行的进程管理器,可以解决这些问题,并提供许多有用的功能。

    1 年前
  • LESS 圣杯布局技术详解及实现方法

    概述 在前端开发中,页面布局是一个需要经常处理的问题。其中,圣杯布局技术是一种广泛应用的技术之一。本文将详细介绍 LESS 圣杯布局技术的实现方法。通过本文的学习,您将掌握 LESS 圣杯布局技术的基...

    1 年前
  • 使用 zip() 函数对 RxJS 流进行数据对齐

    在前端开发领域中,RxJS 是一个强大的响应式编程库,它提供了丰富的操作符来处理流数据。其中,zip() 函数是一个十分实用的操作符,通过它可以将多个流中的数据捆绑在一起,实现数据对齐和同步处理。

    1 年前
  • SASS 环境安装及基础使用入门教程

    SASS 是一种 CSS 预处理器,它可以让我们在编写 CSS 时使用变量、嵌套、混入等高级语言特性,大大提高了前端代码的可维护性和可读性。本文将介绍如何安装 SASS 环境并进行基础使用。

    1 年前
  • 报错解决:The Service Worker file specified could not be parsed correctly with webpack's loader syntax

    在前端开发过程中,使用 Service Worker 可以使应用具备离线缓存功能,提高用户体验。但是在使用 webpack 来打包构建应用时,出现了一个常见的问题:Service Worker 文件无...

    1 年前
  • ECMAScript 2017 中的新特性之静态方法扩展

    ECMAScript 2017 中的新特性之静态方法扩展 在 ECMAScript 2017 中,静态方法扩展为 JavaScript 开发者提供了更多方便快捷的方式来操作对象、数组、字符串等类型的数...

    1 年前
  • Serverless 应用场景实现:如何通过 AI 技术进行信誉分析

    Serverless 是一种流行的云计算模型,它让开发人员可以不必考虑服务器基础设施的运维问题,只需要关注应用程序的逻辑。在这篇文章中,我们将介绍如何使用 Serverless 和 AI 技术实现信誉...

    1 年前
  • Custom Elements 中使用 JavaScript 集成库的实现技巧

    Custom Elements 是 Web Components 的核心概念之一,它是用来扩展 HTML 元素的原生 API,可以让你创建自定义的、可重用的 HTML 元素,从而实现组件化开发。

    1 年前
  • PWA 技术探索:Reactive Programming 和 RxJS

    前言 PWA (Progressive Web Apps) 是一种新型的 Web 应用,它能够像原生应用一样进行一些功能,比如离线可访问、推送通知等。而 Reactive Programming(响应...

    1 年前
  • MongoDB 文档过期处理方案及实践

    在使用 MongoDB 数据库时,我们经常需要对文档进行过期处理。比如说,我们可能希望在一定时间后自动删除一些数据,或者标记一些数据为无效数据。MongoDB 提供了 TTL(Time-To-Live...

    1 年前
  • 服务器端需要做的准备工作 —— HTML5 Server-sent Events

    简介 HTML5中的Server-sent Events提供了一种在服务端推送数据到客户端的实时通信方式。相较于传统的轮询或者WebSocket技术,SSE有诸多优势,比如易于实现、无需借助第三方库等...

    1 年前
  • 如何在 Kubernetes 中使用 Sidecar 容器来扩展功能

    在 Kubernetes 中,使用 Sidecar 容器是一种常见的方式来扩展应用程序的能力。Sidecar 容器是指一个与主应用容器并列运行的小型容器,其任务通常是为主应用提供补充功能或服务,比如日...

    1 年前
  • Deno 运行前如何进行代码热更新?

    Deno 是一个新兴的 JavaScript 运行时环境,和 Node.js 一样,可以在服务器和客户端上运行 JavaScript 代码。但是 Deno 有一个非常酷的功能,就是支持代码热更新。

    1 年前
  • 如何使用 ES12 中的 Number.format 方法格式化数字

    在前端开发中,我们时常需要对数字进行格式化以符合我们的需求。ES12 中新增了一个 Number.format 方法来方便地处理数字格式化,本文将介绍如何使用这个方法以及其与其他数字格式化方法的比较。

    1 年前
  • ES9 新增的正则表达式方法 matchAll,让匹配更加强大

    ES9(ECMAScript 2018)为我们带来了许多新的语言特性和 API,其中一项值得关注的更新就是正则表达式方法的新功能 - matchAll。虽然 match( ) 方法已经足够强大,但是 ...

    1 年前
  • [ES10 实践] JS 开发者必读:利用 ES10 中新增的 BigInt 解决数值计算问题

    如果在 JavaScript 中进行大数据运算,你可能会遇到精度丢失、溢出等问题。这在科学计算和财务领域中非常常见。幸运的是,在 ES10 中,BigInt 数据类型被正式纳入标准中,为我们提供了一种...

    1 年前
  • Cypress 测试框架:如何处理动态生成的元素?

    Cypress 是一个现代化的 JavaScript 测试框架,它能够帮助前端开发人员进行端到端的自动化测试,其中包括 UI 测试和 API 测试。在实际的项目中,我们经常会遇到动态生成的元素,例如通...

    1 年前
  • RxJS 中使用 publish() 和 connect() 函数处理多个订阅者

    RxJS 是前端开发中常用的一个响应式编程库。在 RxJS 中,我们可以使用多种方式来处理多个订阅者的情况。其中,publish() 和 connect() 这两个函数是特别重要的。

    1 年前
  • 分享我的 Dockerfile 文件配置

    介绍 Docker 是一个开源的应用容器引擎,可以让开发者将应用封装在一个可移植的容器中,从而快速部署到不同的环境中。Dockerfile 是 Docker 容器的构建文件,它可以指导 Docker ...

    1 年前
  • ECMAScript 2017 中 Promise 的链式调用详解

    ECMAScript 2017 中 Promise 的链式调用详解 在前端开发中,异步操作是非常常见的。在处理异步操作时,我们经常用到 Promise。而 ECMAScript 2017 中对 Pro...

    1 年前

相关推荐

    暂无文章