电子技术论坛_中国专业的电子工程师学习交流社区-中电网技术论坛

标题: 使用 ELK Stack 集中 IBM Bluemix 应用程序日志（1） [打印本页]

作者: look_w 时间: 2018-6-23 10:33 标题: 使用 ELK Stack 集中 IBM Bluemix 应用程序日志（1）

在 IBM 中，应用程序实例可以随时消失（比如在重新启动应用程序或者将它移动到不同主机的时候），这使得程序调试变得很困难。除了应用程序的日志消息之外，通过 Bluemix 记录事件数据也有助于故障排除，这些数据总是转瞬即逝。在试图发现服务器或应用程序中的问题时，集中应用程序日志可能很有用，因为这允许您在一个地方搜索所有日志。它还允许通过在特定的时间范围内关联日志，让您识别跨多个服务器的问题。在本教程中，我们将向您展示如何使用的 ELK Stack 组件（Elasticsearch、Logstash 和 Kibana）为持久存储日志提供一个集中的存储位置，以及如何使用这些组件来分析和可视化日志数据。

“将日志保存在一个地方，这样您就可以搜索它们，而且可能获得对您的应用程序的前所未知的见解。这还有助于您可视化各种指标，比如谁在访问应用程序，哪些部分被用得最多。”

在本教程中，我们将介绍安装和配置 ELK Stack 组件的必要步骤。还将解释如何在一个单独的 Ubuntu 服务器上安装 Elasticsearch 和 Logstash，如何创建一个 Bluemix 服务，使用它充当您的 Bluemix 应用程序的日志输出（log drain）服务，以及如何使用在 Bluemix 中部署 Kibana。最后，我们将介绍一些基础知识，让您了解如何在 Kibana 中创建一个自定义仪表板来可视化您的日志数据。
构建您的应用程序需要做的准备工作

一个 Ubuntu 服务器（我们使用的是版本 14.04 LTS），它具有一个对您的 Bluemix 应用程序可见的 IP 地址。（如果无权访问 Ubuntu 服务器，请按照下的指令进行操作。）
Java sudo apt-get install openjdk-7-jre
一个开放了端口 5000、5514 和 9200 的防火墙
对如何使用推送 Bluemix 应用程序非常熟悉

提供一个 SoftLayer 服务器（可选）如果您无权访问 Ubuntu 服务器，那么可以通过使用以下步骤提供一个 SoftLayer 服务器：

通过输入您的帐号和计费信息，在上注册获得一个免费试用版。
在 Configure Your Server 部分，选择您想要的 Data Center、Hostname 和 Domain Name。对于 Operating System，可以选择 Ubuntu Linux 14.04 LTS Trusty Tahr – Minimal Install（64 位）。
在配置服务器之后，在上的设备列表中查看它。注意您的公共 IP 地址。
要通过 SSH 进入服务器，必须确定帐号信息，您可以在上找到这些信息。将您的鼠标悬停在密码上来查看它或更改它。
现在，您知道了根用户的密码，可以通过 SSH 使用您的首选方法进入 SoftLayer 服务器。要设置一个 SSH 密钥，请参阅 SoftLayer 文档中的 SSH Keys 页面。

步骤 1. 理解 ELK             Stack在设置您自己的 ELK 堆栈之前，了解一点关于该堆栈及其组件的知识会对您有所帮助。
ELK Stack 由三个组件组成：、和。
Logstash 是一个用来管理日志的工具。它支持几乎任何类型的日志，包括系统日志、错误日志和自定义应用程序日志。它可以从许多来源接收日志，这些来源包括             syslog、消息传递（例如 rabbitmq）和 jmx，它能够以多种方式输出数据，包括电子邮件、websockets 和 Elasticsearch。
Elasticsearch 是一种全文的、实时的搜索和分析引擎，它存储通过 Logstash 索引的日志数据。它构建于 Apache Lucene             搜索引擎库之上，通过 REST 和 Java api 来公开数据。Elasticsearch 是可扩展的，构建它是为了供分布式系统使用它。
Kibana 是一个基于 Web 的图形界面，用于搜索、分析和可视化存储在 Elasticsearch 指标中的日志数据。它利用             Elasticsearch 的 REST 接口来检索数据，不仅允许用户创建他们自己的数据的定制仪表板视图，还允许他们以特殊的方式查询和过滤数据。
下图说明了如何使用 ELK Stack 组件从 IBM Bluemix 收集日志数据。

步骤 2. 安装 Logstash

从（目前版本 1.4.2）的 Logstash 部分下载 logstash 核心下载 tar 文件。
为 Logstash 创建一个目标目录（例如，mkdir ~/logstash）。
将 tar 文件提取到目标目录：tar -xvfz logstash-1.4.2.tar.gz。

欢迎光临电子技术论坛_中国专业的电子工程师学习交流社区-中电网技术论坛 (http://bbs.eccn.com/)