服务器运维
-
rsync同步文件步骤示例和命令详解
rsync可以在连个计算机(服务器)之间,或者两个本地目录之间同步文件。它也可以当作文件复制工具,替代cp和mv命令。这篇文章主要为大家介绍了rsync同步文件步骤示例和命令详解,有需要的朋友可以借鉴参考下,希望能够有所帮助 -
ELK elasticsearch cat API 介绍(5th)
回到ELK系列的第二篇,有一张详细信息图,这上面的每列是啥含义? 还有其它的API接口么?每个API接口能查看到啥信息? elasticsearch默认是以json格式响应数据的,这更适合程序的处理,而对于运维,在终端命令下查看易读性就差了,这就需要紧凑对齐的文本,分行分表格的展示数据。为此,elasticsearc... -
ELk elasticsearch 部署(3rd)
根据《ELK 产品支持的平台和软件》选定你所要安装的版本。这里将安装elasticsearch最新版本2.0.0。 1. jdk elasticsearch只支持Oracle java 和 OpenJDK。 在这里不再重复了,参见《ELK 部署指南》详细的不能再详细了。搞不定跟帖说明吧。 -
ELK elasticsearch yum 安装(4th)
比起tar包安装,以yum方式安装对于启动和关闭elasticsearch服务更为方便。而对于CentOS与Ubuntu而言,apt 安装比yum 更为方便。楼主工作前期中是以CentOS系统为主,后面也使用Ubuntu。在这两款系统切换中,刚开始是有些不为习惯的,慢慢就好。 下面主要是说下RPM包的一些安装路径和参... -
ELK elasticsearch 快照与恢复模块(6th)
elasticsearch 快照和恢复模块可以创建单个索引或者整个集群的快照到远程的仓库。在最初的版本只支持共享文件系统存储,但是现在,各种后端可用通过官方支持的存储插件。 -
ELK elasticsearch 1.7.2 升级到 2.0.0(7th)
一文费了老大劲闲扯了半天快照与恢复,就是为了本文升级做准备的。在升级前需考虑下面三件事: 查看阅读新版本的更改内容 在测试环境下测试升级 升级之前备份数据,升级后是不能再回滚到旧版本的 elasticsearch滚动升级过程,不会造成服务中断。elasticsearch提供两种升级类型:全集群重启和滚动升级。 -
ELK elasticsearch 插件管理(8th)
插件能额外扩展elasticsearch功能,提供各类功能等等。有三种类型的插件: java插件 只包含JAR文件,必须在集群中每个节点上安装而且需要重启才能使插件生效。 网站插件 这类插件包含静态web内容,如js、css、html等等,可以直接从elasticsearch服务,如head插件。只需在一个节点... -
ELK kibana 安装和插件管理(9th)
kibana 本质上是elasticsearch web客户端,是一个分析和可视化elasticsearch平台,可通过kibana搜索、查看和与存储在elasticsearch的索引进行交互。可以很方便的执行先进的数据分析和可视化多种格式的数据,如图表、表格、地图等。 -
ELK sense 编辑器(10th)
sense 是一个elasticsearch REST API交互式的控制台。Marvel 1.X 版本有带这个工具。Marvel2.X版本,sense从Marvel分离出来了,集成到kibana平台上了,作为kibana的一个插件。 -
ELK beats平台介绍(11th)
beats是一个代理,将不同类型的数据发送到elasticsearch。beats可以直接将数据发送到elasticsearch,也可以通过logstash将数据发送elasticsearch。 beats有三个典型的例子:Filebeat、Topbeat、Packetbeat。Filebeat用来收集日志,Topb... -
ELK beats通用配置说明(12th)
Beats配置文件是以YAML语法,该文件包含用于所有的beats的通用配置选项,以及其特点的选项。下面说说通用的配置,特定的配置要看各自beat文档。 通用的配置如下几部分: Shipper Output Logging(可选) Run Options(可选) -
ELK beats yum和命令行工具(13th)
ELK beats yum和命令行工具 -
ELK topbeat 部署指南(14th)
topbeat定期收集系统信息如每个进程信息、负载、内存、磁盘等等,然后将数据发送到elasticsearch进行索引。 topbeat收集的指标有: 系统统计信息 系统负载: 最后1分钟、最后5分钟、最后15分钟 CPU使用情况: user (和百分比), system, idle, IOWait等等 ... -
ELK Packetbeat 部署指南(15th)
Packetbeat 是一个实时网络数据包分析工具,与elasticsearch一体来提供应用程序的监控和分析系统。 Packetbeat通过嗅探应用服务器之间的网络通讯,来解码应用层协议类型如HTTP、MySQL、redis等等,关联请求与响应,并记录每个事务有意义的字段。 Packetbeat可以帮助我们快速发... -
ELK Packetbeat 协议和进程配置项(16th)
Packetbeat 协议部分包含支持每个协议的配置项,如ports, send_request, send_response 和 特定的协议选项。 目前Packetbeat支持以下协议: DNS HTTP Mysql PostgreSQL Redis Thrift-RPC MongoDB Memca... -
ELK kibana查询与过滤(17th)
在kibana中,可通过搜索查询过滤事务或者在visualization界面点击元素过滤。 创建查询 在Discover界面的搜索栏输入要查询的字段。查询语法是基于Lucene的查询语法。允许布尔运算符、通配符和字段筛选。注意关键字要大写。如查询类型是http,且状态码是302。type: http AND htt... -
ELK logstash 部署指南与版本变化(20th)
logstash是ELK重要组成部分,日志进一步的处理差不多都需要经过logstash来完成的,除非自己开发beats将数据处理好直接写入到elasticsearch中。 -
ELK logstash升级到2.0以及logstash-forwarder迁移到Filebeat(21st)
将从logstash1.5版本升级到2.1版本,以及将《ELK部署指南》中使用的logstash-forwarder转移到Filebeat上。升级步骤停止logstash以及发送到logstash的所有管道。更新apt或yum源或者下载新版包。安装新版的logstash。测试logstash配置文件是否正确。启动log... -
ELK logstash 结构(22nd)
logstash会给事件添加一些额外的信息,如@timestamp,标注事件发生的时间。host标注事件发生的主机。此外,还可能有下面几个信息: type:标记事件的唯一类型 tags:标记事件某方面属性,可以有多个标签。 每个事件就是一个ruby对象,可以随意的给事件添加或者删除字段。每个logstash过滤插... -
ELK logstash处理流程(23rd)
logstash处理事件有三个阶段:input ---> filter ---> output。input产生事件,filter 对事件进行修改,output输出到其它地方。input和output支持解码,可以对进入的或者退出管道的数据进行编码或解码而无需单独经过过滤器处理。