- 欢迎访问悠扬的技术博客，推荐使用最新版火狐浏览器和Chrome浏览器访问本网站😉
input{
file{
#注意文件路径名需要绝对路径
path => “E:/nginx/logs/error.log”
#如果想要监听多个目标文件可以改成数组
path => [“E:/nginx/logs/error.log”,“E:/nginx/logs/access.log&……继续阅读 »
kibana常用命令查询索引
在数据同步时，我们需要使用一些常用查询，来确认脚本及索引情况，下面的常用命令可以帮到大家
1.查询几条数据来看看数据同步情况
GET idx_znyg_xxx/_search
{
"size":10,
"query": {
"match_all": {}
}
……继续阅读 »
logstash数据同步ES相关
同步数据时，Elasticsearch配合脚本的相关处理设置
1.模板创建更新
在kibana中执行，或者直接给ES发送请求，你懂得，不懂得百度下ES创建template
PUT /_template/test-xxx
{
"template": "idx_znyw_d……继续阅读 »
使用logstash同步mysql数据至ElasticSearch,logstash脚本及同步时ElasticSearch相关模板处理
1. logstash脚本编写（采用单文件对应单表实例）
新建脚本文件夹
cd /usr/local/logstash mkdir sql & cd sql
vi……继续阅读 »
1. Logstash介绍
Logstash是一个数据流引擎：
它是用于数据物流的开源流式ETL引擎,在几分钟内建立数据流管道,具有水平可扩展及韧性且具有自适应缓冲,不可知的数据源,具有200多个集成和处理器的插件生态系统,使用Elastic Stack监视和管理部署
Logstash包含3个主要部分： 输入(input……继续阅读 »
