一、引言
目前网站的一些业务数据存在数据库中,这些数据往往需要做进一步的分析,如:需要根据一些日志数据关联分析,或者需要进行一些如机器学习的分析。在阿里云上,目前E-Mapreduce能满足这种分析的需求。
【mysql】 【RDS】 【hadoop】 【Apache】 【配置】 【Maven】 【spark】 …
Nov
05
2018
Apr
09
2018
Dec
21
2017
98.4.1. input
98.4.1.1. 标准输入输出
root@netkiller ~ % /usr/share/logstash/bin/logstash -e "input
{stdin{}} output {stdout{}}" Helloworld ...
【redis】 【mysql】 【LOG】 【path】 【配置】 【logstash】 【pipeline】 【JDBC】 …
Nov
15
2017
Oct
27
2017
阅读此文请先阅读上文:[大数据]-Elasticsearch5.3.1
IK分词,同义词/联想搜索设置,前面介绍了ES,Kibana5.3.1的安装配置,以及IK分词的安装和同义词设置,这里主要记录Logstash导入mysql数据到Elasticsearch5.3.1并设置IK分词和同义词。
【mysql】 【数据库】 【配置】 【logstash】 【string】 【pipeline】 …
Oct
07
2017
Sep
23
2017
Aug
25
2017
今天在使用Logstash的jdbc_input插件同步Mysql数据时,本来应该能搜索出10条数据,结果在Elasticsearch中只看到了4条,终端中只给出了如下信息
[2017-08-25T13:31:04,084][INFO ][logstash.pipeline ]Pipeline
terminated ”main”> 看不出所以然,到 logstash 的日志 logs
目录下看最新的日志,发现了一些信息。
【mysql】 【日志】 【logstash】 【同步】 【exception】 【pipeline】 …
Aug
01
2017
Dec
06
2016