我在mysql中有一个表,我想导入elasticsearch
例如,数据如下所示
team buyer
==== ======
one Q76876
one Q66567
one T99898
two Q45456
two S77676
我想使用logstash将其导入elasticsearch并创建一个如下所示的索引
{
"id": "one",
"team": one,
"buyers": ["Q76876", "Q66567", "T99898"]
},
{
"id": "two",
"team": "two",
"buyers": ["Q45456", "S77676"]
}
如何编写.conf脚本来实现这一点?
1条答案
按热度按时间uhry853o1#
除非应用一些过滤器,否则logstash会在事件到达时将其放入索引中。你的案子看起来很直截了当。如果您格式化sql查询以返回所需格式的数据,那么您不需要应用任何过滤器,只需连接数据库和sql查询以在logstash config中运行,并将输出作为ElasticSearch索引。
例如:
mysql查询看起来是这样的:(我不擅长mysql,下面只是给出一个想法-请验证它的工作原理)
这将返回如下结果:
logstash配置看起来很简单: