我对ELK还是很陌生,想知道是否存在一种方法,可以将来自不同来源(例如MYSQL和Postgres)的两个数据库联接起来,并使用logstash在Elasticsearch中将其索引到单个索引。
因为我能够在pyspark的帮助下实现相同的目标。但我想尽可能使用日志存储实现相同的目的!
此外,请提出一些其他可行的方法来实现相同的目标,而不是火花和对数。
预先感谢!
我对ELK还是很陌生,想知道是否存在一种方法,可以将来自不同来源(例如MYSQL和Postgres)的两个数据库联接起来,并使用logstash在Elasticsearch中将其索引到单个索引。
因为我能够在pyspark的帮助下实现相同的目标。但我想尽可能使用日志存储实现相同的目的!
此外,请提出一些其他可行的方法来实现相同的目标,而不是火花和对数。
预先感谢!
您绝对可以通过使用jdbc
input从一个数据库中获取数据,然后将其与来自jdbc_static
来源的另一个数据库中的数据联接起来(如果数据不变)来实现此目标)或jdbc_streaming
(如果数据更改频率更高)过滤器。