本文主要是介绍如何使用 Flink Connectors —— ElasticSearch?,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
准备环境和依赖
ElasticSearch 安装
因为在 2.1 节中已经讲过 ElasticSearch 的安装,这里就不做过多的重复,需要注意的一点就是 Flink 的 ElasticSearch Connector 是区分版本号的。
所以添加依赖的时候要区分一下,根据你安装的 ElasticSearch 来选择不一样的版本依赖,另外就是不同版本的 ElasticSearch 还会导致下面的数据写入到 ElasticSearch 中出现一些不同,我们这里使用的版本是 ElasticSearch6,如果你使用的是其他的版本可以参考官网的实现。
添加依赖
<dependency><groupId>org.apache.flink</groupId><artifactId>flink-connector-elasticsearch6_${scala.binary.version}</artifactId><version>${flink.version}</version>
</dependency>
上面这依赖版本号请自己根据使用的版本对应改变下。
Flink 写入数据到 ElasticSearch 应用程序
ESSinkUtil 工具类
这个工具类是自己封装的,getEsAddresses 方法将传入的配置文件 es 地址解析出来,可以是域名方式,也可以是 ip + port 形式。addSink 方法是利用了 Flink 自带的 ElasticsearchSink 来封装了一层,传入了
这篇关于如何使用 Flink Connectors —— ElasticSearch?的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!