ES2.x版本的javaAPI使用实例

2024-02-20 06:38
文章标签 java 使用 实例 api 版本 es2

本文主要是介绍ES2.x版本的javaAPI使用实例,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前段时间做用户标签系统,使用的es2.2来存储查询。其中涉及到了es的javaAPI的使用。这里把笨小葱用到的一些函数分享一下。

首先是es的连接获取操作实例。


import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.client.transport.TransportClient;
import org.elasticsearch.common.settings.Settings;
import org.elasticsearch.common.transport.InetSocketTransportAddress;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.aggregations.AggregationBuilders;
import org.elasticsearch.search.sort.SortOrder;import java.net.InetAddress;
import java.net.UnknownHostException;/*** Created by cc on 2016/4/4.*/
public class Es_Client {public static final String CLUSTER_NAME = "razor_es"; //实例名称private static final String IP = "192.168.1.1";private static final int PORT = 9300;  //端口//1.设置集群名称:默认是elasticsearch,并设置client.transport.sniff为true,使客户端嗅探整个集群状态,把集群中的其他机器IP加入到客户端//对ES2.0有效private static Settings settings = Settings.settingsBuilder().put("cluster.name", CLUSTER_NAME).put("client.transport.sniff", true).build();//创建私有对象private static TransportClient client;static {try {client = TransportClient.builder().settings(settings).build().addTransportAddress(new InetSocketTransportAddress(InetAddress.getByName(IP), PORT));} catch (UnknownHostException e) {e.printStackTrace();}}//取得实例public static  TransportClient getTransportClient() {return client;}}




然后是一些函数操作:


import com.tesla.razor.dao.TagDAO;
import com.tesla.razor.util.Es_Client;
import net.sf.json.JSONArray;
import net.sf.json.JSONObject;
import org.elasticsearch.action.get.GetResponse;
import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.index.query.BoolQueryBuilder;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.SearchHit;
import org.elasticsearch.search.aggregations.AggregationBuilders;
import org.elasticsearch.search.sort.SortOrder;import java.util.ArrayList;
import java.util.List;public class TagDAOimpl implements TagDAO {@Overridepublic JSONObject getUserInfoList(String productid, String startdate, String stopdate) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)/* .addAggregation(AggregationBuilders.terms("agg").field("user_id").size(20))*/.addAggregation(AggregationBuilders.cardinality("agg1").field("user_id"))//.addAggregation(AggregationBuilders.dateRange("range1").field("localtime").addRange(startdate,stopdate)).addSort("localtime", SortOrder.DESC).setSize(2000).execute().actionGet();JSONObject object=new JSONObject();object.put("total",response.getAggregations().getProperty("agg1.value").toString());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){if(userIds.size()<20){String userid = hit.getSource().get("user_id").toString();int flag = 1;for (String s : userIds) {if (s.equals(userid)) {flag = 0;break;}}if (flag == 1)//flag为1表示还没有记录该用户{userIds.add(userid);arr.add(hit.getSourceAsString());}}}object.put("userList",arr);//System.out.println(object);return object;}@Overridepublic JSONObject getUserInfoListById(String productid, String startdate, String stopdate,String userid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.regexpQuery("user_id", ".*" + userid + ".*"));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)     // Filter/*.addAggregation(AggregationBuilders.terms("agg").field("user_id").size(20))*/.addAggregation(AggregationBuilders.cardinality("agg1").field("user_id")).addSort("localtime",SortOrder.DESC).setSize(2000).execute().actionGet();JSONObject object=new JSONObject();object.put("total",response.getAggregations().getProperty("agg1.value").toString());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){if(userIds.size()<20){String user_id = hit.getSource().get("user_id").toString();int flag = 1;for (String s : userIds) {if (s.equals(user_id)) {flag = 0;break;}}if (flag == 1)//flag为1表示还没有记录该用户{userIds.add(user_id);arr.add(hit.getSourceAsString());}}}object.put("userList",arr);//System.out.println(object);return object;}@Overridepublic JSONObject getUserInfoListByTags(String productid, String tags) throws Exception {String[] tags_arr=tags.split(";");BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));for(String tag : tags_arr){if(tag.contains("c_channel_")){boolQueryBuilder.must(QueryBuilders.matchQuery("channel_id", tag.substring(10)));}else if(tag.contains("c_provinc_")){boolQueryBuilder.must(QueryBuilders.matchQuery("region", tag.substring(10)));}else{boolQueryBuilder.must(QueryBuilders.matchQuery("app_tags.tag_name", tag));}}SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_tag").setTypes("user_tag").setQuery(boolQueryBuilder)//.addField("user_id").setSize(20).execute().actionGet();//System.out.println(response.toString());//根据查询出的用户id去clientdata中二次查询详细信息JSONObject object=new JSONObject();object.put("total",response.getHits().getTotalHits());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){<span style="white-space:pre">		</span>......<span style="white-space:pre">	</span>}return object;}@Overridepublic String getUserDetailTags(String productid, String userid) throws Exception {GetResponse usertag= Es_Client.getTransportClient().prepareGet("razor_tag", "user_tag", userid + "|" + productid).get();return usertag.getSourceAsString();}@Overridepublic JSONArray getUserDetail(String productid, String startdate, String stopdate,String userid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.regexpQuery("user_id", userid));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)     // Filter.addSort("localtime", SortOrder.DESC).setSize(20).execute().actionGet();//Map<String,List<String>> map=new HashMap<String, List<String>>();JSONArray arr = new JSONArray();SearchHit[]  hits= response.getHits().getHits();String tmp="";int flag=1;for(SearchHit hit : hits){System.out.println(hit.getSourceAsString());JSONObject jsonObject = new JSONObject();String sessionid=hit.getSource().get("session_id").toString();if(flag==1)  //表示取第一条记录{tmp=sessionid;flag=0;}else {    //取第1条之后的记录if(tmp.equals(sessionid))  //重复的sessionid,直接结束,进入下次循环{continue;}else {tmp=sessionid;}}//1.添本次session的clientdata数据jsonObject.put("clientdata",hit.getSourceAsString());//2.添本次session的usinglogGetResponse usinglog= Es_Client.getTransportClient().prepareGet("razor_usinglog", "usinglog", userid + "|" + sessionid).get();jsonObject.put("usinglog", usinglog.getSourceAsString());//3.添本次session的eventGetResponse event= Es_Client.getTransportClient().prepareGet("razor_event", "event", userid + "|" + sessionid).get();jsonObject.put("event",event.getSourceAsString());arr.add(jsonObject);}return arr;}@Overridepublic String getTagTop(String productid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));//boolQueryBuilder.must(QueryBuilders.rangeQuery("add_time").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_tag").setTypes("user_tag").setQuery(boolQueryBuilder)     .addAggregation(AggregationBuilders.terms("agg").field("app_tags.tag_name").size(20)).addAggregation(AggregationBuilders.cardinality("agg1").field("app_tags.tag_name")).setSize(0).execute().actionGet();return response.toString();}}


这篇关于ES2.x版本的javaAPI使用实例的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/727341

相关文章

Spring boot整合dubbo+zookeeper的详细过程

《Springboot整合dubbo+zookeeper的详细过程》本文讲解SpringBoot整合Dubbo与Zookeeper实现API、Provider、Consumer模式,包含依赖配置、... 目录Spring boot整合dubbo+zookeeper1.创建父工程2.父工程引入依赖3.创建ap

使用Python删除Excel中的行列和单元格示例详解

《使用Python删除Excel中的行列和单元格示例详解》在处理Excel数据时,删除不需要的行、列或单元格是一项常见且必要的操作,本文将使用Python脚本实现对Excel表格的高效自动化处理,感兴... 目录开发环境准备使用 python 删除 Excphpel 表格中的行删除特定行删除空白行删除含指定

SpringBoot结合Docker进行容器化处理指南

《SpringBoot结合Docker进行容器化处理指南》在当今快速发展的软件工程领域,SpringBoot和Docker已经成为现代Java开发者的必备工具,本文将深入讲解如何将一个SpringBo... 目录前言一、为什么选择 Spring Bootjavascript + docker1. 快速部署与

深入理解Go语言中二维切片的使用

《深入理解Go语言中二维切片的使用》本文深入讲解了Go语言中二维切片的概念与应用,用于表示矩阵、表格等二维数据结构,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习吧... 目录引言二维切片的基本概念定义创建二维切片二维切片的操作访问元素修改元素遍历二维切片二维切片的动态调整追加行动态

MySQL中的LENGTH()函数用法详解与实例分析

《MySQL中的LENGTH()函数用法详解与实例分析》MySQLLENGTH()函数用于计算字符串的字节长度,区别于CHAR_LENGTH()的字符长度,适用于多字节字符集(如UTF-8)的数据验证... 目录1. LENGTH()函数的基本语法2. LENGTH()函数的返回值2.1 示例1:计算字符串

Spring Boot spring-boot-maven-plugin 参数配置详解(最新推荐)

《SpringBootspring-boot-maven-plugin参数配置详解(最新推荐)》文章介绍了SpringBootMaven插件的5个核心目标(repackage、run、start... 目录一 spring-boot-maven-plugin 插件的5个Goals二 应用场景1 重新打包应用

prometheus如何使用pushgateway监控网路丢包

《prometheus如何使用pushgateway监控网路丢包》:本文主要介绍prometheus如何使用pushgateway监控网路丢包问题,具有很好的参考价值,希望对大家有所帮助,如有错误... 目录监控网路丢包脚本数据图表总结监控网路丢包脚本[root@gtcq-gt-monitor-prome

SpringBoot+EasyExcel实现自定义复杂样式导入导出

《SpringBoot+EasyExcel实现自定义复杂样式导入导出》这篇文章主要为大家详细介绍了SpringBoot如何结果EasyExcel实现自定义复杂样式导入导出功能,文中的示例代码讲解详细,... 目录安装处理自定义导出复杂场景1、列不固定,动态列2、动态下拉3、自定义锁定行/列,添加密码4、合并

Spring Boot集成Druid实现数据源管理与监控的详细步骤

《SpringBoot集成Druid实现数据源管理与监控的详细步骤》本文介绍如何在SpringBoot项目中集成Druid数据库连接池,包括环境搭建、Maven依赖配置、SpringBoot配置文件... 目录1. 引言1.1 环境准备1.2 Druid介绍2. 配置Druid连接池3. 查看Druid监控

Python通用唯一标识符模块uuid使用案例详解

《Python通用唯一标识符模块uuid使用案例详解》Pythonuuid模块用于生成128位全局唯一标识符,支持UUID1-5版本,适用于分布式系统、数据库主键等场景,需注意隐私、碰撞概率及存储优... 目录简介核心功能1. UUID版本2. UUID属性3. 命名空间使用场景1. 生成唯一标识符2. 数