ES2.x版本的javaAPI使用实例

2024-02-20 06:38
文章标签 java 使用 实例 api 版本 es2

本文主要是介绍ES2.x版本的javaAPI使用实例,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前段时间做用户标签系统,使用的es2.2来存储查询。其中涉及到了es的javaAPI的使用。这里把笨小葱用到的一些函数分享一下。

首先是es的连接获取操作实例。


import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.client.transport.TransportClient;
import org.elasticsearch.common.settings.Settings;
import org.elasticsearch.common.transport.InetSocketTransportAddress;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.aggregations.AggregationBuilders;
import org.elasticsearch.search.sort.SortOrder;import java.net.InetAddress;
import java.net.UnknownHostException;/*** Created by cc on 2016/4/4.*/
public class Es_Client {public static final String CLUSTER_NAME = "razor_es"; //实例名称private static final String IP = "192.168.1.1";private static final int PORT = 9300;  //端口//1.设置集群名称:默认是elasticsearch,并设置client.transport.sniff为true,使客户端嗅探整个集群状态,把集群中的其他机器IP加入到客户端//对ES2.0有效private static Settings settings = Settings.settingsBuilder().put("cluster.name", CLUSTER_NAME).put("client.transport.sniff", true).build();//创建私有对象private static TransportClient client;static {try {client = TransportClient.builder().settings(settings).build().addTransportAddress(new InetSocketTransportAddress(InetAddress.getByName(IP), PORT));} catch (UnknownHostException e) {e.printStackTrace();}}//取得实例public static  TransportClient getTransportClient() {return client;}}




然后是一些函数操作:


import com.tesla.razor.dao.TagDAO;
import com.tesla.razor.util.Es_Client;
import net.sf.json.JSONArray;
import net.sf.json.JSONObject;
import org.elasticsearch.action.get.GetResponse;
import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.index.query.BoolQueryBuilder;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.SearchHit;
import org.elasticsearch.search.aggregations.AggregationBuilders;
import org.elasticsearch.search.sort.SortOrder;import java.util.ArrayList;
import java.util.List;public class TagDAOimpl implements TagDAO {@Overridepublic JSONObject getUserInfoList(String productid, String startdate, String stopdate) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)/* .addAggregation(AggregationBuilders.terms("agg").field("user_id").size(20))*/.addAggregation(AggregationBuilders.cardinality("agg1").field("user_id"))//.addAggregation(AggregationBuilders.dateRange("range1").field("localtime").addRange(startdate,stopdate)).addSort("localtime", SortOrder.DESC).setSize(2000).execute().actionGet();JSONObject object=new JSONObject();object.put("total",response.getAggregations().getProperty("agg1.value").toString());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){if(userIds.size()<20){String userid = hit.getSource().get("user_id").toString();int flag = 1;for (String s : userIds) {if (s.equals(userid)) {flag = 0;break;}}if (flag == 1)//flag为1表示还没有记录该用户{userIds.add(userid);arr.add(hit.getSourceAsString());}}}object.put("userList",arr);//System.out.println(object);return object;}@Overridepublic JSONObject getUserInfoListById(String productid, String startdate, String stopdate,String userid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.regexpQuery("user_id", ".*" + userid + ".*"));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)     // Filter/*.addAggregation(AggregationBuilders.terms("agg").field("user_id").size(20))*/.addAggregation(AggregationBuilders.cardinality("agg1").field("user_id")).addSort("localtime",SortOrder.DESC).setSize(2000).execute().actionGet();JSONObject object=new JSONObject();object.put("total",response.getAggregations().getProperty("agg1.value").toString());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){if(userIds.size()<20){String user_id = hit.getSource().get("user_id").toString();int flag = 1;for (String s : userIds) {if (s.equals(user_id)) {flag = 0;break;}}if (flag == 1)//flag为1表示还没有记录该用户{userIds.add(user_id);arr.add(hit.getSourceAsString());}}}object.put("userList",arr);//System.out.println(object);return object;}@Overridepublic JSONObject getUserInfoListByTags(String productid, String tags) throws Exception {String[] tags_arr=tags.split(";");BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));for(String tag : tags_arr){if(tag.contains("c_channel_")){boolQueryBuilder.must(QueryBuilders.matchQuery("channel_id", tag.substring(10)));}else if(tag.contains("c_provinc_")){boolQueryBuilder.must(QueryBuilders.matchQuery("region", tag.substring(10)));}else{boolQueryBuilder.must(QueryBuilders.matchQuery("app_tags.tag_name", tag));}}SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_tag").setTypes("user_tag").setQuery(boolQueryBuilder)//.addField("user_id").setSize(20).execute().actionGet();//System.out.println(response.toString());//根据查询出的用户id去clientdata中二次查询详细信息JSONObject object=new JSONObject();object.put("total",response.getHits().getTotalHits());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){<span style="white-space:pre">		</span>......<span style="white-space:pre">	</span>}return object;}@Overridepublic String getUserDetailTags(String productid, String userid) throws Exception {GetResponse usertag= Es_Client.getTransportClient().prepareGet("razor_tag", "user_tag", userid + "|" + productid).get();return usertag.getSourceAsString();}@Overridepublic JSONArray getUserDetail(String productid, String startdate, String stopdate,String userid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.regexpQuery("user_id", userid));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)     // Filter.addSort("localtime", SortOrder.DESC).setSize(20).execute().actionGet();//Map<String,List<String>> map=new HashMap<String, List<String>>();JSONArray arr = new JSONArray();SearchHit[]  hits= response.getHits().getHits();String tmp="";int flag=1;for(SearchHit hit : hits){System.out.println(hit.getSourceAsString());JSONObject jsonObject = new JSONObject();String sessionid=hit.getSource().get("session_id").toString();if(flag==1)  //表示取第一条记录{tmp=sessionid;flag=0;}else {    //取第1条之后的记录if(tmp.equals(sessionid))  //重复的sessionid,直接结束,进入下次循环{continue;}else {tmp=sessionid;}}//1.添本次session的clientdata数据jsonObject.put("clientdata",hit.getSourceAsString());//2.添本次session的usinglogGetResponse usinglog= Es_Client.getTransportClient().prepareGet("razor_usinglog", "usinglog", userid + "|" + sessionid).get();jsonObject.put("usinglog", usinglog.getSourceAsString());//3.添本次session的eventGetResponse event= Es_Client.getTransportClient().prepareGet("razor_event", "event", userid + "|" + sessionid).get();jsonObject.put("event",event.getSourceAsString());arr.add(jsonObject);}return arr;}@Overridepublic String getTagTop(String productid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));//boolQueryBuilder.must(QueryBuilders.rangeQuery("add_time").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_tag").setTypes("user_tag").setQuery(boolQueryBuilder)     .addAggregation(AggregationBuilders.terms("agg").field("app_tags.tag_name").size(20)).addAggregation(AggregationBuilders.cardinality("agg1").field("app_tags.tag_name")).setSize(0).execute().actionGet();return response.toString();}}


这篇关于ES2.x版本的javaAPI使用实例的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/727341

相关文章

Spring Boot循环依赖原理、解决方案与最佳实践(全解析)

《SpringBoot循环依赖原理、解决方案与最佳实践(全解析)》循环依赖指两个或多个Bean相互直接或间接引用,形成闭环依赖关系,:本文主要介绍SpringBoot循环依赖原理、解决方案与最... 目录一、循环依赖的本质与危害1.1 什么是循环依赖?1.2 核心危害二、Spring的三级缓存机制2.1 三

使用Python构建一个Hexo博客发布工具

《使用Python构建一个Hexo博客发布工具》虽然Hexo的命令行工具非常强大,但对于日常的博客撰写和发布过程,我总觉得缺少一个直观的图形界面来简化操作,下面我们就来看看如何使用Python构建一个... 目录引言Hexo博客系统简介设计需求技术选择代码实现主框架界面设计核心功能实现1. 发布文章2. 加

在Spring Boot中浅尝内存泄漏的实战记录

《在SpringBoot中浅尝内存泄漏的实战记录》本文给大家分享在SpringBoot中浅尝内存泄漏的实战记录,结合实例代码给大家介绍的非常详细,感兴趣的朋友一起看看吧... 目录使用静态集合持有对象引用,阻止GC回收关键点:可执行代码:验证:1,运行程序(启动时添加JVM参数限制堆大小):2,访问 htt

SpringBoot集成Milvus实现数据增删改查功能

《SpringBoot集成Milvus实现数据增删改查功能》milvus支持的语言比较多,支持python,Java,Go,node等开发语言,本文主要介绍如何使用Java语言,采用springboo... 目录1、Milvus基本概念2、添加maven依赖3、配置yml文件4、创建MilvusClient

浅析Java中如何优雅地处理null值

《浅析Java中如何优雅地处理null值》这篇文章主要为大家详细介绍了如何结合Lambda表达式和Optional,让Java更优雅地处理null值,感兴趣的小伙伴可以跟随小编一起学习一下... 目录场景 1:不为 null 则执行场景 2:不为 null 则返回,为 null 则返回特定值或抛出异常场景

SQL表间关联查询实例详解

《SQL表间关联查询实例详解》本文主要讲解SQL语句中常用的表间关联查询方式,包括:左连接(leftjoin)、右连接(rightjoin)、全连接(fulljoin)、内连接(innerjoin)、... 目录简介样例准备左外连接右外连接全外连接内连接交叉连接自然连接简介本文主要讲解SQL语句中常用的表

SpringMVC获取请求参数的方法

《SpringMVC获取请求参数的方法》:本文主要介绍SpringMVC获取请求参数的方法,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下... 目录1、通过ServletAPI获取2、通过控制器方法的形参获取请求参数3、@RequestParam4、@

shell编程之函数与数组的使用详解

《shell编程之函数与数组的使用详解》:本文主要介绍shell编程之函数与数组的使用,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录shell函数函数的用法俩个数求和系统资源监控并报警函数函数变量的作用范围函数的参数递归函数shell数组获取数组的长度读取某下的

使用Python开发一个带EPUB转换功能的Markdown编辑器

《使用Python开发一个带EPUB转换功能的Markdown编辑器》Markdown因其简单易用和强大的格式支持,成为了写作者、开发者及内容创作者的首选格式,本文将通过Python开发一个Markd... 目录应用概览代码结构与核心组件1. 初始化与布局 (__init__)2. 工具栏 (setup_t

SpringBoot应用中出现的Full GC问题的场景与解决

《SpringBoot应用中出现的FullGC问题的场景与解决》这篇文章主要为大家详细介绍了SpringBoot应用中出现的FullGC问题的场景与解决方法,文中的示例代码讲解详细,感兴趣的小伙伴可... 目录Full GC的原理与触发条件原理触发条件对Spring Boot应用的影响示例代码优化建议结论F