solr学习第八课程----MultiCore的配置方法(第二集)

2023-11-29 04:38

本文主要是介绍solr学习第八课程----MultiCore的配置方法(第二集),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

solr学习第八课程分成两部分

1. solr学习第八课程----MultiCore的配置方法(第一集)

2. solr学习第八课程----MultiCore的配置方法(第二集)

 

solr学习第八课程----MultiCore的配置方法(第二集)内容目录

1. 验证多个core的情况

2. 如何通过solrj操作数据

具体内容

1. 验证多个core的情况下

第一步:Master的core0的访问管理界面

 

 

第二步:Slaver的core0的访问管理界面

 

 

第三步:Slaver的core0的索引复制管理界面

 

 

 

第四步:Master/Slave模式的主从索引架构如图

 

 

2. solrj操作数据代码

第一步:采用Maven方式集成solrj所需要的包

                 <dependency>
<groupId>org.apache.solr</groupId>
<artifactId>solr-solrj</artifactId>
<version>4.4.0</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpmime</artifactId>
<version>4.2.3</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpcore</artifactId>
<version>4.2.2</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpclient</artifactId>
<version>4.2.3</version>
</dependency>
<dependency>
<groupId>org.noggit</groupId>
<artifactId>noggit</artifactId>
<version>0.5</version>
</dependency>


 

第二步:通过单例模式创建获取solr服务类

package com.solr.common;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
public class SolrServer {
private static transient Log logger = LogFactory.getLog(SolrServer.class);
// solr服务地址连接-The URL of the Solr server.
private static final String baseURL = "http://192.168.17.128:9080/solr/core0";
// solr服务实例对象
private static HttpSolrServer server;
// 获取solr服务
public static synchronized HttpSolrServer getInstance() {
try {
if (server == null) {
logger.info("connect solrServer is start.....");
// 主机URLbaseURL - The URL of the Solr server. For example,
// " http://localhost:8983/solr/" if you are using the standard
// distribution Solr webapp on your local machine.
server = new HttpSolrServer(baseURL);
// 超时时间 Set SoTimeout (read timeout).
server.setSoTimeout(5000);
// 连接超时时间 HttpConnectionParams.setConnectionTimeout
server.setConnectionTimeout(1000);
// Set the maximum number of connections that can be open to a
// single host at any given time. If http client was created
// outside the operation is not allowed.
server.setDefaultMaxConnectionsPerHost(1000);
// 连接solr最大连接数 Set the maximum number of connections that can be
// open at any given time.
server.setMaxTotalConnections(100);
// // defaults to false,Configure whether the client should
// follow redirects or not.
server.setFollowRedirects(false);
// Server side must support gzip or deflate for this to have any
// effect.
server.setAllowCompression(true);
// 最大尝试连接次数-Set maximum number of retries to attempt in the
// event of transient errors.
server.setMaxRetries(3);
logger.info("connect solrServer success");
}
} catch (Exception e) {
logger.error("connect solr is exception,please retry it!", e);
}
return server;
}
public void destory() {
server = null;
System.runFinalization();
System.gc();
}
}


 

其中:http://192.168.17.128:9080/solr/core0根据需要给出指定的baseURL.

 

 

第三步:创建维护索引工具类

package com.solr.util;
import java.util.ArrayList;
import java.util.List;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.solr.client.solrj.impl.BinaryRequestWriter;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.apache.solr.common.params.ModifiableSolrParams;
/**
* <p>
* solr服务器操作工具类
* </p>
* 
* @author shenfl
* @version V1.0
* 
* 
*/
public class SolrUtil {
private static transient Log logger = LogFactory.getLog(SolrUtil.class);
/**
* 添加或者更新索引
* 
* @param docs
* @param solr
*/
public static void addOrUpdate(List<SolrInputDocument> docs, HttpSolrServer solr) {
List<SolrInputDocument> docList = new ArrayList<SolrInputDocument>();
try {
for (int i = 0; i < docs.size(); i++) {
docList.add(docs.get(i));
solr.add(docList);
if (docList.size() % 100 == 0) {
solr.commit();
docList.clear();
}
}
solr.commit();
} catch (Exception e) {
logger.error(" addOrUpdate data to solr server is exception ", e);
e.printStackTrace();
}
}
/**
* 查询所有索引
* 
* @param solr
* @return
*/
public static SolrDocumentList query(HttpSolrServer solr) {
ModifiableSolrParams params = null;
SolrDocumentList documentList = null;
try {
params = new ModifiableSolrParams();
// Query String: *:*标识查询所有的数据库索引
params.set("q", "*:*");
// Start Row
params.set("start", 0);
// Maximum Rows Returned
params.set("rows", 10);
QueryResponse response = solr.query(params);
fail("query time:" + response.getQTime());
fail("Elapsed Time:" + response.getElapsedTime());
fail("status:" + response.getStatus());
documentList = response.getResults();
} catch (Exception e) {
logger.error(" query data to solr server is exception ", e);
}
return documentList;
}
/**
* 根据ID单个删除的索引:<delete><id>1403001</id></delete>
* 
* @param id
*/
public static void removeById(String id, HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteById(id);
solr.commit();
if (logger.isDebugEnabled()) {
logger.debug("removeById id = " + id + " success");
}
} catch (Exception e) {
logger.error(" removeById data to solr server is exception ", e);
}
}
/**
* 批量删除多个ID的索引
* 
* @param ids
*/
public static void batchRemoveByIds(List<String> ids, HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteById(ids);
solr.commit();
if (logger.isDebugEnabled()) {
logger.debug("batchRemoveByIds ids = " + ids.toString() + " success");
}
} catch (Exception e) {
logger.error(" batchRemoveByIds data to solr server is exception ", e);
}
}
/**
* 批量删除所有的索引
* 
* @param ids
*/
public static void batchRemove(HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteByQuery("*:*");
solr.commit();
} catch (Exception e) {
logger.error(" batchRemove data to solr server is exception ", e);
}
}
public final static void fail(Object o) {
logger.info(o);
}
}


 

第四步:创建维护索引测试类

package com.solr.common;
import java.util.ArrayList;
import java.util.List;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.junit.Test;
import com.solr.util.SolrUtil;
public class SolrUtilTest {
@Test
public void testAddDoc() {
List<SolrInputDocument> docs = new ArrayList<SolrInputDocument>();
SolrInputDocument solrDocument = new SolrInputDocument();
solrDocument.addField("id", "1000001");
solrDocument.addField("name", "shenfl40");
docs.add(solrDocument);
SolrUtil.addOrUpdate(docs, SolrServer.getInstance());
}
@Test
public void testQuery() {
SolrDocumentList solrDocumentList = null;
try {
solrDocumentList = SolrUtil.query(SolrServer.getInstance());
// 输出文档列表数据
for (SolrDocument doc : solrDocumentList) {
String info = doc.getFieldValue("id") + "," + doc.getFieldValue("name");
System.out.println("==>>" + info);//==>>1000001,shenfl40
}
} catch (Exception e) {
e.printStackTrace();
}
}
@Test
public void testClear(){
SolrUtil.batchRemove(SolrServer.getInstance());
}
public void testClear2(){
SolrUtil.removeById("1000000",SolrServer.getInstance() );
}
}


说明:testAddDoc生产索引,结果可以通过solr的管理界面查看,也可以通过代码testQuery查看。

 

 

 

solr学习第八课程分成两部分

1. solr学习第八课程----MultiCore的配置方法(第一集)

2. solr学习第八课程----MultiCore的配置方法(第二集)

这篇关于solr学习第八课程----MultiCore的配置方法(第二集)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/431477

相关文章

windos server2022的配置故障转移服务的图文教程

《windosserver2022的配置故障转移服务的图文教程》本文主要介绍了windosserver2022的配置故障转移服务的图文教程,以确保服务和应用程序的连续性和可用性,文中通过图文介绍的非... 目录准备环境:步骤故障转移群集是 Windows Server 2022 中提供的一种功能,用于在多个

Window Server2016加入AD域的方法步骤

《WindowServer2016加入AD域的方法步骤》:本文主要介绍WindowServer2016加入AD域的方法步骤,包括配置DNS、检测ping通、更改计算机域、输入账号密码、重启服务... 目录一、 准备条件二、配置ServerB加入ServerA的AD域(test.ly)三、查看加入AD域后的变

windos server2022里的DFS配置的实现

《windosserver2022里的DFS配置的实现》DFS是WindowsServer操作系统提供的一种功能,用于在多台服务器上集中管理共享文件夹和文件的分布式存储解决方案,本文就来介绍一下wi... 目录什么是DFS?优势:应用场景:DFS配置步骤什么是DFS?DFS指的是分布式文件系统(Distr

Window Server2016 AD域的创建的方法步骤

《WindowServer2016AD域的创建的方法步骤》本文主要介绍了WindowServer2016AD域的创建的方法步骤,文中通过图文介绍的非常详细,对大家的学习或者工作具有一定的参考学习价... 目录一、准备条件二、在ServerA服务器中常见AD域管理器:三、创建AD域,域地址为“test.ly”

NFS实现多服务器文件的共享的方法步骤

《NFS实现多服务器文件的共享的方法步骤》NFS允许网络中的计算机之间共享资源,客户端可以透明地读写远端NFS服务器上的文件,本文就来介绍一下NFS实现多服务器文件的共享的方法步骤,感兴趣的可以了解一... 目录一、简介二、部署1、准备1、服务端和客户端:安装nfs-utils2、服务端:创建共享目录3、服

Java 字符数组转字符串的常用方法

《Java字符数组转字符串的常用方法》文章总结了在Java中将字符数组转换为字符串的几种常用方法,包括使用String构造函数、String.valueOf()方法、StringBuilder以及A... 目录1. 使用String构造函数1.1 基本转换方法1.2 注意事项2. 使用String.valu

Python中使用defaultdict和Counter的方法

《Python中使用defaultdict和Counter的方法》本文深入探讨了Python中的两个强大工具——defaultdict和Counter,并详细介绍了它们的工作原理、应用场景以及在实际编... 目录引言defaultdict的深入应用什么是defaultdictdefaultdict的工作原理

关于Maven中pom.xml文件配置详解

《关于Maven中pom.xml文件配置详解》pom.xml是Maven项目的核心配置文件,它描述了项目的结构、依赖关系、构建配置等信息,通过合理配置pom.xml,可以提高项目的可维护性和构建效率... 目录1. POM文件的基本结构1.1 项目基本信息2. 项目属性2.1 引用属性3. 项目依赖4. 构

使用Python进行文件读写操作的基本方法

《使用Python进行文件读写操作的基本方法》今天的内容来介绍Python中进行文件读写操作的方法,这在学习Python时是必不可少的技术点,希望可以帮助到正在学习python的小伙伴,以下是Pyth... 目录一、文件读取:二、文件写入:三、文件追加:四、文件读写的二进制模式:五、使用 json 模块读写

Oracle数据库使用 listagg去重删除重复数据的方法汇总

《Oracle数据库使用listagg去重删除重复数据的方法汇总》文章介绍了在Oracle数据库中使用LISTAGG和XMLAGG函数进行字符串聚合并去重的方法,包括去重聚合、使用XML解析和CLO... 目录案例表第一种:使用wm_concat() + distinct去重聚合第二种:使用listagg,