Lucene4.3进阶开发之二渡天劫( 五)

2024-05-15 04:48
文章标签 进阶 开发 之二 lucene4.3 渡天

本文主要是介绍Lucene4.3进阶开发之二渡天劫( 五)，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

[b][color=red][size=x-large]转载请务必注明，原创地址，谢谢配合!
[url]http://qindongliang1922.iteye.com/blog/1998532[/url]
[/size][/color][/b]

[b][color=olive][size=large]散仙，在上篇文章，分析了IndexWriterConfig的作用以及一些功能，今天在这开始之前，我们再来简单回顾下，IndexWriterConfig的作用。

IndexWriterConfig保存了一些运行时的配置参数，这些参数会在程序运行期间一直存在，所以在大多数时候我们只需要一份单例的IndexWriterConfig即可，而IndexWriterConfig又是Lucene内部实现的线程安全的类，所以在一些需要同步的场景时，我们没必要给IndexWriterConfig在应用外围，在加上自己的线程安全逻辑，IndexWriterConfig里面的IndexWriterConfig.setRAMBufferSizeMB(double)方法和IndexWriterConfig.setMaxBufferedDocs(int)).方法，是2个比较重要的调优方法，一般情况下，我们可以根据自己服务器的配置，来适当的加大这个参数的比值，通过更大的参数，来实现更给力的批处理添加，当然这个也得根据我们的实际环境以及磁盘IO等等来定。
[/size][/color][/b]


[b][color=green][size=large]IndexWriter是负责创建和维护索引的重要的类，一些配置信息的获取主要来自IndexWriterConfig类，另外我们还需要一个文件目录来存放索引，所以我们经常看见如下的一行代码：[/size][/color][/b] 

IndexWriter writer=new IndexWriter(directory, writerConfig);


[b][color=green][size=large]之所以说IndexWriter是一个重要的索引管理类，不仅仅是因为它提供基于操作索引的增删改查的能力，而且一个很重要的表现就是，它具有二阶段提交的事务功能，看源码我们就会发现它实现2个接口，一个Closeable接口和TwoPhaseCommit接口：[/size][/color][/b] 
public class IndexWriter implements Closeable, TwoPhaseCommit{

[b][color=olive][size=large]正是由于 TwoPhaseCommit接口，所以IndexWriter 才具备了2阶段的事务功能，以及可恢复的回滚功能，这个功能，在某些突发的意外情况里可以正确的保证索引结构的安全和稳定，即使是索引添加失败，也可以通过回滚功能，恢复上一次提交前的状态。[/size][/color][/b]
[b][color=green][size=large]下面给出一些IndexWriter里面，比较常用和重要的几个方法：

[table]
|方法名|描述
|addDocument(Iterable<? extends IndexableField> doc)|添加一个doc
|addDocument(Iterable<? extends IndexableField> doc, Analyzer analyzer) |添加一个doc，使用指定的分词器
|addDocument(Iterable<? extends IndexableField> doc, Analyzer analyzer) |基于Directory的合并索引
|addIndexes(IndexReader... readers) |基于IndexReader的合并索引
|deleteAll() |删除所有的索引
|deleteDocuments(Query... queries) |删除doc数据，来自多个query的结果
|deleteDocuments(Query query) |删除doc数据，来自一个query的结果
|deleteDocuments(Term term) |删除doc数据，来自一个term
|flush(boolean triggerMerge, boolean applyAllDeletes) |刷新缓冲区到磁盘上
|forceMerge(int maxNumSegments) |合并段文件
|maxDoc() |返回文档总数不包含已经删除的
|numDocs() |返回文档总数包含已经删除的
|rollback() |在没有进行最终提交前，回滚数据
|updateDocument(Term term, Iterable<? extends IndexableField> doc) |更新一个doc，实际上是先删除后添加的策略
|tryDeleteDocument(IndexReader readerIn, int docID) |基于docid的删除方法，注意indexreader必须使用的是最新的，也就是基于近实时的，这样保证删除不会发生意外
|waitForMerges() |阻塞程序直至合并完成
[/table]
[/size][/color][/b]
[b][color=olive][size=large]最后，在唠叨几句，在上面的一些方法中，有几个方法时非常有用的，基本的增删改的那个就不多说了，除此之外还要注意的是，addIndexes(IndexReader... readers) 这个方法，因为lucene默认的任何时候都只能单线程写的局限性，所以在大批量建索引的时候，这可能是一个影响的性能的环节，所以建议使用多个线程建索引，分别建在不同的目录，那么最后就存在一个问题，我们怎么合并索引？ 这个时候就是这个方法大显身手的时候了，使用它可以建多份索引合并成一份索引，或许你还想提升性能，你也可以开启复合索引，但这个针对少写多读的场景是非常适合 的，如果更新频繁，那么并不适合使用复合索引。另外一个forceMerge(int maxNumSegments) 这个方法，是合并索引里面段文件的方法，通过合并一些小段，可以用来，压缩空间，同样的对于提升性能也是有一定效果的，注意这个参数并不是意味着越小越好，当我们索引很大的时候，合并成多个段，也是一个不错的选择。
[/size][/color][/b]


[b][color=olive][size=large]今天，就写到这里吧，最后感谢各位道友，耐心看完此篇，文章若有不足之处，欢迎指正交流！[/size][/color][/b]

[b][color=red][size=x-large]转载请务必注明，原创地址，谢谢配合!
[url]http://qindongliang1922.iteye.com/blog/1998532[/url]
[/size][/color][/b]

这篇关于Lucene4.3进阶开发之二渡天劫( 五)的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/990849。

相关文章

Spring Security 从入门到进阶系列教程

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门（一）：登录与退出》 《Spring-Security-入门（二）：基于数据库验证》 《Spring-Security-入门（三）：密码加密》 《Spring-Security-入门（四）：自定义-Filter》 《Spring-Security-入门（五）：在 Sprin
阅读更多...
这15个Vue指令，让你的项目开发爽到爆

这15个Vue指令，让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件，按住 Control 和回车键再显示它吗？小菜一碟： <template
阅读更多...
Hadoop企业开发案例调优场景

Hadoop企业开发案例调优场景

需求 （1）需求：从1G数据中，统计每个单词出现次数。服务器3台，每台配置4G内存，4核CPU，4线程。 （2）需求分析： 1G / 128m = 8个MapTask；1个ReduceTask；1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务（4    3    3） HDFS参数调优 （1）修改：hadoop-env.sh export HDFS_NAMENOD
阅读更多...
Java进阶13讲__第12讲_1/2

Java进阶13讲__第12讲_1/2

多线程、线程池 1.  线程概念 1.1  什么是线程 1.2  线程的好处 2.   创建线程的三种方式 注意事项 2.1  继承Thread类 2.1.1 认识  2.1.2  编码实现  package cn.hdc.oop10.Thread;import org.slf4j.Logger;import org.slf4j.LoggerFactory
阅读更多...
嵌入式QT开发：构建高效智能的嵌入式系统

嵌入式QT开发：构建高效智能的嵌入式系统

摘要： 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发，详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程，包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发，涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用，以及嵌入式 QT 与硬件设备的交互，包括输入输出设
阅读更多...
OpenHarmony鸿蒙开发（ Beta5.0）无感配网详解

OpenHarmony鸿蒙开发（ Beta5.0）无感配网详解

1、简介 无感配网是指在设备联网过程中无需输入热点相关账号信息，即可快速实现设备配网，是一种兼顾高效性、可靠性和安全性的配网方式。 2、配网原理 2.1 通信原理 手机和智能设备之间的信息传递，利用特有的NAN协议实现。利用手机和智能设备之间的WiFi 感知订阅、发布能力，实现了数字管家应用和设备之间的发现。在完成设备间的认证和响应后，即可发送相关配网数据。同时还支持与常规Sof
阅读更多...
活用c4d官方开发文档查询代码

活用c4d官方开发文档查询代码

当你问AI助手比如豆包，如何用python禁止掉xpresso标签时候，它会提示到 这时候要用到两个东西。https://developers.maxon.net/论坛搜索和开发文档 比如这里我就在官方找到正确的id描述 然后我就把参数标签换过来
阅读更多...
[MySQL表的增删改查-进阶]

[MySQL表的增删改查-进阶]

🌈个人主页：努力学编程’ ⛅个人推荐： c语言从初阶到进阶 JavaEE详解 数据结构 ⚡学好数据结构，刷题刻不容缓：点击一起刷题 🌙心灵鸡汤：总有人要赢，为什么不能是我呢 💻💻💻数据库约束 🔭🔭🔭约束类型 not null: 指示某列不能存储 NULL 值unique: 保证某列的每行必须有唯一的值default: 规定没有给列赋值时的默认值.primary key:
阅读更多...
Linux_kernel驱动开发11

Linux_kernel驱动开发11

一、改回nfs方式挂载根文件系统         在产品将要上线之前，需要制作不同类型格式的根文件系统         在产品研发阶段，我们还是需要使用nfs的方式挂载根文件系统         优点：可以直接在上位机中修改文件系统内容，延长EMMC的寿命         【1】重启上位机nfs服务         sudo service nfs-kernel-server resta
阅读更多...
【区块链 + 人才服务】区块链集成开发平台 | FISCO BCOS应用案例

【区块链 + 人才服务】区块链集成开发平台 | FISCO BCOS应用案例

随着区块链技术的快速发展，越来越多的企业开始将其应用于实际业务中。然而，区块链技术的专业性使得其集成开发成为一项挑战。针对此，广东中创智慧科技有限公司基于国产开源联盟链 FISCO BCOS 推出了区块链集成开发平台。该平台基于区块链技术，提供一套全面的区块链开发工具和开发环境，支持开发者快速开发和部署区块链应用。此外，该平台还可以提供一套全面的区块链开发教程和文档，帮助开发者快速上手区块链开发。
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2