lucenelucene 原理
lucene 时间:2021-08-16 阅读:(
)
如何用Lucene索引数据库
Lucene一个常见的用例是在一个或者多个数据库表进行全文检索。
虽然MySql有全文检索的功能,但是如果字段和数据量增加,MySql的性能会减低很快。
映射数据到Lucene
用伪代码表示:
String sql = “select id, firstname, lastname, phone, email from person”;
ResultSet rs = stmt.executeQuery(sql);
while (rs.next()) {
Document doc = new Document();
doc.add(new Field(”id”, rs,getString(”firstname”), Field.Store.YES, Field.Index.UN_TOKENIZED));
doc.add(new Field(”firstname”, rs,getString(”firstname”), Field.Store.YES, Field.Index.TOKENIZED));
// … repeat for each column in result set
writer.addDocument(doc);}
显示搜索结果
当显示搜索结果给用户时,你有两个选择:
1.因为你的Table已经扁平化到了Lucene里面,所以只需要用Document里面的Field.因为Lucene也非常快,这样会大大减低你的数据库的压力。
2.如果你要显示另外的数据到你的搜索结果页,你只需要在Hits里面收集他们的ID,然后从数据库去数据再根据结果组装搜索结果页。
要搜索的东西
以上列出的方式都是假设把整个结果集放到内存里面,这样在数据集大的话会很容易造成问题,你需要在你的SQL里面做一些分页或者offset
你还需要在你的结果集里面做一个try/catch,这样当添加一个Document出错的时候不会影响整个过程。
通常情况下可以把所有的field放到同一个”Contents” field然后只搜索这一个字段,但是需要保留这些field这样可以按field检索。
如果你需要检索多个table
通常最好能用不同的索引来搜索不同类型的数据,而不是把他们加到同一个index然后根据类型来区分。
原因:
可以更简单的维护操作。
问个很菜的有关问题,lucene如何读
呵呵,小弟英语确实很差,这技术也没接触过,刚刚才看到的 我女朋友用到,我得给她讲,这东西不知道怎么读……各位帮忙------解决方案--------------------------------------------------------Lucene是一个非常优秀的开源的全文搜索引擎,我们可以在它的上面开发 出各种全文搜索的应用来。
Lucene在国外有很高的知名度,现在已经是Apache的顶级项目, 在国内,Lucene的应用也越来越多。
读法就直接照字面读就行了,因为不是一个本来就有的单词,所以只要读得不太离谱就行了 ------解决方案--------------------------------------------------------我读的是 路森呢 哈哈 ------解决方案--------------------------------------------------------建议安个金山词霸之类的,它里面有朗读功能! ------解决方案--------------------------------------------------------又长见识了------解决方案--------------------------------------------------------卢斯呢用Lucene查询数据库,高手请进,急!!!谢谢!!!
lucene不能直接查数据库,你得把数据库的东西取出来写到索引文件里头去。
可以先把数据库里的东西写到resultset中然后在一个一个取出来写到索引里。
注意每个document里面写数据库里一行的数据,例如数据库有id和name两列,则每个document都包含一个id和一个name信息。
这样你搜“奔驰”时,才能显示所有相关信息。
具体建立索引和搜索的实现网上都有相关代码,搜一搜就可以了。
lucene 原理
public static void addIndex(java.sql.ResultSet rs) throws SQLException, CorruptIndexException, IOException{
Analyzer luceneAnalyzer = new StandardAnalyzer(); //实例化一个标准分析器 (对字符串进行索引分析的算法) 你可以把它看作一个分词器
IndexWriter indexWriter = new IndexWriter("e:/weihai/sou", luceneAnalyzer, true);//实例化一个输出流,true重新创建,false增量创建
while(rs.next()){ //java.sql.ResultSet rs 你要建立索引的对象
Document document = new Document(); // 实例化一个文档对象 这个文档可以说是保存索引内容的文档
String goods_id = rs.getString("goods_id"); //这是需要建立索引的实体对象
if(goods_id==null) goods_id="";
Field shopid = new Field("shopid",rs.getString("shop_id"),Field.Store.YES, Field.Index.NO);//一个完整的索引多个域组成(field) 在这里有3个 分别是shopid,以及下面的goodsid,FieldBody;
我打个比方说,我们对一篇文章做全文检索的索引,我们可以分别把文章的保存路径,文章的标题,文章的正文内容作为3个field,然后一起通过下面的document.add保存到一个Document对象中,那么在检索的时候,我们在正文中查找到目标字段,同时我们可以做到把该文档的保存路径以及标题也取到;
Field goodsid = new Field("goodsid",goods_id,Field.Store.YES, Field.Index.NO);//不做索引
Field FieldBody = new Field( "body" , rs.getString("shopname")+" "+rs.getString("goodsname"), Field.Store.YES,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS);
document.add(shopid);
document.add(goodsid);
document.add(FieldBody); //把索引字段添加到行对象中
indexWriter.addDocument(document); //把一行信息加入到输出流中
}
indexWriter.optimize(); /mit 写出到硬盘上
indexWriter.close(); // 关闭流
}
public static void main(String[] args) throws CorruptIndexException, ClassNotFoundException, SQLException, IOException {
queryDB();
System.out.println("创建索引成功");
}
//如果还有什么不明白的可以直接M我,有时间的话,可以回答一点简单的问题
}
Hostio是一家成立于2006年的国外主机商,提供基于KVM架构的VPS主机,AMD EPYC CPU,NVMe硬盘,1-10Gbps带宽,最低月付5欧元起。商家采用自己的网络AS208258,宿主机采用2 x AMD Epyc 7452 32C/64T 2.3Ghz CPU,16*32GB内存,4个Samsung PM983 NVMe SSD,提供IPv4+IPv6。下面列出几款主机配置信息。...
美国特价云服务器 2核4G 19.9元杭州王小玉网络科技有限公司成立于2020是拥有IDC ISP资质的正规公司,这次推荐的美国云服务器也是商家主打产品,有点在于稳定 速度 数据安全。企业级数据安全保障,支持异地灾备,数据安全系数达到了100%安全级别,是国内唯一一家美国云服务器拥有这个安全级别的商家。E5 2696v2x2 2核 4G内存 20G系统盘 10G数据盘 20M带宽 100G流量 1...
Megalayer 商家我们还算是比较熟悉的,商家主要业务方向是CN2优化带宽、国际BGP和全向带宽的独立服务器和站群服务器,且后来也有增加云服务器(VPS主机)业务。这次中秋节促销活动期间,有发布促销活动,这次活动力度认为还是比较大的,有提供香港、美国、菲律宾的年付VPS主机,CN2优化方案线路的低至年付159元。这次活动截止到10月30日,如果我们有需要的话可以选择。第一、特价限量年付VPS主...
lucene为你推荐
免费erp如何有效的去使用一款免费的ERP中国银行卡号我中国银行卡号前五位数是多少we7we7保存文件是哪个 我要卸载它 但是自己创建的球员想留着we7神舟电脑装we7系统很慢,装到一半时提示错误怎么回事?初始化磁盘台式机新添加的硬盘怎么初始化磁盘app退款在app买东西以后怎么申请退款密码设置怎么给电脑设置密码?qsv视频格式转换器爱奇艺QSV转换工具怎么将qsv格式转换mp4视频qsv视频格式转换器如何免费把qsv格式转换为mp4格式数据管理制度简述系统运行管理制度的主要内容
老域名失效请用户记下 广东vps 什么是二级域名 狗爹 edis 美国便宜货网站 外国空间 贵州电信宽带测速 阿里云代金券 商家促销 小米数据库 91vps 网络空间租赁 idc查询 如何建立邮箱 国内域名 photobucket 后门 阿里云邮箱个人版 时间服务器 更多