lucenelucene 原理
lucene 时间:2021-08-16 阅读:(
)
如何用Lucene索引数据库
Lucene一个常见的用例是在一个或者多个数据库表进行全文检索。
虽然MySql有全文检索的功能,但是如果字段和数据量增加,MySql的性能会减低很快。
映射数据到Lucene
用伪代码表示:
String sql = “select id, firstname, lastname, phone, email from person”;
ResultSet rs = stmt.executeQuery(sql);
while (rs.next()) {
Document doc = new Document();
doc.add(new Field(”id”, rs,getString(”firstname”), Field.Store.YES, Field.Index.UN_TOKENIZED));
doc.add(new Field(”firstname”, rs,getString(”firstname”), Field.Store.YES, Field.Index.TOKENIZED));
// … repeat for each column in result set
writer.addDocument(doc);}
显示搜索结果
当显示搜索结果给用户时,你有两个选择:
1.因为你的Table已经扁平化到了Lucene里面,所以只需要用Document里面的Field.因为Lucene也非常快,这样会大大减低你的数据库的压力。
2.如果你要显示另外的数据到你的搜索结果页,你只需要在Hits里面收集他们的ID,然后从数据库去数据再根据结果组装搜索结果页。
要搜索的东西
以上列出的方式都是假设把整个结果集放到内存里面,这样在数据集大的话会很容易造成问题,你需要在你的SQL里面做一些分页或者offset
你还需要在你的结果集里面做一个try/catch,这样当添加一个Document出错的时候不会影响整个过程。
通常情况下可以把所有的field放到同一个”Contents” field然后只搜索这一个字段,但是需要保留这些field这样可以按field检索。
如果你需要检索多个table
通常最好能用不同的索引来搜索不同类型的数据,而不是把他们加到同一个index然后根据类型来区分。
原因:
可以更简单的维护操作。
问个很菜的有关问题,lucene如何读
呵呵,小弟英语确实很差,这技术也没接触过,刚刚才看到的 我女朋友用到,我得给她讲,这东西不知道怎么读……各位帮忙------解决方案--------------------------------------------------------Lucene是一个非常优秀的开源的全文搜索引擎,我们可以在它的上面开发 出各种全文搜索的应用来。
Lucene在国外有很高的知名度,现在已经是Apache的顶级项目, 在国内,Lucene的应用也越来越多。
读法就直接照字面读就行了,因为不是一个本来就有的单词,所以只要读得不太离谱就行了 ------解决方案--------------------------------------------------------我读的是 路森呢 哈哈 ------解决方案--------------------------------------------------------建议安个金山词霸之类的,它里面有朗读功能! ------解决方案--------------------------------------------------------又长见识了------解决方案--------------------------------------------------------卢斯呢用Lucene查询数据库,高手请进,急!!!谢谢!!!
lucene不能直接查数据库,你得把数据库的东西取出来写到索引文件里头去。
可以先把数据库里的东西写到resultset中然后在一个一个取出来写到索引里。
注意每个document里面写数据库里一行的数据,例如数据库有id和name两列,则每个document都包含一个id和一个name信息。
这样你搜“奔驰”时,才能显示所有相关信息。
具体建立索引和搜索的实现网上都有相关代码,搜一搜就可以了。
lucene 原理
public static void addIndex(java.sql.ResultSet rs) throws SQLException, CorruptIndexException, IOException{
Analyzer luceneAnalyzer = new StandardAnalyzer(); //实例化一个标准分析器 (对字符串进行索引分析的算法) 你可以把它看作一个分词器
IndexWriter indexWriter = new IndexWriter("e:/weihai/sou", luceneAnalyzer, true);//实例化一个输出流,true重新创建,false增量创建
while(rs.next()){ //java.sql.ResultSet rs 你要建立索引的对象
Document document = new Document(); // 实例化一个文档对象 这个文档可以说是保存索引内容的文档
String goods_id = rs.getString("goods_id"); //这是需要建立索引的实体对象
if(goods_id==null) goods_id="";
Field shopid = new Field("shopid",rs.getString("shop_id"),Field.Store.YES, Field.Index.NO);//一个完整的索引多个域组成(field) 在这里有3个 分别是shopid,以及下面的goodsid,FieldBody;
我打个比方说,我们对一篇文章做全文检索的索引,我们可以分别把文章的保存路径,文章的标题,文章的正文内容作为3个field,然后一起通过下面的document.add保存到一个Document对象中,那么在检索的时候,我们在正文中查找到目标字段,同时我们可以做到把该文档的保存路径以及标题也取到;
Field goodsid = new Field("goodsid",goods_id,Field.Store.YES, Field.Index.NO);//不做索引
Field FieldBody = new Field( "body" , rs.getString("shopname")+" "+rs.getString("goodsname"), Field.Store.YES,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS);
document.add(shopid);
document.add(goodsid);
document.add(FieldBody); //把索引字段添加到行对象中
indexWriter.addDocument(document); //把一行信息加入到输出流中
}
indexWriter.optimize(); /mit 写出到硬盘上
indexWriter.close(); // 关闭流
}
public static void main(String[] args) throws CorruptIndexException, ClassNotFoundException, SQLException, IOException {
queryDB();
System.out.println("创建索引成功");
}
//如果还有什么不明白的可以直接M我,有时间的话,可以回答一点简单的问题
}
LayerStack(成立于2017年),当前正在9折促销旗下的云服务器,LayerStack的云服务器采用第 3 代 AMD EPYC™ (霄龙) 处理器,DDR4内存和企业级 PCIe Gen 4 NVMe SSD。数据中心可选中国香港、日本、新加坡和洛杉矶!其中中国香港、日本和新加坡分为国际线路和CN2线路,如果选择CN2线路,价格每月要+3.2美元,付款支持paypal,支付宝,信用卡等!...
gcorelabs怎么样?gcorelabs是创建于2011年的俄罗斯一家IDC服务商,Gcorelabs提供优质的托管服务和VPS主机服务,Gcorelabs有一支强大的技术队伍,对主机的性能和稳定性要求非常高。Gcorelabs在 2017年收购了SkyparkCDN并提供全球CDN服务,目标是进入全球前五的网络服务商。G-Core Labs总部位于卢森堡,在莫斯科,明斯克和彼尔姆设有办事处。...
由于行业需求和自媒体的倾向问题,对于我们个人站长建站的方向还是有一些需要改变的。传统的个人网站建站内容方向可能会因为自媒体的分流导致个人网站很多行业不再成为流量的主导。于是我们很多个人网站都在想办法进行重新更换行业,包括前几天也有和网友在考虑是不是换个其他行业做做。这不有重新注册域名重新更换。鉴于快速上手的考虑还是采用香港服务器,这不腾讯云和阿里云早已不是新账户,考虑到新注册UCLOUD账户还算比...
lucene为你推荐
qsv视频格式转换器爱奇艺QSV转换工具怎么将qsv格式转换mp4视频小蓝条戴尔系统开机动画里的小蓝条怎么去数据管理制度数据必须符合以下基本原则有哪些充值卡充值移动如何用充值卡充话费邮件服务器软件给我推荐个邮件服务器软件?内详好用的手机杀毒软件好用的手机杀毒软件微信收费微信平台是否要收费如何收费比特币官方客户端bitcoin cash(BCC)是什么jshare有什么免费的网盘网站维护收费网站维护费用,一年要多少钱
美国linux主机 如何注销域名备案 科迈动态域名 rackspace 国外服务器网站 国外网站代理服务器 嘉洲服务器 建立邮箱 免费phpmysql空间 购买国外空间 789电视剧 电信托管 个人免费主页 web应用服务器 杭州电信宽带优惠 免费蓝钻 腾讯网盘 1美元 国内空间 服务器防御 更多