lucenelucene 原理
lucene 时间:2021-08-16 阅读:(
)
如何用Lucene索引数据库
Lucene一个常见的用例是在一个或者多个数据库表进行全文检索。
虽然MySql有全文检索的功能,但是如果字段和数据量增加,MySql的性能会减低很快。
映射数据到Lucene
用伪代码表示:
String sql = “select id, firstname, lastname, phone, email from person”;
ResultSet rs = stmt.executeQuery(sql);
while (rs.next()) {
Document doc = new Document();
doc.add(new Field(”id”, rs,getString(”firstname”), Field.Store.YES, Field.Index.UN_TOKENIZED));
doc.add(new Field(”firstname”, rs,getString(”firstname”), Field.Store.YES, Field.Index.TOKENIZED));
// … repeat for each column in result set
writer.addDocument(doc);}
显示搜索结果
当显示搜索结果给用户时,你有两个选择:
1.因为你的Table已经扁平化到了Lucene里面,所以只需要用Document里面的Field.因为Lucene也非常快,这样会大大减低你的数据库的压力。
2.如果你要显示另外的数据到你的搜索结果页,你只需要在Hits里面收集他们的ID,然后从数据库去数据再根据结果组装搜索结果页。
要搜索的东西
以上列出的方式都是假设把整个结果集放到内存里面,这样在数据集大的话会很容易造成问题,你需要在你的SQL里面做一些分页或者offset
你还需要在你的结果集里面做一个try/catch,这样当添加一个Document出错的时候不会影响整个过程。
通常情况下可以把所有的field放到同一个”Contents” field然后只搜索这一个字段,但是需要保留这些field这样可以按field检索。
如果你需要检索多个table
通常最好能用不同的索引来搜索不同类型的数据,而不是把他们加到同一个index然后根据类型来区分。
原因:
可以更简单的维护操作。
问个很菜的有关问题,lucene如何读
呵呵,小弟英语确实很差,这技术也没接触过,刚刚才看到的 我女朋友用到,我得给她讲,这东西不知道怎么读……各位帮忙------解决方案--------------------------------------------------------Lucene是一个非常优秀的开源的全文搜索引擎,我们可以在它的上面开发 出各种全文搜索的应用来。
Lucene在国外有很高的知名度,现在已经是Apache的顶级项目, 在国内,Lucene的应用也越来越多。
读法就直接照字面读就行了,因为不是一个本来就有的单词,所以只要读得不太离谱就行了 ------解决方案--------------------------------------------------------我读的是 路森呢 哈哈 ------解决方案--------------------------------------------------------建议安个金山词霸之类的,它里面有朗读功能! ------解决方案--------------------------------------------------------又长见识了------解决方案--------------------------------------------------------卢斯呢用Lucene查询数据库,高手请进,急!!!谢谢!!!
lucene不能直接查数据库,你得把数据库的东西取出来写到索引文件里头去。
可以先把数据库里的东西写到resultset中然后在一个一个取出来写到索引里。
注意每个document里面写数据库里一行的数据,例如数据库有id和name两列,则每个document都包含一个id和一个name信息。
这样你搜“奔驰”时,才能显示所有相关信息。
具体建立索引和搜索的实现网上都有相关代码,搜一搜就可以了。
lucene 原理
public static void addIndex(java.sql.ResultSet rs) throws SQLException, CorruptIndexException, IOException{
Analyzer luceneAnalyzer = new StandardAnalyzer(); //实例化一个标准分析器 (对字符串进行索引分析的算法) 你可以把它看作一个分词器
IndexWriter indexWriter = new IndexWriter("e:/weihai/sou", luceneAnalyzer, true);//实例化一个输出流,true重新创建,false增量创建
while(rs.next()){ //java.sql.ResultSet rs 你要建立索引的对象
Document document = new Document(); // 实例化一个文档对象 这个文档可以说是保存索引内容的文档
String goods_id = rs.getString("goods_id"); //这是需要建立索引的实体对象
if(goods_id==null) goods_id="";
Field shopid = new Field("shopid",rs.getString("shop_id"),Field.Store.YES, Field.Index.NO);//一个完整的索引多个域组成(field) 在这里有3个 分别是shopid,以及下面的goodsid,FieldBody;
我打个比方说,我们对一篇文章做全文检索的索引,我们可以分别把文章的保存路径,文章的标题,文章的正文内容作为3个field,然后一起通过下面的document.add保存到一个Document对象中,那么在检索的时候,我们在正文中查找到目标字段,同时我们可以做到把该文档的保存路径以及标题也取到;
Field goodsid = new Field("goodsid",goods_id,Field.Store.YES, Field.Index.NO);//不做索引
Field FieldBody = new Field( "body" , rs.getString("shopname")+" "+rs.getString("goodsname"), Field.Store.YES,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS);
document.add(shopid);
document.add(goodsid);
document.add(FieldBody); //把索引字段添加到行对象中
indexWriter.addDocument(document); //把一行信息加入到输出流中
}
indexWriter.optimize(); /mit 写出到硬盘上
indexWriter.close(); // 关闭流
}
public static void main(String[] args) throws CorruptIndexException, ClassNotFoundException, SQLException, IOException {
queryDB();
System.out.println("创建索引成功");
}
//如果还有什么不明白的可以直接M我,有时间的话,可以回答一点简单的问题
}
EtherNetservers是一家成立于2013年的英国主机商,提供基于OpenVZ和KVM架构的VPS,数据中心包括美国洛杉矶、新泽西和杰克逊维尔,商家支持使用PayPal、支付宝等付款方式,提供 60 天退款保证,这在IDC行业来说很少见,也可见商家对自家产品很有信心。有需要便宜VPS、多IP VPS的朋友可以关注一下。优惠码SUMMER-VPS-15 (终身 15% 的折扣)SUMMER-...
Spinservers是Majestic Hosting Solutions,LLC旗下站点,主营美国独立服务器租用和Hybrid Dedicated等,数据中心位于美国德克萨斯州达拉斯和加利福尼亚圣何塞机房。TheServerStore.com,自 1994 年以来,它是一家成熟的企业 IT 设备供应商,专门从事二手服务器和工作站业务,在德克萨斯州拥有 40,000 平方英尺的仓库,库存中始终有...
无忧云怎么样?无忧云服务器好不好?无忧云值不值得购买?无忧云,无忧云是一家成立于2017年的老牌商家旗下的服务器销售品牌,现由深圳市云上无忧网络科技有限公司运营,是正规持证IDC/ISP/IRCS商家,自营有国内雅安高防、洛阳BGP企业线路、香港CN2线路、国外服务器产品等,非常适合需要稳定的线路的用户,如游戏、企业建站业务需求和各种负载较高的项目,同时还有自营的高性能、高配置的BGP线路高防物理...
lucene为你推荐
appmakr国外的appmakr和国内的apicloud有什么区别?aftereffectpremiere pro与after effect的区别订单详情在淘宝上买东西,显示订单已发货,但是没有订单详情。可能有几种原因?rs485协议RS485和RS232协议的区别手机壳生产厂家手机保护套保护壳厂家dreamweaver序列号DW序列号是多少啊asp代码求ASP的代码网页错误详细信息网页错误详细信息 消息: 'this._self.style' 为空或不是对象网站维护收费网页制作与维护,费用动态图片在线制作怎么在网上制作动态图片?
www二级域名 广东服务器租用 hawkhost优惠码 加勒比群岛 windows2003iso 网站被封 租空间 个人域名 域名接入 世界测速 东莞服务器 重庆电信服务器托管 ebay注册 中国电信测速网站 杭州电信宽带优惠 免费php空间 mteam 香港ip 香港博客 apache启动失败 更多