lucenelucene 原理
lucene 时间:2021-08-16 阅读:(
)
如何用Lucene索引数据库
Lucene一个常见的用例是在一个或者多个数据库表进行全文检索。
虽然MySql有全文检索的功能,但是如果字段和数据量增加,MySql的性能会减低很快。
映射数据到Lucene
用伪代码表示:
String sql = “select id, firstname, lastname, phone, email from person”;
ResultSet rs = stmt.executeQuery(sql);
while (rs.next()) {
Document doc = new Document();
doc.add(new Field(”id”, rs,getString(”firstname”), Field.Store.YES, Field.Index.UN_TOKENIZED));
doc.add(new Field(”firstname”, rs,getString(”firstname”), Field.Store.YES, Field.Index.TOKENIZED));
// … repeat for each column in result set
writer.addDocument(doc);}
显示搜索结果
当显示搜索结果给用户时,你有两个选择:
1.因为你的Table已经扁平化到了Lucene里面,所以只需要用Document里面的Field.因为Lucene也非常快,这样会大大减低你的数据库的压力。
2.如果你要显示另外的数据到你的搜索结果页,你只需要在Hits里面收集他们的ID,然后从数据库去数据再根据结果组装搜索结果页。
要搜索的东西
以上列出的方式都是假设把整个结果集放到内存里面,这样在数据集大的话会很容易造成问题,你需要在你的SQL里面做一些分页或者offset
你还需要在你的结果集里面做一个try/catch,这样当添加一个Document出错的时候不会影响整个过程。
通常情况下可以把所有的field放到同一个”Contents” field然后只搜索这一个字段,但是需要保留这些field这样可以按field检索。
如果你需要检索多个table
通常最好能用不同的索引来搜索不同类型的数据,而不是把他们加到同一个index然后根据类型来区分。
原因:
可以更简单的维护操作。
问个很菜的有关问题,lucene如何读
呵呵,小弟英语确实很差,这技术也没接触过,刚刚才看到的 我女朋友用到,我得给她讲,这东西不知道怎么读……各位帮忙------解决方案--------------------------------------------------------Lucene是一个非常优秀的开源的全文搜索引擎,我们可以在它的上面开发 出各种全文搜索的应用来。
Lucene在国外有很高的知名度,现在已经是Apache的顶级项目, 在国内,Lucene的应用也越来越多。
读法就直接照字面读就行了,因为不是一个本来就有的单词,所以只要读得不太离谱就行了 ------解决方案--------------------------------------------------------我读的是 路森呢 哈哈 ------解决方案--------------------------------------------------------建议安个金山词霸之类的,它里面有朗读功能! ------解决方案--------------------------------------------------------又长见识了------解决方案--------------------------------------------------------卢斯呢用Lucene查询数据库,高手请进,急!!!谢谢!!!
lucene不能直接查数据库,你得把数据库的东西取出来写到索引文件里头去。
可以先把数据库里的东西写到resultset中然后在一个一个取出来写到索引里。
注意每个document里面写数据库里一行的数据,例如数据库有id和name两列,则每个document都包含一个id和一个name信息。
这样你搜“奔驰”时,才能显示所有相关信息。
具体建立索引和搜索的实现网上都有相关代码,搜一搜就可以了。
lucene 原理
public static void addIndex(java.sql.ResultSet rs) throws SQLException, CorruptIndexException, IOException{
Analyzer luceneAnalyzer = new StandardAnalyzer(); //实例化一个标准分析器 (对字符串进行索引分析的算法) 你可以把它看作一个分词器
IndexWriter indexWriter = new IndexWriter("e:/weihai/sou", luceneAnalyzer, true);//实例化一个输出流,true重新创建,false增量创建
while(rs.next()){ //java.sql.ResultSet rs 你要建立索引的对象
Document document = new Document(); // 实例化一个文档对象 这个文档可以说是保存索引内容的文档
String goods_id = rs.getString("goods_id"); //这是需要建立索引的实体对象
if(goods_id==null) goods_id="";
Field shopid = new Field("shopid",rs.getString("shop_id"),Field.Store.YES, Field.Index.NO);//一个完整的索引多个域组成(field) 在这里有3个 分别是shopid,以及下面的goodsid,FieldBody;
我打个比方说,我们对一篇文章做全文检索的索引,我们可以分别把文章的保存路径,文章的标题,文章的正文内容作为3个field,然后一起通过下面的document.add保存到一个Document对象中,那么在检索的时候,我们在正文中查找到目标字段,同时我们可以做到把该文档的保存路径以及标题也取到;
Field goodsid = new Field("goodsid",goods_id,Field.Store.YES, Field.Index.NO);//不做索引
Field FieldBody = new Field( "body" , rs.getString("shopname")+" "+rs.getString("goodsname"), Field.Store.YES,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS);
document.add(shopid);
document.add(goodsid);
document.add(FieldBody); //把索引字段添加到行对象中
indexWriter.addDocument(document); //把一行信息加入到输出流中
}
indexWriter.optimize(); /mit 写出到硬盘上
indexWriter.close(); // 关闭流
}
public static void main(String[] args) throws CorruptIndexException, ClassNotFoundException, SQLException, IOException {
queryDB();
System.out.println("创建索引成功");
}
//如果还有什么不明白的可以直接M我,有时间的话,可以回答一点简单的问题
}
Friendhosting发布了今年黑色星期五促销活动,针对全场VDS主机提供45折优惠码,虚拟主机4折,老用户续费可获9折加送1个月使用时长,优惠后VDS最低仅€14.53/年起,商家支持PayPal、信用卡、支付宝等付款方式。这是一家成立于2009年的老牌保加利亚主机商,提供的产品包括虚拟主机、VPS/VDS和独立服务器租用等,数据中心可选美国、保加利亚、乌克兰、荷兰、拉脱维亚、捷克、瑞士和波...
2021年恒创科技618活动香港美国服务器/云服务器/高防全场3折抢购,老客户续费送时长,每日限量秒杀。云服务器每款限量抢购,香港美国独服/高防每款限量5台/天,香港节点是CN2线路还不错。福利一:爆品秒杀 超低价秒杀,秒完即止;福利二:云服务器 火爆机型 3折疯抢;福利三:物理服务器 爆款直降 800元/月起;福利四:DDOS防护 超强防御仅 1750元/月。点击进入:2021年恒创科技618活...
青果网络QG.NET定位为高效多云管理服务商,已拥有工信部颁发的全网云计算/CDN/IDC/ISP/IP-VPN等多项资质,是CNNIC/APNIC联盟的成员之一,2019年荣获国家高薪技术企业、福建省省级高新技术企业双项荣誉。那么青果网络作为国内主流的IDC厂商之一,那么其旗下美国洛杉矶CN2 GIA线路云服务器到底怎么样?官方网站:https://www.qg.net/CPU内存系统盘流量宽带...
lucene为你推荐
lazyloadlazyload实现的是什么功能笛卡尔乘积笛卡尔乘积是啥定义qq实名注册请问手机QQ上实名认证怎么弄?aftereffectAfter effect Premere分别是什么软件,做什么的?色温图一张色温准确的照片的基本标准是什么?rs485协议RS232/RS485串行通信协议的解释rs485协议HART modbus profibus 这三种协议有什么区别?这几种协议都是干什么用的?小蓝条戴尔系统开机动画里的小蓝条怎么去vrrp配置INTERNET协议属性里面的备用配置有什么用?空间图片qq空间图片
广西虚拟主机 花生壳动态域名 国外服务器租用 提供香港vps google镜像 vultr美国与日本 suspended 好看的桌面背景图片 tk域名 湖南服务器托管 免费个人空间申请 微信收钱 hkg adroit 世界测速 绍兴电信 atom处理器 宿迁服务器 comodo 游戏服务器 更多