Java基于Lucene实现建立索引以及检索.doc

1、 江苏万和计算机培训中心地址：南京市中山北路 26号新晨国际大厦 24层(地铁鼓楼站 4A出口)官方网站：http:/Java 基于 Lucene 实现建立索引以及检索Step1 利用 Lucene 建立索引数据库中存放了数据集，对应上万个 TXT 的文件，表 FILE 含有两个字段，分别为 path 和content，依次保存文件的路径和内容。这里，利用 Lucene 对这些数据建立索引。java view plaincopy1. package pretreatment; 2. import java.io.File; 3. import java.io.IOException; 4. i

2、mport java.sql.Connection; 5. import java.sql.DriverManager; 6. import java.sql.SQLException; 7. import java.util.Date; 8. import java.util.List; 9. import org.apache.lucene.analysis.standard.StandardAnalyzer; 10. import org.apache.lucene.document.Document; 11. import org.apache.lucene.document.Fiel

3、d; 12. import org.apache.lucene.index.IndexWriter; 13. /* 14. * BuildIndex 用于创建索引，数据由数据库读取，创建的索引目录为 INDEX_PATH 15. * author Tony 16. * 17. */ 18. public class BuildIndex 19. /索引存储路径 20. private String INDEX_PATH = “D:/index“; 21. 22. public void createIndex() 23. 24. try 25. /起始时间 26. Date start = n

4、ew Date(); 27. /创建分析器 28. StandardAnalyzer standardAnalyzer = new StandardAnalyzer(); 29. /创建 IndexWriter 江苏万和计算机培训中心地址：南京市中山北路 26号新晨国际大厦 24层(地铁鼓楼站 4A出口)官方网站：http:/30. IndexWriter indexWriter = new IndexWriter(INDEX_PATH, standardAnalyzer, true); 31. /参数设置 32. indexWriter.setMergeFactor(100); 33. in

5、dexWriter.setMaxBufferedDocs(100); 34. indexWriter.setMaxFieldLength(1000); 35. 36. /从数据库获得数据对象 37. Connection conn = BuildIndex.creatConn(); 38. int st = 0; 39. int en = 49; 40. int num = 1; 41. while(en fileList = FileInfoController.getFileInfo(st,en,conn); 43. st = en+1; 44. en = st+49; 45. for (

6、int i = 0; i lfi = new ArrayList(); 43. 44. 45. public List getLfi() 46. return lfi; 47. 48. 49. public void setLfi(List lfi) 50. this.lfi = lfi; 51. 52. 53. public long getCostTime() 54. return costTime; 55. 56. 57. public void setCostTime(long costTime) 58. this.costTime = costTime; 59. 60. 61. pu

7、blic int getResultSize() 62. return resultSize; 63. 64. 65. public void setResultSize(int resultSize) 66. this.resultSize = resultSize; 67. 68. 69. public String getPath() 70. return path; 71. 72. 73. public void setPath(String path) 74. this.path = path; 75. 江苏万和计算机培训中心地址：南京市中山北路 26号新晨国际大厦 24层(地铁鼓楼

8、站 4A出口)官方网站：http:/76. 77. public String getContent() 78. return content; 79. 80. 81. public void setContent(String content) 82. this.content = content; 83. 84. 85. public String getKeyWord() 86. return keyWord; 87. 88. 89. public void setKeyWord(String keyWord) 90. this.keyWord = keyWord; 91. 92. 93

9、. public int getMaxResults() 94. return maxResults; 95. 96. 97. public void setMaxResults(int maxResults) 98. this.maxResults = maxResults; 99. 100. 101. public String execute() throws Exception 102. / TODO Auto-generated method stub 103. try 104. /开始时间 105. Date start = new Date(); 106. /Begin 107.

10、 IndexSearcher searcher = new IndexSearcher(INDEX_PATH); 108. 109. QueryParser queryParse = new QueryParser(“content“, analyzer); 110. 111. Query query = queryParse.parse(keyWord); 112. 113. Hits hits = searcher.search(query); 114. 115. /高亮显示设置 116. /SimpleHTMLFormatter simpleHTMLFormatter = new Sim

11、pleHTMLFormatter(“,“); 江苏万和计算机培训中心地址：南京市中山北路 26号新晨国际大厦 24层(地铁鼓楼站 4A出口)官方网站：http:/117. SimpleHTMLFormatter simpleHTMLFormatter = new SimpleHTMLFormatter(“,“); 118. Highlighter highlighter = new Highlighter(simpleHTMLFormatter,new QueryScorer(query); 119. highlighter.setTextFragmenter(new SimpleFragme

12、nter(50);/这个100 是指定关键字字符串的 context 的长度，你可以自己设定，因为不可能返回整篇正文内容 120. boolean bool = true; 121. if(hits.length()=0) 122. bool = false; 123. String ms = “没有找到相关的记录！“; 124. else 125. for(int i=0;i 2. 3. 4. 5. 6. Search Result 7. 8. .highlight 14. color: #C71585; 15. font-weight: bold; 16. 17. 18. 19. 20.

13、21. searchresult = new ArrayList(); 29. searchresult = (List) session.getAttribute(“lfi“); 30. startLocation = (Integer)request.getAttribute(“sl“); 31. numPerPage = (Integer)request.getAttribute(“numPerPage“); 32. totalNum = searchresult.size(); 33. maxPageNum=(totalNum%numPerPage) = 0)?totalNum/num

14、PerPage:(totalNum/numPerPage+1); 34. curPage=startLocation/numPerPage + 1; 35. 36. % 37. “+result.getPath()+“); 43. out.println(“+result.getContent(); 44. 45. else 46. System.out.println(“totalNum=“+totalNum); 47. for(int i=startLocation; i“+result.getPath()+“); 50. out.println(“+result.getContent(); 51. 52. 53. % 54. 55. 56. 57. 1 ) 59. out.println(“上一页“); 62. 63. if(maxPageNum 10) 64. int totalNumShow = curPage + 9; 65. int startLocationPage = 0; 66. if( totalNumShow maxPageNum) 67. totalNumShow = maxPageNum; 68. 69. if( maxPageNum 11 71. 72. for(int i=startLocationPage;i “ “ % 86.