喜悦国际村 
» 游客:  注册 | 登录 | 搜索 | 统计 | 帮助

RSS 订阅当前论坛  

喜悦证交所已经关闭

上一主题 下一主题
 12  1/2  1  2  > 
     
标题: 用PHP调用Lucene包来实现全文检索(原创)  
 
z33
新手上路
Rank: 1
初级会员



UID 48120
精华 0
积分 21
帖子 17
金钱 21 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2004-11-11
状态 离线
用PHP调用Lucene包来实现全文检索(原创)

/*转贴请保留以下信息*/
作者:张杰
URL:http://spaces.msn.com/members/newbdez33/
http://www.phpboom.com/



由于工作需要,需要使用PHP实现对网站内大量数量进行全文检索,
而且目前最流行的全文检索的搜索引擎库就是Lucene了,
它是Apache Jakarta的一个子项目,并且提供了简单实用的API,
用这些API,就可以对任何基本文本的数据(包括数据库)进行全文检索。


因为PHP本身就支持调用外部Java类,所以先用Java写了一个类,
这个类通过调用Lucene的API,实现了两个方法:

    * public String createIndex(String indexDir_path,String dataDir_path)
    * public String searchword(String ss,String index_path)

其中createIndex是创建索引方法,
传入了两个参数分别是indexDir_path(索引文件的目录),dataDir_path(被索引的文件目录),返回被索引的文件列表字符串,
另一个是searchword,通过传入的关键字参数(ss)对索引进行检索,index_path就是索引文件的目录。返回所有检索到的文件。

这里是源代码,很简单,大家可以参考一下:TxtFileIndexer.java

而PHP程序就调用这两个方法,实现对Lucene的调用,从而达到全文检索的目的。
PHP的调用方法如下:
先创建一个我们写的TxtFileIndexer类的实例,

    $tf = new Java('TestLucene.TxtFileIndexer');

然后就按正常PHP类的调用方法的方式进行调用,首先创建索引:

    $data_path = "F:/test/php_lucene/htdocs/data/manual";  //定义被索引内容的目录
    $index_path = "F:/test/php_lucene/htdocs/data/search";  //定义生成的索引文件存放目录
    $s = $tf->createIndex($index_path,$data_path);  //调用Java类的方法
    print $s;  //打印返回的结果

这次再试试检索:

    $index_path = "F:/test/php_lucene/htdocs/data/search";  //定义生成的索引文件存放目录
    $s = $tf->searchword("here is keyword for search",$index_path);
    print $s;

另外要注意Java类的路径,可以在PHP里设置

    java_require("F:/test/php_lucene/htdocs/lib/");  //这是个例子,我的类和Lucene都放到这个目录下

这样就可以了,是不是很简单。

PHP源代码:test.php


接下来我把环境配置说一下,
首先需要有Java SDK,是必须的,我使用的是1.4.2版的,其它版本应该也没问题。
PHP5,试过PHP4,应该可以。

由于PHP5带的Java扩展没调通,并且以前用过调用Java效率很低,很慢,所以使用了 Php/Java Bridge 这个项目。

1.下载JavaBridge
URL:http://sourceforge.net/projects/php-java-bridge/
目前版本是
php-java-bridge_3.0.8_j2ee.zip

解包后把
JavaBridge\WEB-INF\cgi\java-x86-windows.dll
JavaBridge\WEB-INF\lib\JavaBridge.jar
复制到 c:\php\ext 目录下,并把
java-x86-windows.dll 改名为 php_java.dll


2.修改php.ini(例)
extension=php_java.dll

[Java]
java.class.path = "C:\php\ext\JavaBridge.jar;F:\test\php_lucene\htdocs"
java.java_home = "C:\j2sdk1.4.2_10"
java.library.path = "c:\php\ext;F:\test\php_lucene\htdocs"

3.重启Apache即可。

4.可以找一些文件进行索引
在test.php里可以修改索引文件和数据文件的路径。
TxtFileIndexer.java的37行限制了只索引html后缀的文件,有需要也可以修改。

根据目前的情况(JavaBridge支持Linux和Freebsd),完全可以在
linux或freebsd/apache2/php4/lucene/JavaBridge
环境下运行。



本文章可能会随时更新,另外这里可以访问:
用PHP调用Lucene包来实现全文检索

我的MSN是 z33 <at> 163.com
欢迎技术探讨:)




在线便签 phpboom.com
↑AJAX note
2006-5-15 09:48 AM#1
查看资料  访问主页  发短消息  顶部
 
shitou (shitou)
注册会员
Rank: 2
一般会员



UID 29130
精华 0
积分 109
帖子 116
金钱 109 喜悦币
威望 0
人脉 0
阅读权限 20
注册 2004-6-4
状态 离线
[推荐阅读] 求助
好文章咋没人顶呢?
2006-5-15 05:41 PM#2
查看资料  发短消息  顶部
 
duketang (duketang)
版主
Rank: 7Rank: 7Rank: 7
无聊的老亮


UID 18398
精华 3
积分 84
帖子 1646
金钱 54 喜悦币
威望 30
人脉 0
阅读权限 100
注册 2003-2-17
来自 沈阳->北京->沈阳-> ...
状态 离线
[推荐阅读] 帮忙看这两个文件有没有问题
喜欢这种文章
2006-5-16 09:57 AM#3
查看资料  Blog  发短消息  QQ . .   顶部
 
太阳雨
高级会员
Rank: 4
船长



UID 29985
精华 0
积分 729
帖子 880
金钱 729 喜悦币
威望 0
人脉 0
阅读权限 50
注册 2004-7-10
来自 广州
状态 离线
[推荐阅读] 帮我看一下回帖的程序有没问题
我安装javabridge已成功,调用系统的java api成功,但自己写的class不知放到哪里才可以被调用,试过很多地方都不行



PHPec开发框架(www.phpec.com)
2006-5-16 11:35 AM#4
查看资料  Blog  发短消息  QQ . .   顶部
 
jxyuhua
新手上路
Rank: 1



UID 71899
精华 0
积分 49
帖子 55
金钱 49 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2006-4-18
状态 离线
[推荐阅读] 用php读取文件
有没有人用过Zend Framework里的全文搜索啊?
2006-5-16 11:40 AM#5
查看资料  发短消息  顶部
 
jyhan
新手上路
Rank: 1



UID 70060
精华 0
积分 17
帖子 27
金钱 17 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2006-3-22
状态 离线
[推荐阅读] 自己写的第二个类,自己都感觉垃圾哦,谁来扩展一下
不错,支持
2006-5-16 01:28 PM#6
查看资料  Blog  发短消息  顶部
 
绿茵汗将 (绿茵汗将)
新手上路
Rank: 1
初级会员



UID 28370
精华 0
积分 7
帖子 12
金钱 7 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2004-5-9
状态 离线
[推荐阅读] 自己写的正则笔记教程
看到一篇文章,用Zend Framework来实现的。。。。引个URL过来: http://www.phpriot.com/d/articles/php/search/zend-search-lucene
2006-5-17 09:38 AM#7
查看资料  访问主页  发短消息  顶部
 
风在芯中
金牌会员
Rank: 6Rank: 6
kuliu.com



UID 25808
精华 0
积分 2548
帖子 716
金钱 2548 喜悦币
威望 0
人脉 0
阅读权限 70
注册 2004-1-19
来自 福建 福州
状态 离线
[推荐阅读] 4.0数据库查询中文时查询不到数据,怎么回事呢?
好文章~~~~



酷溜网
2006-5-18 12:11 PM#8
查看资料  访问主页  Blog  发短消息  顶部
 
matchless (matchless)
注册会员
Rank: 2
一般会员



UID 67371
精华 0
积分 106
帖子 108
金钱 106 喜悦币
威望 0
人脉 0
阅读权限 20
注册 2005-12-21
状态 离线
[推荐阅读] 怎样设置让回帖后转到最后一楼
支持一下~
2006-5-24 12:56 PM#9
查看资料  发短消息  顶部
 
瘦死的骆驼 (瘦死的骆驼)
注册会员
Rank: 2
一般会员



UID 30318
精华 0
积分 72
帖子 72
金钱 72 喜悦币
威望 0
人脉 0
阅读权限 20
注册 2004-7-24
状态 离线
[推荐阅读] 问两个高难度问题,能解决的人民币奖励!
路过  支持一下
2006-5-24 01:49 PM#10
查看资料  发短消息  顶部
 12  1/2  1  2  > 
     


  可打印版本 | 推荐给朋友 | 订阅主题 | 收藏主题 | 开通个人空间  


 




Powered by Discuz! 6.1.0  © 2001-2010 Comsenz Inc.
Processed in 0.055465 second(s), 6 queries

(冀ICP备05009913号) 管理员:sadly 邮箱/MSN: sadly@phpx.com QQ:824008(长隐) 清除 Cookies - - Archiver - WAP