维基百科创始人购买Grub进行分布式搜索

日期:2017-06-13 09:25:40 作者:冷师 阅读:

新科学家工作人员和路透社根据维基百科创始人吉米威尔士的说法,社区驱动的互联网搜索引擎的构建模块将与谷歌和雅虎等竞争对手建立起来威尔士在美国俄勒冈州波特兰举行的一次软件开发人员会议上表示,他的商业初创公司Wikia已经收购了Grub,这是一家分布式网络爬虫,可以从加利福尼亚州的公司Looksmart搜索网络并索引相关网站志愿者可以下载Grub网络爬虫,它在PC的后台运行,根据内容索引网页爬虫将被用作Wikia即将推出的搜索服务的基础相比之下,像谷歌这样的搜索引擎运行自己的网络抓取工具,并保留他们秘密工作方式的详细信息 Wikia的搜索服务的搜索结果将使用名为Lucene的开源搜索平台生成威尔士说他正在考虑增强Lucene的选项,但不会透露任何细节但是,与维基百科一样,Wikia的搜索服务也将寻求利用人类编辑器当搜索服务的公共版本启动时,将在2007年底之前邀请用户帮助解决结果,例如,为具有多种含义的术语识别正确的站点 “如果我们能够获得高质量的搜索结果,我认为这将真正改变从搜索公司回到出版商的权力平衡,”总部位于加利福尼亚州圣马特奥的Wikia主席威尔士说 “我可能错了,但这似乎是一个可能的结果”威尔士说,Wikia将向其他开发者开放Grub,以便他们可以为自己的目的进行改进或使用爬虫威尔士于1996年创立了维基百科,这是一个非商业项目,也是网络上最受欢迎的网站之一他还共同创办了Wikia,尽管这两个组织没有正式关系 Wikia允许用户创建专门的维基百科风格的网站,主题从流行的电视节目到健康或旅行据威尔士称,开放式搜索是Wikia推动免费内容发布在网络上传播的更广泛推动力的一部分他说,目标是明确现代网络搜索系统中涉及的“编辑判断” Google等专有搜索引擎会将搜索系统的关键详细信息保密,防止链接垃圾邮件以及竞争原因最终,威尔士希望Wikia搜索服务可供其他网站和小型发布商使用,以便他们可以在其网站上安装该服务的自定义版本例如,目标客户可能包括当地报纸他在O'Reilly开源大会(OSCON)上详细介绍了他的计划,