接着上篇nutch1.4的部署应用,我们来部署一下solr,solr是对lucene进行了封装的企业级搜索应用,具体的大家可以去搜一下了解,我这里就不做具体阐述了,我来说一下solr的部署吧。
首先,我们去solr的官网中下载solr,nutch1.4中应用的solr是3.4,那么我们去官网中也下载3.4吧
http://www.apache.org/dyn/closer.cgi/lucene/solr/
找到3.4.0下载apache-solr-3.4.0.zip或者apache-solr-3.4.0.tgz都可以,下载完成后,我们解压缩,解压完毕后,我们去解压一个tomcat,我用的是tomcat6,解压完tomcat6后,我们打开tomcat 的文件夹,
然后我们在tomcat下的conf目录下
创建Catalina\localhost目录(如果存在就不用创建)
然后我们创建solr.xml文件
在里面加入如下语句:
<Context docBase="D:/file/apache-solr-3.4.0/dist/apache-solr-3.4.0.war" reloadable="true" debug="0" privileged="true" allowLinking="true" crossContext="true">
<Environment name="solr/home" type="java.lang.String" value="D:/file/apache-solr-3.4.0/example/solr" override="true" />
<!--
<Valve className="org.apache.catalina.valves.RemoteAddrValve" allow="127.0.0.1,localhost,192.168.0.127"/>
-->
</Context>
docBase中是我们的solr的web服务的地址,我们解压solr后,到dist中找到apache-solr-3.4.0.war给引入进来,然后solr/home就是solr的配置和索引地址,测试的话可以引入example/solr,或者把example下的solr 复制到任何位置都可以,只要把solr/home的地址给加正确了就可以。
如果需要控制访问权限则可以配置(上面配置注释的地方):
<Valve className="org.apache.catalina.valves.RemoteAddrValve" allow="127.0.0.1,localhost,192.168.0.127"/>
如果不是来自配置的IP则被拦截会显示403
我们全部配置好了,现在还不行,如果要与nutch进行索引的话,还需要把nutch中的solr配置给copy过来,我们在nutch1.4的conf目录下找到schema.xml文件,然后我们将这个文件copy到solr/home的conf目录下即可,如果不将nutch 下的schema.xml文件copy过去,在生成索引时会出现 一些错误如:
org.apache.solr.common.SolrException: ERROR:unknown field 'content'
配置好了后,然后启动tomcat即可,然后nutch爬取完毕后就会生成索引到solr/home下的data下面:
D:/file/apache-solr-3.4.0/example/solr/data/index下(我的solr/home)
下一节会介绍solr中文分词(IK)
分享到:
相关推荐
solr创建索引并查询,希望能够帮助有需要的人。。。
windows 下 部署 solr4.4 搭建索引服务器,实现全文搜索 dataimport 自动更新索引 最新版本
solr初学者很受用的!讲解了solr怎么创建索引的及其原理,以及查询
Nutch+solr + hadoop相关框架搭建教程
centos7 环境 安装docker 并在docker 中部署solr 并使用
索引是设计表的一部分,创建的索引对sql的语句木有任何影响,对sql语句的执行效率有影响
NULL 博文链接:https://takeme.iteye.com/blog/1849781
solr增量导入更新索引包
在tomcat中配置solr,以及solr 全文搜索建立索引的相关方法总结
Ubuntu16.04安装部署solr7详细过程,有需要搭建的可以参考!
NULL 博文链接:https://yangjayup.iteye.com/blog/1773636
基于solr5.5.5的安装部署文档,包含solr导入Oracle数据库
Solr部署及开发 Apache Solr 是一个开源的搜索服务器,Solr 使用 Java 语言开发,主要基于 HTTP 和 Apache Lucene 实现。
Solr数据库插入(全量和增量)索引,全量一般用于第一次创建索引情况,批量一般更新数据部分创建索引。
楼主实操的步骤整理的,只需要将Zookeeper的ip换成自己集群的就可以一步步地跟着文档实现,感兴趣的同学可以看看。
主要讲解了 solr客户端如何调用带账号密码的solr服务器调用,实现添加索引和查询索引,以及分组查询
solr的部署方法,数据库连接,以及安全机制
Solr是一个基于Lucene的Java搜索引擎服务器。Solr 提供了层面搜索、命中醒目显示并且支持多种输出格式(包括 XML/XSLT 和 JSON 格式)。...此外,很多 Lucene 工具(如Nutch、 Luke)也可以使用 Solr 创建的索引。
在windows7级以上版本,使用tomcat中间件,部署solr7.x,并创建开发工程文档。为想用solr做全文索引的人一起学习交流一下。
NULL 博文链接:https://iamyida.iteye.com/blog/2214905