安装与部署
参考这篇文章:window环境下将solr6.3部署到tomcat中或者查看截图
其实还是遇到了一些奇奇怪怪的问题的,但是因为我服务器是windows server 2008,对各位看官不具有普适性,就不说了。这里遇到问题,拿现象去google就好了,还是挺容易配置好的
完成这步之后,你打开http://127.0.0.1:8080/solr/index.html这个地址应该可以看到solr的界面了
导入MySql数据
我导入的时候主要是参考了这篇博文,但是在参考他的过程中发现有些东西对我的服务器不是很适应,所以做了修改,到时候我会注明的。步骤1:
在webapps中solrhome下新建一个文件夹名字叫做mynode(名字不固定,可以随便取,但是这个名字在后面的配置中会有所关联。)然后在mynode文件下新建一个名字叫做conf的文件夹(这个文件名字最后不要改。)然后把官网下下来的solr项目中solr-6.0.0\server\solr\configsets\data_driven_schema_configs\conf下的所有东西复制到conf中去。(注意不要复制错!)最后把solr-6.0\solr-6.0.0\example\example-DIH\solr\db\conf下的admin-extra.html, admin-extra.menu-bottom.html ,admin-extra.menu-top.html三个文件也复制到conf中去。步骤2:
把mysql所需的jar包和solr-6.0\solr-6.0.0\dist下的solr-dataimporthandler-6.0.0.jar和solr-dataimporthandler-extras-6.0.0.jar都复制到项目WEB-INF\lib下。然后在solrconfig.xml文件中加入(就是把WEB-INF\lib里面的jar包配置到项目中,我这里用的是绝对地址。这段代码大约在solrconfig.xml的70多行处,前面有一堆类似的代码。) 步骤3: 在MYSQL中新建一张表。我这里用的是Navicat管理工具进行创建的。这里的表名是goods。字段如下图所示:<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler"> <lst name="defaults"> <str name="config">data-config.xml</str> </lst> </requestHandler>然后在conf下新建data-config.xml文件。里面内容如下:
<?xml version="1.0" encoding="UTF-8"?>
<dataConfig>
<dataSource name="source1" type="JdbcDataSource" driver="com.mysql.jdbc.Driver" url="jdbc:mysql://localhost:3306/solrdata" user="root" password="220316" batchSize="-1" />
<document>
<entity name="goods" pk="id" dataSource="source1"
query="select * from goods"
deltaImportQuery="select * from goods where id='${dih.delta.id}'"
deltaQuery="select id from goods where updateTime> '${dataimporter.last_index_time}'">
<field column="id" name="id"/>
<field column="name" name="name"/>
<field column="number" name="number"/>
<field column="updateTime" name="updateTime"/>
</entity>
</document>
</dataConfig>
在这里我去掉了deltaQuery,所以不能增量添加了 dataSource是数据库数据源(也就是数据库名称),entity中的name是表名,剩下的都是一些字段名说明: dataSource是数据库数据源(也就是数据库名称)。Entity就是一张表对应的实体,pk是主键,query是查询语句。Field对应一个字段,column是数据库里的column名,后面的name属性对应着Solr的Filed的名字。其中solrdata是数据库名,goods是表名。 其中deltaQuery是增量索引,原理是从数据库中根据deltaQuery指定的SQL语句查询出所有需要增量导入的数据的ID号。然后根据deltaImportQuery指定的SQL语句返回所有这些ID的数据,即为这次增量导入所要处理的数据。核心思想是:通过内置变量“${dih.delta.id}”和 “${dataimporter.last_index_time}”来记录本次要索引的id和最近一次索引的时间。 最后在conf文件下的managed-schema配置field信息:
<field name="id" type="int" indexed="true" stored="true" required="true" multiValued="false" /> <field name="name" type="string" indexed="true" stored="false"/> <field name="number" type="int" indexed="true" stored="false"/> <field name="updateTime" type="date" indexed="true" stored="true" /> <field name="_version_" type="long" indexed="true" stored="false"/> <field name="_root_" type="string" indexed="true" stored="false" docValues="false" /> <field name="_text_" type="text_general" indexed="true" stored="false" multiValued="true"/>
这里的每一行都代表一个字段其中id,name,number,updateTime是上面提到的数据库字段。下面三个field是系统本身的不能删除,否则会运行错误。 步骤5: 启动tomcat,并在URL中输入http://127.0.0.1:8080/solr/index.html路径。选择Core admin 输入如下设置:
如果Add Core的时候出错,那么首先要检查里面填写的文件的名称在文件夹中是否存在,如果检查了都存在而且内容也正确,那么就换另一种办法,使用命令行来创建 首先找到solr的bin目录,cmd中cd到这个目录solr create -c xxx -p 8080用这个命令在创建一个新的solr项目,其中xxx是创建的名称,-p后面是端口 这个时候要把tomcat中对solr的账号密码控制给去掉,参考:点击打开,删除第一步的内容即可(如果没有账号密码可以忽略)
其他
我总结了一下,其实只要修改其中的三个文件就可以创建一个新的solr项目了 这三个文件分别是:data-config.xml、managed-schema、solrconfig.xml data-config.xml这个文件用来告诉solr我的数据从哪里来,所以配置的是数据库的东西 managed-schema这个文件用来配置字段,告诉solr要导入那些字段,字段的type分别是什么,如: solrconfig.xml这个文件用来配置这个<requesthandler name="/dataimport" class="solr.DataImportHandler"> <lst name="defaults"> <str name="config">data-config.xml</str> </lst> </requesthandler>告诉solr用哪个文件来作为配置项 所以如果一个可以用之后,只要复制这个项目,将这个三个文件根据对应的数据库进行修改之后,即可成为另外一个项目使用 在复制之后,需要删除data\index下面的所有文件,这个文件夹里面是所有文件,要删除之后重新生成 我把我配置好的打包了一个: moviedata 配置了之后记得修改那三个文件就好,对了如果要改名字记得改文件夹和core.properties中的