solr从数据库

㈠ 关于solr的导入数据库不能查询的问题

首先，先查看数据是否导入

再次查询就可以查到了。

㈡ solr怎么把数据库数据导入索引库

在solr与tomcat整合文章中，我用的索引库是mycore，现在就以这个为例。
首先要准备jar包：solr-dataimporthandler-4.8.1.jar、solr-dataimporthandler-extras-4.8.1.jar和mysql-connector-java-5.0.7-bin.jar这三个包到solr的tomcat的webapps\solr\WEB-INF\lib下
在这个文件夹的conf下配置两个文件，添加一个文件。先配置solrconfig.xml。
在该文件下添加一个新节点。
<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">
<lst name="defaults">
<str name="config">data-config.xml</str>
</lst>
</requestHandler>
在solrconfig.xml的同目录下创建data-config.xml。
配置：
复制代码
<dataConfig>
<dataSource type="JdbcDataSource"
driver="com.mysql.jdbc.Driver"
url="jdbc:mysql://localhost:3306/courseman"
user="root"
password="mysql" />
<document>
<entity name="student"
query="SELECT * FROM student">
<field column="id" name="id" />
<field column="name" name="name" />
<field column="gender" name="gender" />
<field column="major" name="major" />
<field column="grade" name="grade" />
</entity>
</document>
</dataConfig>
复制代码
schemal.xml的配置
复制代码
<?xml version="1.0" ?>
<!--
Licensed to the Apache Software Foundation (ASF) under one or more
contributor license agreements. See the NOTICE file distributed with
this work for additional information regarding right ownership.
The ASF licenses this file to You under the Apache License, Version 2.0
(the "License"); you may not use this file except in compliance with
the License. You may obtain a of the License at

Unless required by applicable law or agreed to in writing, software
distributed under the License is distributed on an "AS IS" BASIS,
WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
See the License for the specific language governing permissions and
limitations under the License.
-->
<schema name="example core one" version="1.1">
<fieldtype name="string" class="solr.StrField" sortMissingLast="true" omitNorms="true"/>
<fieldType name="long" class="solr.TrieLongField" precisionStep="0" positionIncrementGap="0"/>
<fieldType name="int" class="solr.TrieIntField" precisionStep="0" positionIncrementGap="0"/>
<!-- general -->
<field name="id" type="int" indexed="true" stored="true" />
<field name="gender" type="string" indexed="true" stored="true" />
<field name="name" type="string" indexed="true" stored="true" />
<field name="major" type="string" indexed="true" stored="true" />
<field name="grade" type="string" indexed="true" stored="true" />
<field name="_version_" type="long" indexed="true" stored="true"/>
<!-- field to use to determine and enforce document uniqueness. -->
<uniqueKey>id</uniqueKey>
<!-- field for the QueryParser to use when an explicit fieldname is absent -->
<defaultSearchField>name</defaultSearchField>
<!-- SolrQueryParser configuration: defaultOperator="AND|OR" -->
<solrQueryParser defaultOperator="OR"/>
</schema>
复制代码
默认的文件不是这样的，稍微改动了一下。
field 的type类型是根据fieldtype 的name定义的。class是solr自定义的不能更改。
shcema.xml文件的field字段的属性介绍：
（1）name：字段名称
（2）type：字段类型（此处type不是java类型，而是下面定义的fieldType）
（3）indexed：是否索引看true--solr会对这个字段进行索引，只有经过索引的字段才能被搜索、排序等；false--不索引
（4）stored：是否存储看true--存储，当我们需要在页面显示此字段时，应设为true，否则false。
（5）required：是否必须看true--此字段为必需，如果此字段的内容为空，会报异常；false--不是必需
（6）multiValued：此字段是否可以保存多个值看
（7）omitNorms：是否对此字段进行解析看有时候我们想通过某个字段的完全匹配来查询信息，那么设置 indexed="true"、omitNorms="true"。
（8）default：设置默认值
有这样一个FieldType描述：
<fieldType name="text_general" positionIncrementGap="100">
<analyzer type="index">
<tokenizer/>
<filter ignoreCase="true" words="stopwords.txt" enablePositionIncrements="true" />
<filter/>
</analyzer>
<analyzer type="query">
<tokenizer/>
<filter ignoreCase="true" words="stopwords.txt" enablePositionIncrements="true" />
<filter synonyms="synonyms.txt" ignoreCase="true" expand="true"/>
<filter/>
</analyzer>
</fieldType>
属性说明：
（1）name：类型名称，<field>中的type引用的就是这个name
（2）class：solr自定义的类型
（3）<analyzer type="index">定义建立索引时使用的分词器及过滤器
（4）<analyzer type="query">定义搜索时所使用的分词器及过滤器
（5）<tokenizer/>定义分词器
（6）<filter/>定义过滤器
uniqueKey属性
<uniqueKey>id</uniqueKey>
类似于数据表数据的id，solr索引库中最好定义一个用于标示document唯一性的字段，此字段主要用于删除document。
defaultSearchField属性
就是你在做query搜寻时若不指定特定栏位做检索时, Solr就会只查这个栏位.
<defaultSearchField>default</defaultSearchField>
Field属性
是用来复制你一个栏位里的值到另一栏位用. 如你可以将name里的东西到major里, 这样solr做检索时也会检索到name里的东西.
<Field source="name" dest="major"/>
现在可以将数据库的数据导入solr了。
点击Execute就可以了。

㈢ solr中的数据从哪儿来

solr的数据有很多来源方式，数据库只是其中一种，可以看着这个Solr安装部署

㈣ 如何配置solr的javabin方式创建创建索引

用solr从数据库建立中文索引

1.在Ubuntu下安装mysql服务端和客户端。
#apt-get install mysql-server-5.0
#apt-get install mysql

2.添加Handler
编辑/opt/solr-tomcat/solr/conf文件夹下的solrconfig.xml文件，在config元素中添加

3. 在此文件夹中新建一个data-config.xml文件，内容如下

4. 修改schema.xml，找到<fieldType name="text"，将分词器修改为中文分词器，这里用的是包装过的Paoding分词，这个东西好像已经不更新了，以后看看IKAnalyzer吧。

原来的schema.xml中没有的字段自己添加上。schema.xml默认是UTF-8编码。首先在<fields></fields>里添加要索引的域。

㈤ solr已经与数据库同步，怎样在后台直接搜索

实现方式有2种，但是他们其实是对应的。
1.用lucene实现。
1.建索引， 多建一个索引字段，即拼音和拼音首字母这2个字段。合并的一个字段。
（拼音和拼音首字母，可以通过pinyin4j.jar。将想要进行拼音搜索的字段进行拼音转换。）
2.对输入的参数判断是否是拼音，（可以通过将传人的值转换为 utf-8 形式，如果转换后的字符串长度大于原来的字符串的长度，那么就不是拼音。否则就进行拼音查询）
3.对拼音索引那个字段进行查询，和中文查询一样。参考中文查询。
2.solr实现。

㈥ solr的数据怎么来的

solr是一个全文检索数据库
对外提供了数据读取和写入的接口
数据当然主要是从接口来 主要是http通信，
你要按solr文档数据提交格式来写入数据
细节要查文档了

㈦ 有solr为什么还要使用数据库

solr不安全,没事务 ,没有表关系

㈧ 有数据库为什么要solr

严格来说，lucene负责数据存储，而solr只是一个引擎提供搜索和插入而已，跟数据库的解释器一样，有什么好处呢，比如一个数据库有一个字段存了1000个字，你想从这些字里面搜一个词的时候，普通的数据库只会让你使用like去查询，他会遍历每个字去模糊匹配，效率很低，而且有些是无法查询的，当然除了像一些特殊的数据库带有分词，比如postgresql，那lucene做的事情就是分词，然后去匹配分词的词中是否有你想搜的词就好了，当然了，为了提高这种检索效率和内存节省底层做了很复杂的事情，可以这么简单的认为，全文搜索这件事情上数据库是无法满足的

㈨ solr 怎么让从mysql导入的数据是json数组

1. 编写配置文件

1）编写 data-config-comment.xml，此文件用于描述如何查询MySQL数据，如何将数据变换导入索引。

假设有一个数据库叫mooc，其中有个表叫comment，代表学生的评论

其中：

entity对应MySQL数据库表中的一行

query对应全库导入的SQL查询

queryImportQuery 对应增量导入的SQL查询

deltaQuery对应增量导入获取最新修改的行ID，这些ID用于 queryImportQuery，SQL的含义中

DATE(updatetime) >= '${dih.last_index_time}' OR DATE(writetime) >= '${dih.last_index_time}
表示comment的更新时间updatetime，或者comment的写入时间writetime比上一次的导入时间$(dih.last_index_time)还大。

<dataConfig>
<dataSource type="JdbcDataSource"
driver="com.mysql.jdbc.Driver"
url="jdbc:mysql://localhost/mooc"
user="root"
password="root"/>
<document>
<entity name="comment"
query="SELECT id, DATE_FORMAT(writetime, '%Y-%m-%dT%TZ') as 'writetime', title from comment"
deltaImportQuery="SELECT id, DATE_FORMAT(writetime, '%Y-%m-%dT%TZ') as 'writetime', title from comment where id='${dih.delta.id}'"
deltaQuery="SELECT id FROM comment WHERE DATE(updatetime) >= '${dih.last_index_time}' OR DATE(writetime) >= '${dih.last_index_time}'">
<field column="id" name="id"/>
<field column="writetime" name="writetime"/>
<field column="title" name="title"/>
</entity>
</document>
</dataConfig>
2）假设要创建一个名为mooc的solr核，在其conf目录中的schema.xml文件中编写fields，加入id，writetime，title，其中text_cn，需要使用我上一则博客写的中文分词插件。

<field name="id" type="string" indexed="true" stored="true" required="true" multiValued="false" />
<field name="writetime" type="tdate" indexed="true" stored="true"/>
<field name="title" type="text_cn" indexed="true" stored="true"/>
3) 配置Solr的 solrconfig.xml

在 D:\libs\solr-4.10.2\example\solr\mooc\conf 目录中，创建data-config-comment.xml

在solrconfig.xml中创建数据导入handler用来导入comment表，如下编写，其中的data-config-comment.xml即是第1步写的

<requestHandler name="/dataimportcomment" class="org.apache.solr.handler.dataimport.DataImportHandler">
<lst name="defaults">
<str name="config">data-config-comment.xml</str>
</lst>
</requestHandler>
2.配置使用到的JAVA库文件

创建D:\libs\solr-4.10.2\example\solr\mooc\lib，拷贝solr-dataimporthandler-4.10.2和mysql-connector-java-5.1.26-bin到此，这两个库用于导入和查询数据库

3.启动Solr

进入solr的example目录

java -jar start.jar
3.导入为索引数据

在浏览器运行如下命令做全库导入，表示将数据，导入到Solr核mooc中

http://localhost:8983/solr/mooc/dataimportcomment?command=full-import&commit=y
如果带clean=false参数，则表示不删除原数据

增量导入

http://localhost:8983/solr/mooc/dataimportcomment?command=delta-import
4.删除索引文件

编写一个XML文件，内容为

<delete><query>*:*</query></delete>
执行命令

㈩ 如何保证solr跟数据库的数据一致性

可以通过定时任务实现solr与数据库数据的的一致性、比如每天夜里某个时间点、对数据进行更新同步。更新分两种、一种叫增量，是在之前的数据的基础上，将变动的数据进行更新；另一种叫全量更新、是直接删除原来的数据、全部导入新的数据。。。我就知道这些