solr导入oracle数据并创建索引

来源:互联网 发布:和田玉 知乎 编辑:程序博客网 时间:2024/06/05 12:47

solr下载安装

下载

点此下载 solr-5.5.3

安装

  • 安装jdk1.8及以上,配置好环境变量(略)
  • 解压solr,以使用命令行脚本启动服务器。让我们去solr的bin目录,从命令提示符输入出以下命令

    solr start

  • 启动后访问 http://localhost:8983/solr/,进入solr控制台

solr常用命令选项

  • -c -要创建的核心或集合的名称(必需)。
  • -d -配置目录,在SolrCloud模式非常有用。
  • -n -配置名称。这将默认为核心或集合的名称。
  • -p -本地Solr的实例的端口发送create命令; 默认脚本试图通过寻找运行Solr的实例来检测端口。
  • -s -Number of shards to split a collection into, default is 1.
  • -rf -集合中的每个文件的份数。默认值是1。
    solr create -c jcg -d basic_configs
    进入solr控制台页面,可以看到JCG核心被填充在核心选择器上。还可以看到核心的统计信息。

solr配置

  • 默认dataImport功能在Solr5中是禁用的,需要在solrconfig.xml中添加如下配置开启数据导入功能:
<requestHandler name="/dataimport" class="solr.DataImportHandler">        <lst name="defaults">              <str name="config">data-config.xml</str>        </lst>  </requestHandler>  

这里的data-config.xml是个相对路径,是相对于你当前core下的conf目录即C:\solr_home\core1\conf

  • 从\example\example-DIH\solr\solr\conf路径下复制一份 data.config.xml配置文件到solrconfig.xml配置文件的同级目录C:\solr_home\core1\conf下

  • 然后我们需要使用文本编辑软件打开data-config.xml配置文件稍作修改,如图:
<dataConfig>    <dataSource password="scott" user="scott" url="jdbc:oracle:thin:@192.168.0.41:1521:yqfx" driver="oracle.jdbc.driver.OracleDriver"/>        <document name="Info" pk="id">        <entity name="zpxx" transformer="ClobTransformer" pk="id"        query="SELECT * FROM siteinfo"         deltaImportQuery="SELECT id,url FROM siteinfo where id ='${dih.delta.id}'"         deltaQuery="select id from siteinfo where createTime > '${dataimporter.last_index_time}'">            <field name="id" column="id"/>             <field name="url" column="url"/>            <filed name="createTime" coiumn="createTime"/>        </entity>    </document></dataConfig>
  • query是获取全部数据的SQL(solr从sql中获取那些数据),多列
  • deltaImportQuery是获取增量数据时使用的SQL(数据库新增数据追加到solr的数据),多列
  • deltaQuery是获取pk的SQL(数据库新增数据是,追加到solr的数据时的条件,根据id ,条件是最后一次获取的时间,${dataimporter.last_index_time,最后获取的时间}),一列
  • 修改schema.xml文件申明field,field的名字应该和sql的查询结果集列名一致;
<--zx配置SSH库的field --><field name="id"   type="int "   indexed="true"  stored="true"  multiValued="false" required="true"/>  <field name="name"   type="string"   indexed="true"  stored="true"  multiValued="false" />   <field name="url"  type="string"     indexed="true"  stored="true"  multiValued="false" />

oracle驱动

  • 从E:\app\Administrator\product\11.2.0\client_1\jdbc\lib中复制ojdbc6.jar至solr-5.5.3\server\solr-webapp\webapp\WEB-INF\lib下

数据导入并创建索引

  • 进入solr管理界面,command选择full-import全部导入;entity需要导入的实体,也就是配置的哪个sql,点击execute执 行导入

js调用solr服务

$.ajax({    type: 'GET',    url: solrServer,    data: {        wt: 'json',        q: 'name:*'+ key +'*',        indent: true,        "json.wrf" : 'solrCallback',// -- 1 --        'start': '0',        'rows': '10'    },    dataType: 'jsonp',    jsonpCallback : 'solrCallback',// -- 2 --    success:function(data){// -- 3 ---        var responseHeader = data.responseHeader;        var response = data.response;        var highlighting = data.highlighting;        var docs = response.docs;                   },    error : function(e) {        console.log('poi查询失败!');    }});
  • 使用jquery的getJSON方法时,需要提供jsonCallback参数,虽然这个参数没有用,因为solr应用并不处理这个参数。但还是需要,否则载入方式,就不是jsonp了。同时还需要提供给solr’json.wrf’参数,例如’json.wrf’:’init’,init才是solr会使用的回调函数。详细参考solr文档。
  • 1,2,3步即可获得结果

参考

  • solr5.3.0导入 oracle 数据
  • Solr5之从MySQL数据库导入数据并索引
  • Solr5.5使用schema.xml
  • solr6.0创建core时没有自动生成schema.xml,是否6.0不需要schema.xml啦?
  • 跨域请求获取Solr json检索结果并高亮显示
  • solr+ajax智能拼音详解—solr跨域请求
0 0
原创粉丝点击