0

我正在尝试将数据从 Mongodb 导入到 Solr6.0。完全导入正确执行，但增量导入不起作用。当我执行增量导入时，我得到以下结果。

请求：0，获取：0，跳过：0，处理：0

我的数据配置文件查询如下

query=""

deltaQuery="db.getCollection('customer').find({'jDate':{$gt:'${dih.last_index_time}'}},{'_id' :1});"
deltaImportQuery="db.getCollection('customer').find({'_id':'${dataimporter.delta.id}'})"

整个 data-config.xml

<?xml version="1.0"?>
<dataConfig>
<dataSource name="MyMongo" type="MongoDataSource" database="test_db" />
<document name="import">
 <!-- if query="" then it imports everything -->
     <entity  processor="MongoEntityProcessor"
             query=""
             deltaQuery="db.getCollection('customer').find({'jDate':{$gt: '${dih.last_index_time}'}},{'_id' :1});"
             deltaImportQuery="db.getCollection('customer').find({'_id':'${dataimporter.delta.id}'})"
             collection="customer"   
             datasource="MyMongo"
             transformer="MongoMapperTransformer" name="sample_entity">

               <!--  If mongoField name and the field declared in schema.xml are same than no need to declare below.
                     If not same than you have to refer the mongoField to field in schema.xml
                    ( Ex: mongoField="EmpNumber" to name="EmployeeNumber"). -->                                              

           <field column="_id"  name="id"/>  
           <field column="CustID" name="CustID" mongoField="CustID"/>       

           <field column="CustName" name="CustName" mongoField="CustName"/>       
            <field column="jDate" name="jDate" mongoField="jDate"/>
            <field column="dob" name="dob" mongoField="dob"/>          
       </entity>
 </document>
</dataConfig>

我尝试使用硬编码值，但它仍然无法像下面那样工作

     query=""
     deltaQuery="db.getCollection('customer').find({'jDate':{$gt: new Date(1480581295000)}},{'_id' :1});"

deltaImportQuery="db.getCollection('customer').find({'_id':ObjectId('34234234dfsd34534524234ee')})"

然后我尝试做下面的事情，但仍然没有成功

query=""
         deltaQuery="{'jDate':{$gt: new Date(1480581295000)}}"
        deltaImportQuery="{'_id':ObjectId(34234234dfsd34534524234ee)}"

任何人，如果可以的话，请。

4

2 回答 2

0

你能试一下吗

deltaQuery as db.getCollection('customer').find({'jDate':{$gt:**ISODate(**'${dih.last_index_time}'**)**}},{'_id' :1});
于 2019-02-11T15:05:31.090 回答
0

你能把 {'_id':'${dataimporter.delta.id}'} 换成 {'_id':'${dataimporter.delta. _id }'} 在 deltaImportQuery 中。

deltaImportQuery ：（仅在 delta-import 中使用）。有一个命名空间 ${dih.delta. column-name } 可以在这个查询中使用。例如：select * from tbl where id=${dih.delta.id} Solr1.4

如上所述，我们只能在 delta 命名空间中使用列名。

在从 mysql 进行增量导入期间也面临同样的问题 Solr 增量导入查询异常

参考：
https ://wiki.apache.org/solr/DataImportHandler https://wiki.apache.org/solr/DataImportHandler#Configuration_in_data-config.xml

于 2017-12-26T12:29:14.777 回答