2

我们在 IBM Watson for Worksheet 中将 Solr Schema 定义为问题集合。很少有模式元素是多值字段。我们能够使用检索和排名服务加载文档和索引文档，但是在生成训练数据集时，我们会遇到数据类型转换错误。

架构

    <field name="id" type="string" indexed="true" stored="true" required="true" multiValued="false"/>
    <field name="worksheet_number" type="watson_text_en" indexed="true" stored="true" />
    <field name='question_number' type='int' indexed='true' stored='true' multiValued='true' />
    <field name='question_type' type='watson_text_en' indexed='true' stored='true' multiValued='true' />
    <field name='answer' type='watson_text_en' indexed='true' stored='true' multiValued='true' />
    <field name='text' type='watson_text_en' indexed='true' stored='true' multiValued='true' />

使用 train.py 的训练命令会抛出异常 curl -u "**********":"************" " https://gateway.watsonplatform。 net/retrieve-and-rank/api/v1/rankers/3b140ax15-rank-3108

不幸的是，异常并没有提供有关它抛出异常的字段的任何信息。

Java.lang.ClassCastException: java.util.ArrayList cannot be cast to java.lang.Float
  at com.ibm.watson.hector.plugins.ss.FCFeatureGeneratorComponent.toCSV(FCFeatureGeneratorComponent.java:677)
  at com.ibm.watson.hector.plugins.ss.FCFeatureGeneratorComponent.process(FCFeatureGeneratorComponent.java:364)
  at org.apache.solr.handler.component.SearchHandler.handleRequestBody(SearchHandler.java:272)
  at org.apache.solr.handler.RequestHandlerBase.handleRequest(RequestHandlerBase.java:155)
  at org.apache.solr.core.SolrCore.execute(SolrCore.java:2082)
  at org.apache.solr.servlet.HttpSolrCall.execute(HttpSolrCall.java:651)
  at org.apache.solr.servlet.HttpSolrCall.call(HttpSolrCall.java:458)
  at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:229)
  at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:184)
  at org.eclipse.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1652)
  at org.eclipse.jetty.servlet.ServletHandler.doHandle(ServletHandler.java:585)
  at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:143)
  at org.eclipse.jetty.security.SecurityHandler.handle(SecurityHandler.java:577)
  at org.eclipse.jetty.server.session.SessionHandler.doHandle(SessionHandler.java:223)
  at org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1127)
  at org.eclipse.jetty.servlet.ServletHandler.doScope(ServletHandler.java:515)
  at org.eclipse.jetty.server.session.SessionHandler.doScope(SessionHandler.java:185)
  at org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1061)
  at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:141)
  at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:215)
  at org.eclipse.jetty.server.handler.HandlerCollection.handle(HandlerCollection.java:110)
  at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:97)
  at org.eclipse.jetty.server.Server.handle(Server.java:499)
  at org.eclipse.jetty.server.HttpChannel.handle(HttpChannel.java:310)
  at org.eclipse.jetty.server.HttpConnection.onFillable(HttpConnection.java:257)
  at org.eclipse.jetty.io.AbstractConnection$2.run(AbstractConnection.java:540)
  at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:635)
  at org.eclipse.jetty.util.thread.QueuedThreadPool$3.run(QueuedThreadPool.java:555)
  at java.lang.Thread.run(Thread.java:745)\n","code":500}}

Schema 中定义的 MultiValue 字段似乎存在问题，并为其生成训练数据集。多值字段允许我们存储多个问题、给定工作表编号的文本以及任何数据类型。例如，问题编号的整数，在 question_number 字段中具有值 [1,2,3,4,5]。

生成训练数据集时，Watson API 抛出异常，数据类型转换错误“java.util.ArrayList cannot be cast to java.lang.Float”。

4

1 回答 1

1

此问题可能是由于您的数据中有一个名为“score”的多值字段引起的。它可以是 schema.xml 中明确定义的字段或某些文档中的有效动态字段。你能检查一下是否是这种情况吗？如果是这样，则需要将其更改为不同的名称（例如“my_score”），因为这会与 Solr 硬编码以返回分数的名称冲突。

于 2016-06-17T15:29:29.777 回答