将文档上传到Watson的Retrieve&排名服务

时间:2016-08-30 14:37:10

标签: java servlets ibm-watson retrieve-and-rank

我正在使用Watson的检索&排名服务。

当我使用工具界面时,我上传我的文档,它们显示为列表,我可以点击它们中的任何一个来打开文档中的所有标题(答案单位),如您所见Picture 1Picture 2.

当我尝试通过Java上传文档时,它不会识别文档,它们会被部分上传(答案单位作为文档),每个部分都作为新文档。

我想知道如何将文档作为整个文档上传而不仅仅是部分内容?

这里是Java中上传功能的代码:

    public Answers ConvertToUnits(File doc, String collection) throws ParseException, SolrServerException, IOException{
    DC.setUsernameAndPassword(USERNAME,PASSWORD);
    Answers response = DC.convertDocumentToAnswer(doc).execute();
    SolrInputDocument newdoc = new SolrInputDocument();
    WatsonProcessing wp = new WatsonProcessing();
    Collection<SolrInputDocument> newdocs = new ArrayList<SolrInputDocument>();

    for(int i=0; i<response.getAnswerUnits().size(); i++)
    {
        String titulo = response.getAnswerUnits().get(i).getTitle();
        String id = response.getAnswerUnits().get(i).getId();
        newdoc.addField("title", titulo);
        for(int j=0; j<response.getAnswerUnits().get(i).getContent().size(); j++)
        {
            String texto = response.getAnswerUnits().get(i).getContent().get(j).getText();
            newdoc.addField("body", texto);

        }
        wp.IndexDocument(newdoc,collection);
        newdoc.clear();
    }
    wp.ComitChanges(collection);
    return response;
}


      public void IndexDocument(SolrInputDocument newdoc, String collection) throws SolrServerException, IOException
  {
      UpdateRequest update = new UpdateRequest();
      update.add(newdoc);
      UpdateResponse addResponse = solrClient.add(collection, newdoc);
  }

1 个答案:

答案 0 :(得分:1)

您可以在此行中指定配置选项:

Answers response = DC.convertDocumentToAnswer(doc).execute();

我觉得这样的事情可以解决问题:

String configAsString = "{ \"conversion_target\":\"answer_units\", \"answer_units\": { \"selector_tags\": [] } }";

JsonParser jsonParser = new JsonParser();
JsonObject customConfig = jsonParser.parse(configAsString).getAsJsonObject();    

Answers response = DC.convertDocumentToAnswer(doc, null, customConfig).execute();

我没有尝试过,所以可能没有完全正确的语法,但希望这会让你走上正轨。

基本上,我在这里尝试的是使用配置中的selector_tags选项(请参阅https://www.ibm.com/watson/developercloud/doc/document-conversion/customizing.shtml#htmlau了解相关文档)来指定文档应拆分的标记。通过指定一个没有标签的空列表,它会导致它根本不被拆分 - 并且可以根据需要在单个答案单元中出现。

(请注意,您也可以通过工具界面执行此操作 - 通过在上传文档时取消“将我的文档拆分为个人答案”选项)