2013-09-16 5 views
15

Я новичок в Solr. Я успешно проиндексировал некоторые данные, но после передачи атрибута даты в соответствующее поле solr я получаю исключение:Solr 'Invalid Date String' Exception

Я передаю строку «15.06.2011 13:51:41», которая является общей датой формат для таких стран, как Германия. Однако после некоторых поисковых запросов я выяснил, что Solr ожидает, что дата будет в формате UTC.

Мой конкретный вопрос: Могу ли я преобразовать свой формат в UTC в какой-то момент в Solr? Это будет случай для DateFormatTransformer, или это ДОЛЖНО передать его в правильном формате изначально?

EDIT: Я не использую DataImportHandler. Я использую DirectUpdateHandler2, передавая данные непосредственно в Solr. Так как это называется «прямое обновление», мои шансы на то, что я ничего не могу изменить?

Для записей, то исключение, которое я получил, было:

ERROR - 2013-09-13 15:52:07.705; org.apache.solr.common.SolrException; org.apache.solr.common.SolrException: Invalid Date String:'15.06.2011 13:51:41' 
    at org.apache.solr.schema.DateField.parseMath(DateField.java:182) 
    at org.apache.solr.schema.TrieField.createField(TrieField.java:616) 
    at org.apache.solr.schema.TrieField.createFields(TrieField.java:655) 
    at org.apache.solr.schema.TrieDateField.createFields(TrieDateField.java:157) 
    at org.apache.solr.update.DocumentBuilder.addField(DocumentBuilder.java:47) 
    at org.apache.solr.update.DocumentBuilder.toDocument(DocumentBuilder.java:118) 
    at org.apache.solr.update.AddUpdateCommand.getLuceneDocument(AddUpdateCommand.java:73) 
    at org.apache.solr.update.DirectUpdateHandler2.addDoc(DirectUpdateHandler2.java:210) 
    at org.apache.solr.update.processor.RunUpdateProcessor.processAdd(RunUpdateProcessorFactory.java:69) 
    at org.apache.solr.update.processor.UpdateRequestProcessor.processAdd(UpdateRequestProcessor.java:51) 
    at org.apache.solr.update.processor.DistributedUpdateProcessor.doLocalAdd(DistributedUpdateProcessor.java:556) 
    at org.apache.solr.update.processor.DistributedUpdateProcessor.versionAdd(DistributedUpdateProcessor.java:692) 
    at org.apache.solr.update.processor.DistributedUpdateProcessor.processAdd(DistributedUpdateProcessor.java:435) 
    at org.apache.solr.update.processor.LogUpdateProcessor.processAdd(LogUpdateProcessorFactory.java:100) 
    at org.apache.solr.handler.extraction.ExtractingDocumentLoader.doAdd(ExtractingDocumentLoader.java:121) 
    at org.apache.solr.handler.extraction.ExtractingDocumentLoader.addDoc(ExtractingDocumentLoader.java:126) 
    at org.apache.solr.handler.extraction.ExtractingDocumentLoader.load(ExtractingDocumentLoader.java:228) 
    at org.apache.solr.handler.ContentStreamHandlerBase.handleRequestBody(ContentStreamHandlerBase.java:74) 
    at org.apache.solr.handler.RequestHandlerBase.handleRequest(RequestHandlerBase.java:135) 
    at org.apache.solr.core.RequestHandlers$LazyRequestHandlerWrapper.handleRequest(RequestHandlers.java:241) 
    at org.apache.solr.core.SolrCore.execute(SolrCore.java:1904) 
    at org.apache.solr.servlet.SolrDispatchFilter.execute(SolrDispatchFilter.java:659) 
    at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:362) 
    at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:158) 
    at org.eclipse.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1419) 
    at org.eclipse.jetty.servlet.ServletHandler.doHandle(ServletHandler.java:455) 
    at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:137) 
    at org.eclipse.jetty.security.SecurityHandler.handle(SecurityHandler.java:557) 
    at org.eclipse.jetty.server.session.SessionHandler.doHandle(SessionHandler.java:231) 
    at org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1075) 
    at org.eclipse.jetty.servlet.ServletHandler.doScope(ServletHandler.java:384) 
    at org.eclipse.jetty.server.session.SessionHandler.doScope(SessionHandler.java:193) 
    at org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1009) 
    at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:135) 
    at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:255) 
    at org.eclipse.jetty.server.handler.HandlerCollection.handle(HandlerCollection.java:154) 
    at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:116) 
    at org.eclipse.jetty.server.Server.handle(Server.java:368) 
    at org.eclipse.jetty.server.AbstractHttpConnection.handleRequest(AbstractHttpConnection.java:489) 
    at org.eclipse.jetty.server.BlockingHttpConnection.handleRequest(BlockingHttpConnection.java:53) 
    at org.eclipse.jetty.server.AbstractHttpConnection.headerComplete(AbstractHttpConnection.java:942) 
    at org.eclipse.jetty.server.AbstractHttpConnection$RequestHandler.headerComplete(AbstractHttpConnection.java:1004) 
    at org.eclipse.jetty.http.HttpParser.parseNext(HttpParser.java:636) 
    at org.eclipse.jetty.http.HttpParser.parseAvailable(HttpParser.java:235) 
    at org.eclipse.jetty.server.BlockingHttpConnection.handle(BlockingHttpConnection.java:72) 
    at org.eclipse.jetty.server.bio.SocketConnector$ConnectorEndPoint.run(SocketConnector.java:264) 
    at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:608) 
    at org.eclipse.jetty.util.thread.QueuedThreadPool$3.run(QueuedThreadPool.java:543) 
    at java.lang.Thread.run(Unknown Source) 

ответ

17

Согласно Solr DateField documentation, требуется такой формат:

поле даты должны иметь форму 1995-12-31T23 : 59: 59Z Конечное «Z» обозначает время UTC и является обязательным. (пояснения по UTC см. Ниже). Допустимые дробные секунды разрешены, если они не заканчиваются в конце 0 (но любая точность за миллисекунды будет проигнорирована). Все остальные части являются обязательными.

Единственный вариант - преобразовать дату перед отправкой в ​​Solr. Если вы используете DataImportHandler, это возможно в этом контексте/процессе.

+0

Спасибо за ваш ответ. В используемой структуре (ManifoldCF) используется DirectUpdateHandler2, а DataImportHandler вообще не используется. Есть ли возможность достичь преобразования даты до вызова DirectUpdateHandler2? Говорить о Солр, конечно. –

+0

Учитывая, что вы используете DirectUpdateHandler2, из того, что я могу определить, в Solr нет никакого способа добавить преобразование данных в этот процесс, не создавая настраиваемую версию DirectUpdateHandler. Я не знаком с ManfioldCF, поэтому я не могу предложить, если там будут какие-то варианты. –

+1

Насколько я могу судить, в ManifoldCF нет предложений относительно этого (так как это специфичный для Connector). Однако я отвечу на ваш ответ, поскольку в моем вопросе я не уточнил достаточно. Еще раз спасибо за ваше обязательство. –