2017-02-07 5 views
0

Flumeを使用してテキスト文書を索引付けしていますが、エラーまたは警告メッセージは表示されませんが、データはSolrおよびFlumeトレースに、ALLFlume solrSink、エラーなし、データをSolrに取り込みません

Flume version : 1.5.2.2.3 
Solr Version : 5.5 

**Config files are as below** 

    **Flume Config :** 

agent.sources = SpoolDirSrc 
agent.channels = FileChannel 
agent.sinks = SolrSink 

# Configure Source 
agent.sources.SpoolDirSrc.channels = fileChannel agent.sources.SpoolDirSrc.type = spooldir 

agent.sources.SpoolDirSrc.spoolDir = /ホーム/水路/ source_emails agent.sources.SpoolDirSrc.basenameHeader =真agent.sources.SpoolDirSrc.fileHeader =真 agent.sources.SpoolDirSrc。 deserializer = org.apache.flume.sink.solr.morphline.BlobDeserializer $ Builder agent.channels.FileChannel.type =ファイルagent.channels.FileChannel.capacity = 10000 agent.sinks.SolrSink.type = o .gif。 agent.sinks.SolrSink.channel =のFileChannel agent.sinks.SolrSink.morphlineId = morphline1 agent.sources.SpoolDirSrc.channels =のFileChannel agent.sinks.SolrSink.channel =のFileChannel


Morphlineコンフィグ

solrLocator: { 
collection : gsearch 

zkHost : "codesolr-as-r3p:21810,codesolr-as-r3p:21811,codesolr-as-r3p:21812" 
} 
morphlines : 
[ 
    { 
    id : morphline1 
    importCommands : ["org.kitesdk.**", "org.apache.solr.**"] 
    commands : 
    [ 
     { detectMimeType { includeDefaultMimeTypes : true } } 
     { 
     solrCell { 
      solrLocator : ${solrLocator} 
      captureAttr : true 
      lowernames : true 
      capture : [_attachment_body, _attachment_mimetype, basename, content, content_encoding, content_type, file, meta] 
      parsers : [ { parser : org.apache.tika.parser.txt.TXTParser } ] 
     } 
     } 
     { generateUUID { field : id } } 
     { sanitizeUnknownSolrFields { solrLocator : ${solrLocator} } } 
     { logDebug { format : "output record: {}", args : ["@{}"] } } 
     { loadSolr: { solrLocator : ${solrLocator} } } 
    ] 
    } 
] 

Please help me what could be the issue 
Regards, 
~Sri 

答えて

0

通常、flumeログではエラーの詳細が表示されますが、トレースを貼り付けることはできますか?

があなたのSolrの設定を見つけるdoesntのmorphilinesしてもよいし、あなたのmorphilines.confに

このプロパティを追加することができsolrHomeDir: "/ your_solr_config_files"

私はそれはあなたの助け

願っています
関連する問題