2016-10-17 2 views
1

mysqlデータベースをsolr(4.0)でインデックスできません。私はいつも得るIndexing failed. Rolled back all changes.私はすでに前の答えを見直して、私はそれが何の問題かを理解することはできません。私はDocker(乗客フュージョンとubuntu 14.04)コンテナで実行しています。何か案は?私はすでにこれを理解しようと数日間過ごしました。データベースをsolrでインデックスできません。私はいつも `Indexing failed。すべての変更をロールバックしました。

ドッカーCOMPOSE

version: '2' 

services: 
    search: 
    env_file: .env 
    build: . 
    ports: 
     - "8080:8080" 
    volumes: 
     - ~/.m2:/root/.m2 
     # - ~/.solr:/data/solr/ 
     - ./docker:/home/app/docker 
    db: 
    env_file: .env 
    image: mysql:5.6 
    ports: 
     - "3307:3306" 

SOLR_HOME

ls -l /data/solr/collection1/conf/ 
-rw-r--r-- 1 tomcat7 tomcat7 7601 Oct 17 15:35 data-config.xml 
-rw-r--r-- 1 tomcat7 tomcat7  0 Oct 17 15:35 dataimport.properties 
-rw-r--r-- 1 tomcat7 tomcat7 561 Oct 17 15:35 log4j.properties 
-rw-r--r-- 1 tomcat7 tomcat7 707 Oct 17 15:35 log4j.xml 
-rw-r--r-- 1 tomcat7 tomcat7 12302 Oct 17 15:35 schema.xml 
-rw-r--r-- 1 tomcat7 tomcat7 479 Oct 17 15:35 solrconfig-qf.xml 
-rw-r--r-- 1 tomcat7 tomcat7 41383 Oct 17 15:35 solrconfig.xml 
-rw-r--r-- 1 tomcat7 tomcat7 148 Oct 17 15:35 solrcore.properties 
-rw-r--r-- 1 tomcat7 tomcat7 138 Oct 17 15:35 solrcore.properties.template 

Solrの管理

Solr Admin

データ-config.xmlのhttps://gist.github.com/anonymous/ce99aa9277f0295a2a52768fb7866e6a

<dataConfig> 
    <dataSource name="db" type="JdbcDataSource" driver="com.mysql.jdbc.Driver" 
    url="jdbc:mysql://localhost:3306/datacite" user="root" 
    password="" readonly="true" 
    batchSize="-1" /> 
    <!-- for batchSize=-1 see DIH FAQ --> 
    <dataSource name="field" type="FieldReaderDataSource" /> 
    <document> 
    <!-- SOLR-2104 --> 
    <!-- using delta import as proposed in http://wiki.apache.org/solr/DataImportHandlerDeltaQueryViaFullImport --> 

SORLコアプロパティ

mds.db.url=jdbc:mysql://localhost:3306/datacite?useUnicode=true&characterEncoding=UTF8 
mds.db.user=datacite 
mds.db.password= 
mds.testprefix=10.5072 

Solrconfig.xml

<!-- AutoCommit 

    Perform a hard commit automatically under certain conditions. 
    Instead of enabling autoCommit, consider using "commitWithin" 
    when adding documents. 

    http://wiki.apache.org/solr/UpdateXmlMessages 

    maxDocs - Maximum number of documents to add since the last 
       commit before automatically triggering a new commit. 

    maxTime - Maximum amount of time in ms that is allowed to pass 
       since a document was added before automaticly 
       triggering a new commit. 
    openSearcher - if false, the commit causes recent index changes 
    to be flushed to stable storage, but does not cause a new 
    searcher to be opened to make those changes visible. 
    --> 
<autoCommit> 
    <maxTime>15000</maxTime> 
    <openSearcher>false</openSearcher> 
</autoCommit> 

<!-- softAutoCommit is like autoCommit except it causes a 
    'soft' commit which only ensures that changes are visible 
    but does not ensure that data is synced to disk. This is 
    faster and more near-realtime friendly than a hard commit. 
    --> 
<!-- 
    <autoSoftCommit> 
    <maxTime>1000</maxTime> 
    </autoSoftCommit> 
    --> 

<!-- Update Related Event Listeners 

    Various IndexWriter related events can trigger Listeners to 
    take actions. 

    postCommit - fired after every commit or optimize command 
    postOptimize - fired after every optimize command 
    --> 
<!-- The RunExecutableListener executes an external command from a 
    hook such as postCommit or postOptimize. 

    exe - the name of the executable to run 
    dir - dir to use as the current working directory. (default=".") 
    wait - the calling thread waits until the executable returns. 
      (default="true") 
    args - the arguments to pass to the program. (default is none) 
    env - environment variables to set. (default is none) 
    --> 
<!-- This example shows how RunExecutableListener could be used 
    with the script based replication... 
    http://wiki.apache.org/solr/CollectionDistribution 
    --> 
<!-- 
    <listener event="postCommit" class="solr.RunExecutableListener"> 
    <str name="exe">solr/bin/snapshooter</str> 
    <str name="dir">.</str> 
    <bool name="wait">true</bool> 
    <arr name="args"> <str>arg1</str> <str>arg2</str> </arr> 
    <arr name="env"> <str>MYVAR=val1</str> </arr> 
    </listener> 
    --> 

<!-- Enables a transaction log, currently used for real-time get. 
    "dir" - the target directory for transaction logs, defaults to the 
     solr data directory. --> 
<updateLog> 
    <str name="dir">/data/solr/collection1/data</str> 
</updateLog> 

<dataDir>/data/solr/collection1/data</dataDir> 


    <lib dir="../../../contrib/dataimporthandler/lib/" regex=".*\.jar" /> 

    <lib dir="../../../dist/" regex="solr-dataimporthandler-\d.*\.jar" /> 

    <lib dir="../../../lib/" regex="mysql-connector-java-5.0.8-bin.jar" /> 

    <requestHandler name="/admin/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler"> 
    <lst name="defaults"> 
     <str name="config">data-config.xml</str> 
    </lst> 
    <lst name="invariants"> 
     <str name="db.url">jdbc:mysql://localhost:3306/datacite?useUnicode=true&amp;amp;characterEncoding=UTF8</str> 
     <str name="db.user">root</str> 
     <str name="db.password"></str> 
     <str name="testprefix">10.5072</str> 
    </lst> 
    </requestHandler> 
+1

さらに詳しい情報がありますか? 1.ログ(エラーメッセージだけでなく、エラースタックトレース全体)。 2. SQLクエリ3.データをインポートするためにどのような手順を実行していますか? 4.それはすぐに失敗するか? 5.インポートする予定のレコード数。 'autoSoftCommit'を一括挿入(現在は毎秒softCommitを実行中)から無効にしてください。 – jay

+0

あなたの物理メモリ、あなたの2番目のスクリーンショット、Solr Admin UIを見てください。ディスクがほぼ満杯です。 – cheffe

+0

@jay(1)実際に私はエラーの詳細を見つけることができませんでした。 Tomcatログ(catalina。)は間違ったものを表示せず、solr管理インターフェースのログは常に回転するホイールだけが空に見えます。私が言いましたメッセージは私が持っている唯一のフィードバックです。私が調べることができる場所はありますか? (3)申し訳ありませんが、私はこの質問であなたが何を意味するのか分かりません。 (4)ソル「フルインポート」を実行するたびに失敗します。それは何も索引をつけません、索引は空です。 (5)1000s mysqlデータベースのサイズは500Mbです。ありがとう – kriztean

答えて

0

問題は、私はMySQLデータベースに接続していなかったということです。 mysqlデータベースホストが間違っていた。 @MatsLindhに感謝します。 ドッキングウィンドウで

はあなたのservicesの名前は彼らのホストの名前ですを構成します。したがって、私の場合、mysqlデータベースホストの名前はdbです(上記のdockerの質問を参照してください)。私のエラーは、$ DB_HOST = localhostという環境変数にmysqlデータベースホストの名前があることです。

私はsolrコンテナからmysqlコンテナに接続しようとしました。

mysql --host=localhost --user=root --password= datacite 

が働いていなかったので、私は

mysql --host=db --user=root --password= datacite 

をしなければなりませんでした。

それだけです。 docker composeでこれを行うときに、データベースホストの名前を確認してください。

関連する問題