AWS S3 LSは、読み出し動作は、私がこのコマンドでAWS S3バケットからのファイルの膨大なリストを取得しよう

('The read operation timed out',)

私は異なる値でパラメータ--page-sizeを試してみたが、それは助けにはなりませんでした。このエラーを修正するにはどうすればよいですか？

2つの理由が考えられます。1）https://forums.aws.amazon.com/thread.jspa?threadID=161807 - システムレベルの問題（Linuxカーネル）と2）新バージョンcliツールではありません。 – Rinat

ありがとう、Rinat。私のバージョンはUbuntu 16.04で 'aws-cli/1.10.41 Python/2.7.11 + Linux/4.4.0-28-generic botocore/1.4.31'です。 –

同じことがちょうど私に起こった（それが私がここにいる理由です）。私はちょうどもう2回それをもう一度走らなければなりませんでした。私はそれが解決策だとは言いませんが、たぶん一時的な不具合だけかもしれません。 –

-1

分散システムで巨大なデータを読むのは賢明ではありません。これはサーバー上とクライアント側のブロックです。

データの保存方法のパターンがある場合は、それらをパラレルで実行してから、後で単一のファイルに追加してみてください。

例えば、

AWS S3 LS S3：//バケット/年/月--recursive

はそれがお役に立てば幸いです。

2017-10-03 00:38:45 Kannaiyan

答えて