1

私のアプリがgaeにデプロイされているときにgcsにアクセスできますが、開発中にローカルマシンからgcsにアクセスしたいと思います。これをどうやってやりますか?ローカルのPythonアプリケーションからGoogleクラウドストレージにアクセスするにはどうすればよいですか?

Traceback (most recent call last): 
    File "/Users/alvinsolidum/Downloads/google_appengine/google/appengine/runtime/wsgi.py", line 267, in Handle 
    result = handler(dict(self._environ), self._StartResponse) 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 1519, in __call__ 
    response = self._internal_error(e) 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 1511, in __call__ 
    rv = self.handle_exception(request, response, e) 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 1505, in __call__ 
    rv = self.router.dispatch(request, response) 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 1253, in default_dispatcher 
    return route.handler_adapter(request, response) 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 1077, in __call__ 
    return handler.dispatch() 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 547, in dispatch 
    return self.handle_exception(e, self.app.debug) 
    File "/Users/alvinsolidum/Downloads/google_appengine/lib/webapp2-2.3/webapp2.py", line 545, in dispatch 
    return method(*args, **kwargs) 
    File "/Users/alvinsolidum/Documents/fallsafety-dataflow/preprocess/main.py", line 74, in get 
    self.to_csv() 
    File "/Users/alvinsolidum/Documents/fallsafety-dataflow/preprocess/main.py", line 41, in to_csv 
    compressed_flo = gcs.open(read_filepath, 'r') 
    File "/Users/alvinsolidum/Documents/fallsafety-dataflow/preprocess/lib/cloudstorage/cloudstorage_api.py", line 103, in open 
    offset=offset) 
    File "/Users/alvinsolidum/Documents/fallsafety-dataflow/preprocess/lib/cloudstorage/storage_api.py", line 249, in __init__ 
    errors.check_status(status, [200], path, resp_headers=headers, body=content) 
    File "/Users/alvinsolidum/Documents/fallsafety-dataflow/preprocess/lib/cloudstorage/errors.py", line 132, in check_status 
    raise NotFoundError(msg) 
NotFoundError: Expect status [200] from Google Storage. But got status 404. 
Path: '/fallsafety-test-general/apple-watch/continuous/active/54d0044919e92b0c00c29555-29391CEA593C4D798A1EA08BD23DA47E-0002-continuous.csv.gz'. 
Request headers: None. 
Response headers: {'date': 'Mon, 29 Aug 2016 23:15:49 GMT', 'server': 'Development/2.0', 'connection': 'close'}. 
Body: ''. 
Extra info: None. 

答えて

2

ああ、あなたがPython用のappengine-GCS-クライアントを使用しているように見える、私はGCS上のファイルを開こうとするとここで

は私が得るトレースバックです。ローカル開発サーバー上で実行する場合、クライアントはデフォルトでGCSのローカルの偽のバージョンを使用します(「Server:Development/2.0」というレスポンスヘッダーを参照)。私はあなたがローカルの偽物にアップロードしていない本当のGCSオブジェクトを探していると思います。

サーバーの初期化の一部として問題のオブジェクトをアップロードしたり、別のライブラリ(gcloud-pythonが本当にいいです)を使用したり、ローカルフェイクを無効にしたりすることができます。これは、SERVER_SOFTWARE環境変数:

# Logic for whether to use local fake is here: https://github.com/GoogleCloudPlatform/appengine-gcs-client/blob/f9dbbd43ec431f739aa33a44cf24d32a19579f33/python/src/cloudstorage/common.py#L387 
os.environ['SERVER_SOFTWARE'] = 'Development (remote_api)/1.0' 
関連する問題