grequests

0熱

1答えて

私は約50件のウィキペディアのページを検索しようとしています。私はリクエストパッケージを使ってGET要求を行ってきましたが、パフォーマンスがはるかに高いと聞いてgrequestsの実装に取り組んできました。性能の向上は、私にとっては非常に非常に小さいです。私は何か間違っているのですか？ import requests import grequests from urllib.parse

0熱

1答えて

複数のJSONペイロードを含むGrequest

JSONペイロードで複数のPOSTリクエストを同時に送信し、JSON結果を取得しようとしています。私はSOの他のいくつかの記事を読んだが、何もそのトリックをやっていない。 def transcribe(vid_segs): payloads = [] for vid in vid_segs: vid = base64.b64encode(open(vid).read

1熱

1答えて

Pythonで一度に複数のバッチを同時に実行できますか？

Reddit APIを使用していくつかのサブディレクトリをupvoteしています。私は、prawライブラリを使ってreddit apiと対話するために、複数のサブディレクトリを同時にupvoteしたいと思います。は、私は/ R/bookclubの27「ホット」と「上昇」の記事をupvoteしたい： subreddit = reddit.subreddit("bookclub") for su

1熱

1答えて

GRequestsを使用して非同期要求が機能しない

私はプログラムを作成中です。ファイルからURLを読み込み、要求を出します。しかし、ハンドラは呼び出されません。ここでは私のコードです：それは動作しない理由を import grequests def main(): async_list =[] for site in extractsites(): action_item = grequests.get(

1熱

1答えて

Pythonを使用して1秒当たり1k POST HTTPリクエストをデータと共に送信するには？

私は自分のAPIのストレステストをする必要があります。また、私は私の要求にいくつかのデータを入れて、代わりにヘッドのPOSTを送信するためにthat exampleを修正： count = int(sys.argv[1]) url = "http://api.example.com/" test_id = datetime.now().strftime("%H%M%S%f") data =

0熱

1答えて

例外ハンドラを使用した後でも「なし」タイプを返すgrequest

私は非同期要求を行うためにgrequestsモジュールを使用しています。次のコードは、TIMEOUT値に基づいて異常を示しているテスト中： >>> grequests.map((grequests.get('http://httpbin.org/delay/1',timeout=0.6),),exception_handler=exception_handler) failed: http://

6熱

1答えて

同じセッション内のすべてのプール接続で最大再試行回数を設定できますか？

現在、私は私のgrequestラッパーに接続の再試行の最大数を設定するために次のようにします。私は、引数の1つとしてセッションself._sでgrequestオブジェクトの束を作成 self._s = Session() retries = Retry(total=5, status_forcelist=[500, 502, 503, 504]) self._s.mount('http://,

3熱

1答えて

Beautifulsoup parse thousand pages

私は数千のURLを持つリストを解析するスクリプトを持っています。しかし、私の問題は、そのリストでやるには年月がかかるということです。 URLリクエストは、ページがロードされる前に約4秒かかり、解析できます。本当に大量のURLを高速で解析する方法はありますか？ from bs4 import BeautifulSoup import requests #read url-list

0熱

1答えて

grequests.post（）が返されません。

>>> payload = {'a': 'b'} >>> url = 'http://someurl/' >>> req_ = [grequests.post(url, session=requests.session, data=payload)] >>> r = grequests.map(req_) >>> r [None] 私は何か間違っていますか？

0熱

1答えて

単一のURLに複数のページから複数のAPI呼び出しを行う方法

だから、タイトルは私が推測する少し混乱..です私はそれがいくつかのランダムなデータが表示されます書き込み、他の非されてきたスクリプトを持っています私のシェルを開くときに不可欠です。複数のURLを使用しているため、grequestを使用してAPI呼び出しを行っています。私の天気データについては、WeatherUndergroundのAPIを使用しています。アクティブアラートを提供するからです。ア