web-dev-qa-db-ja.com

Pythonでリクエストの再試行を実装する

POSTパッケージを使用してrequestsリクエストを送信するときに、10秒間隔で5回の再試行回数を実装するにはどうすればよいですか。 GETではなく、postリクエストの例をたくさん見つけました。

これは私が現在取り組んでいるもので、時々503エラーが発生します。不正な応答のHTTPコードを受け取った場合は、再試行を実装するだけです。

for x in final_payload:
    post_response = requests.post(url=endpoint, data=json.dumps(x), headers=headers)

#Email me the error
if str(post_response.status_code) not in ["201","200"]:
        email(str(post_response.status_code))
pythonpython-3.xpython-requests
9
Phil Baines

urllib3.util.retry モジュールをrequestsと組み合わせて使用​​すると、次のようになります。

from urllib3.util.retry import Retry
import requests
from requests.adapters import HTTPAdapter

def retry_session(retries, session=None, backoff_factor=0.3, status_forcelist=(500, 502, 503, 504)):
    session = session or requests.Session()
    retry = Retry(
        total=retries,
        read=retries,
        connect=retries,
        backoff_factor=backoff_factor,
        status_forcelist=status_forcelist,
    )
    adapter = HTTPAdapter(max_retries=retry)
    session.mount('http://', adapter)
    session.mount('https://', adapter)
    return session

使用法：

session = retry_session(retries=5)
session.post(url=endpoint, data=json.dumps(x), headers=headers)

NB：Retry クラスから継承して、再試行動作と再試行間隔をカスタマイズすることもできます。

15
DhiaTN

再試行のデフォルトの動作がPOSTに適用されないことがわかりました。これを行うには、method_whitelistを追加する必要がありました。未満：

'' '

def retry_session(retries=5):
    session = Session()
    retries = Retry(total=retries,
                backoff_factor=0.1,
                status_forcelist=[500, 502, 503, 504],
                method_whitelist=frozenset(['GET', 'POST']))

    session.mount('https://', HTTPAdapter(max_retries=retries))
    session.mount('http://', HTTPAdapter(max_retries=retries))

    return session

'' '

2
Giles Knap