Python 요청에서 'URL의 최대 재시도 초과' 오류를 해결하는 방법은 무엇입니까?

"요청의 URL로 최대 재시도 초과" 오류 해결

iTunes App Store에서 특히 대규모 배치의 데이터를 스크랩하려고 할 때 , 'URL의 최대 재시도 횟수가 초과되었습니다.'라는 오류가 발생할 수 있습니다. 이 문제는 요청 라이브러리의 기본 동작이 연결 오류 발생 후 재시도 횟수를 제한하기 때문에 발생합니다.

이 문제를 해결하려면 요청 기능을 사용하여 사용자 정의 재시도 동작을 구현할 수 있습니다.

import requests
from requests.adapters import HTTPAdapter
from urllib3.util.retry import Retry

# Configure retry settings
retry = Retry(connect=3, backoff_factor=0.5)

# Create a session and mount the adapter
session = requests.Session()
adapter = HTTPAdapter(max_retries=retry)
session.mount('http://', adapter)
session.mount('https://', adapter)

# Perform GET request with retry
session.get(url)

이 구성은 연결 오류가 발생할 경우 요청을 3번 재시도하도록 지정합니다. 또한 'backoff_factor'는 요청 할당량 초과를 방지하기 위해 시도 사이에 지연을 도입합니다.

urllib3.util.retry.Retry의 기능을 활용하면 시도 횟수, 시간 초과 및 백오프 전략.

위 내용은 Python 요청에서 'URL의 최대 재시도 초과' 오류를 해결하는 방법은 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!