не нравится ни линтеру, ни мне:
@retry(_retry_policy)
async def fetch_google_page(
*,
headers: dict[str, str],
cookies: dict[str, str],
url: str,
proxy_connect: str | None = None,
) -> str:
logger.debug("fetching google page", detail=dict(url=url, proxy=proxy_connect))
connector = ProxyConnector.from_url(f"socks5://{proxy_connect}") if proxy_connect is not None else None
timeout = ClientTimeout(total=HTTP_TIMEOUT)
try:
return await __fetch_google_page(
headers=headers,
cookies=cookies,
url=url,
connector=connector,
timeout=timeout,
)
except GoogleServiceDeniedError:
logger.warning("too many requests to Google", detail=dict(url=url, proxy=proxy_connect))
raise
except ConnectionResetError as e:
logger.warning("connection reset error", detail=dict(url=url, proxy=proxy_connect))
raise GoogleServiceDeniedError from e
except ClientResponseError as e:
logger.warning("client response error", detail=dict(url=url, proxy=proxy_connect, status=e.status, error=e))
raise GoogleServiceDeniedError from e
except TimeoutError as e:
logger.warning("timeout error", detail=dict(url=url, proxy=proxy_connect, error=e))
raise GoogleServiceDeniedError from e
except ServerDisconnectedError as e:
logger.warning("server disconnected error", detail=dict(url=url, proxy=proxy_connect, error=e))
raise GoogleServiceDeniedError from e
except ClientPayloadError as e:
logger.error("client payload error", detail=dict(url=url, proxy=proxy_connect, error=e))
raise GoogleServiceDeniedError from e
except ProxyError as e:
logger.error("proxy error", detail=dict(url=url, proxy=proxy_connect, error=e))
raise GoogleSerpProxyError from e
except ProxyConnectionError as e:
logger.error("proxy connection error", detail=dict(url=url, proxy=proxy_connect, error=e))
raise GoogleSerpProxyError from e
finally:
await asyncio.sleep(HTTP_QUERY_INTERVAL)
Можешь сделать список, где маппятся исключения в дальнейшее действие
except (TimeoutError, ConnectionResetError, ...)...
Но тут нюанс в том, что мне нужны разные log msg
Которые совпадают с типом ошибки, или ты для нас отредактировал?
нуу они у тебя почти везде название исключения дублируют
Там код почти такой же. Есть приходящая ошибка, в зависимости от неё я делаю log msg и выкидываю новую ошибку
well... Yes. Впринципе логично
Окей. Так и сделаю. Всем спасибо
Обсуждают сегодня