Compare commits

..

No commits in common. "7563f849db4da4de3418c93e0aab58b238467287" and "67d9efbac4da246c91cc1d11dcd3be342ac2ebc3" have entirely different histories.

4 changed files with 24 additions and 0 deletions

View file

@ -46,6 +46,7 @@ import matplotlib
matplotlib.use("Agg") # headless-safe backend — ОБЯЗАТЕЛЬНО до любого рендера: в Docker-образе
# нет GUI toolkit (Tkinter/Qt/GTK), импорт matplotlib без явного backend может тянуть их/падать.
import matplotlib.font_manager as _font_manager
import segno
from matplotlib.figure import Figure # object API, НЕ pyplot — см. _price_range_chart_svg
from matplotlib.patches import Rectangle
@ -440,6 +441,14 @@ def _expires_date(estimate: AggregatedEstimate) -> dt.date:
return dt.date.today() + dt.timedelta(days=30)
def _qr_code_data_url(text: str, size: int = 4) -> str:
"""QR-код как SVG data URL."""
qr = segno.make(text, error="m")
buf = io.BytesIO()
qr.save(buf, kind="svg", scale=size, dark="#1a1d23", light="#ffffff")
return f"data:image/svg+xml;base64,{base64.b64encode(buf.getvalue()).decode('ascii')}"
def _conf_label(confidence: str) -> str:
return {"high": "Высокая", "medium": "Средняя", "low": "Низкая"}.get(confidence, confidence)

View file

@ -141,6 +141,13 @@ def _find_files(dir_path: str, prefix: str) -> list[str]:
# ─────────────────────────────────────────────────────────────────────────────
# Стриминговый парсер (lxml iterparse + очистка)
# ─────────────────────────────────────────────────────────────────────────────
def _local_name(tag: object) -> str:
"""Локальное имя тега без namespace; '' для не-элементов (комментарии/PI)."""
if not isinstance(tag, str):
return ""
return tag.rsplit("}", 1)[-1]
def _stream_rows(path: str, marker_attr: str) -> Iterator[etree._Element]:
"""Yield row-элементов файла, у которых есть атрибут marker_attr, освобождая память.

View file

@ -71,3 +71,7 @@ class AvitoWarmupCookiesMissingError(AvitoBlockedError):
proxy-ротация, consecutive-block breaker в pipeline/backfill) отработали как на обычном
блоке площадки, без отдельного except-блока на call-сайтах.
"""
class AvitoParseError(AvitoError):
"""Cannot parse Avito HTML structure (selector changes)."""

View file

@ -92,6 +92,10 @@ class IMVAddressNotFoundError(Exception):
"""Raised when /coords/by_address returns no geoHash for given address."""
class IMVCityMismatchError(Exception):
"""Raised when locationId не входит в ожидаемый город (sanity check)."""
class IMVAuthError(Exception):
"""Avito API rejected auth / quota exceeded (HTTP 401 / 403)."""