fix(scrapers): cian _walk_price_range stop silently truncating tail (#1393) #1689

Merged

lekss361 merged 1 commit from fix/cian-paginate-tail-1393 into main

2026-06-17 17:55:38 +00:00

lekss361 commented

2026-06-17 17:46:07 +00:00

Owner

Проблема (#1393, LOW)

cian.py _walk_price_range: min(ceil(total/per_page), max_pages_per_bucket) молча обрезал хвост, когда total превышал page-cap. Warning в too_narrow-гарде считал потерю иначе и не покрывал реальную точку обрезки.

Решение

Явный logger.warning с точным числом потерянных офферов при достижении page-cap (subdivide невозможен: бакет уже на min-гранулярности _MIN_BRACKET=50k, Cian hard-cap ~54 стр.).

Verify

ruff clean; pytest tests/scrapers/test_cian_exhaustive.py → 12 passed (+2 теста). 1 pre-existing fail в test_cian_valuation не связан.

Closes #1393

## Проблема (#1393, LOW) `cian.py` `_walk_price_range`: `min(ceil(total/per_page), max_pages_per_bucket)` молча обрезал хвост, когда `total` превышал page-cap. Warning в `too_narrow`-гарде считал потерю иначе и не покрывал реальную точку обрезки. ## Решение Явный `logger.warning` с точным числом потерянных офферов при достижении page-cap (subdivide невозможен: бакет уже на min-гранулярности `_MIN_BRACKET=50k`, Cian hard-cap ~54 стр.). ## Verify `ruff` clean; `pytest tests/scrapers/test_cian_exhaustive.py` → **12 passed** (+2 теста). 1 pre-existing fail в `test_cian_valuation` не связан. Closes #1393

lekss361 added 1 commit 2026-06-17 17:46:08 +00:00