fix(tradein): deactivate_stale для domklik/n1 + честная freshness по scraped_at (#2204) #2221

Merged

lekss361 merged 2 commits from fix/tradein-deactivate-stale-domklik-n1 into main

2026-07-02 20:10:35 +00:00

lekss361 commented

2026-07-02 20:04:06 +00:00

Owner

Summary

deactivate_stale_listings получил kwarg staleness_column (whitelist {last_seen_at, scraped_at}, ValueError до SQL; имя колонки в f-string только после whitelist, значения через param-binding). Прокинут в оба dispatch-пути (kit product_handlers — боевой, legacy scheduler).
Seed-миграция 160: расписания deactivate_stale_domklik (ttl=14, staleness_column=scraped_at) и deactivate_stale_n1 (ttl=14). Идемпотентно (ON CONFLICT (source) DO NOTHING), окно 07:00-08:00 UTC.
Почему scraped_at для domklik: все 6296 is_active строк делят один last_seen_at (нетрекаемый ежедневный bulk-touch, verified на проде 2026-07-02: идентичный timestamp 19:41:00.179444 без единой строки в scrape_runs) → TTL по last_seen_at вечно матчит 0 строк. scraped_at двигается только реальным скрейпом; TTL=14 зеркалит LISTINGS_FRESH_DAYS эстиматора.
domklik blanket по сегментам осознанно: 100% строк vtorichka (prod-проверка в комменте миграции).
n1 (381 строка, last_seen заморожен 16.06, скрейпера нет) — деактивируется первым же прогоном.

Как проверено

Полный локальный pytest: 2959 passed, 6 skipped, 1 deselected (включая 13 новых тестов: scraped_at-вариант SQL, injection-строка → ValueError + mark_failed без execute, свойства миграции 160).
ruff check — чисто.
code-reviewer: ✅ APPROVE (minor про segments закрыт prod-проверкой в этом же PR).

Refs #2204

## Summary - `deactivate_stale_listings` получил kwarg `staleness_column` (whitelist `{last_seen_at, scraped_at}`, ValueError до SQL; имя колонки в f-string только после whitelist, значения через param-binding). Прокинут в оба dispatch-пути (kit `product_handlers` — боевой, legacy `scheduler`). - Seed-миграция `160`: расписания `deactivate_stale_domklik` (ttl=14, **staleness_column=scraped_at**) и `deactivate_stale_n1` (ttl=14). Идемпотентно (`ON CONFLICT (source) DO NOTHING`), окно 07:00-08:00 UTC. - Почему scraped_at для domklik: все 6296 is_active строк делят один last_seen_at (нетрекаемый ежедневный bulk-touch, verified на проде 2026-07-02: идентичный timestamp 19:41:00.179444 без единой строки в scrape_runs) → TTL по last_seen_at вечно матчит 0 строк. scraped_at двигается только реальным скрейпом; TTL=14 зеркалит LISTINGS_FRESH_DAYS эстиматора. - domklik blanket по сегментам осознанно: 100% строк vtorichka (prod-проверка в комменте миграции). - n1 (381 строка, last_seen заморожен 16.06, скрейпера нет) — деактивируется первым же прогоном. ## Как проверено - Полный локальный pytest: **2959 passed, 6 skipped, 1 deselected** (включая 13 новых тестов: scraped_at-вариант SQL, injection-строка → ValueError + mark_failed без execute, свойства миграции 160). - ruff check — чисто. - code-reviewer: ✅ APPROVE (minor про segments закрыт prod-проверкой в этом же PR). Refs #2204

Rows
Columns