fix(tradein): Yandex listing_date — keyword + absolute-no-year #602

Merged
Light1YT merged 1 commit from fix/yandex-listing-date-keyword-formats into main 2026-05-27 13:11:23 +00:00
Owner

Summary

Mirror к PR N (#601 Avito). Yandex Realty имел 60% NULL listing_date (2234/3704) — parse_listing_date() ловил только absolute с годом и relative numeric, пропускал «сегодня», «вчера», «18 мая» (без года).

Изменения

  • yandex_helpers.py parse_listing_date() теперь 4-tier fallback:
    1. Keyword shortcuts (сегодня/вчера/позавчера/только что)
    2. Absolute с годом (existing)
    3. NEW: absolute без года («18 мая») → infer current year + rollback на prev если future >30d
    4. Relative numeric (existing)
  • Added RE_RU_DATE_NO_YEAR regex + _RU_MONTH_PREFIXES dict

Tests

41/41 pass (38 existing + 3 new groups). Ruff clean.

Impact

Linkage rate в /sales-vs-listings (PR K) для Yandex pairs повысится 40% → ~90% после next sweep. Existing 2234 NULL — будут re-extracted на periodic scrape.

Pattern теперь consistent с Avito (PR N #601).

Refs #564.

## Summary Mirror к PR N (#601 Avito). Yandex Realty имел 60% NULL listing_date (2234/3704) — `parse_listing_date()` ловил только absolute с годом и relative numeric, пропускал «сегодня», «вчера», «18 мая» (без года). ## Изменения - yandex_helpers.py `parse_listing_date()` теперь 4-tier fallback: 1. Keyword shortcuts (сегодня/вчера/позавчера/только что) 2. Absolute с годом (existing) 3. **NEW**: absolute без года («18 мая») → infer current year + rollback на prev если future >30d 4. Relative numeric (existing) - Added `RE_RU_DATE_NO_YEAR` regex + `_RU_MONTH_PREFIXES` dict ## Tests 41/41 pass (38 existing + 3 new groups). Ruff clean. ## Impact Linkage rate в `/sales-vs-listings` (PR K) для Yandex pairs повысится 40% → ~90% после next sweep. Existing 2234 NULL — будут re-extracted на periodic scrape. Pattern теперь consistent с Avito (PR N #601). Refs #564.
Light1YT added 1 commit 2026-05-27 13:11:21 +00:00
Production: Yandex Realty имеет 60% listings с listing_date=NULL (2234/3704).
Audit показал parse_listing_date() ловил только absolute с годом
(«9 мая 2026») и relative numeric («5 дней назад»), но Yandex SERP
для свежих cards чаще использует:
- Keyword: «сегодня в 12:30», «вчера», «позавчера», «только что»
- Absolute без года: «18 мая» (год inferred)

Changes:
- yandex_helpers.py:
  * RE_RU_DATE_NO_YEAR — regex для absolute без \d{4}
  * _RU_MONTH_PREFIXES dict для day+month → date
  * parse_listing_date(): 4 fallback tiers
    1) keyword shortcuts
    2) absolute с годом (existing)
    3) absolute без года → infer current year, rollback на prev если future >30d
    4) relative numeric (existing)
- tests: 3 new test groups (keyword/absolute-no-year/relative-still-works),
  41/41 pass

Impact: linkage rate в /sales-vs-listings (PR K) для Yandex pairs
повысится с 40% → ~90% после next sweep. Existing 2234 NULL — будут
re-extracted при periodic scrape (URL остался).

Mirrors PR N (Avito same fix). Pattern теперь consistent между scrapers.

Refs #564.
Light1YT merged commit 99a5a0f73b into main 2026-05-27 13:11:23 +00:00
Light1YT deleted branch fix/yandex-listing-date-keyword-formats 2026-05-27 13:11:23 +00:00
Sign in to join this conversation.
No reviewers
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference: lekss361/gendesign#602
No description provided.