lekss361/gendesign
1
0
Fork 0
Code Issues 57 Pull requests Projects Releases Packages Wiki Activity Actions

[EPIC][tradein][scrapers] Миграция fetch-слоя на camoufox (real browser anti-bot) #883

New issue
Closed
opened 2026-05-31 10:36:15 +00:00 by lekss361 · 8 comments
lekss361 commented 2026-05-31 10:36:15 +00:00
Owner
Copy link

🔬 Обоснование — всё провалидировано локально 2026-05-31 (camoufox vs curl_cffi через тот же мобильный прокси).

Проблема

Avito (и остальные) отдают soft-block заглушку (HTTP 200, ~375КБ, без данных, __preloadedState__ stub, captcha-маркеры) на флагнутых прокси-IP, потом hard-429. Это JS-анти-бот: curl_cffi JS не исполняет → получает заглушку/бан. Доказано A/B: тот же URL/метод — residential IP даёт реальные 1.42МБ, флагнутый proxy-IP даёт 375КБ stub. curl_cffi банится на ~23 запросах/IP.

Решение

camoufox (Firefox + C++-инжект fingerprint, Playwright-API) исполняет JS-challenge → отдаёт реальные данные через тот же прокси. Заменяем curl_cffi fetch-слой на browser-fetcher. Парсинг (__preloadedState__→selectolax/JSON) НЕ меняется — только «как достать HTML».

Валидация (camoufox+прокси, реальные данные ✅)

SERP пагинация multi-room detail house
avito ✅ ✅ p5 (50 объяв.) ✅ ✅ ✅
cian ✅ ✅ p3 ✅ 2room ✅ —
n1 ✅ ✅ p2 — ✅ —
yandex ✅ ✅ p2 — ✅ —
domclick (#796) ✅ 40 карт. — — — —
  • Rate: avito 9/10 на НУЛЕВОЙ задержке (curl_cffi банился на ~23) → реальный браузер снимает IP-rate-стену. delay 1-2с достаточно (вежливость, не анти-бан).
  • Память: утечки НЕТ (RSS bounded, стабилизация ~800МБ, пик ~1.9ГБ). Нужен ~2.5ГБ headroom контейнеру.
  • ⚠️ Стабильность: интермиттентный TargetClosedError (1/2 длинных прогонов на одном browser) → обязательны recycle каждые ~15-20 стр + relaunch-on-crash.
  • Установка: camoufox[geoip] + python -m camoufox fetch (Firefox-build ~960МБ). Конфиг: os="windows", locale="ru-RU", proxy=..., geoip=True, humanize=True.

Фазы (отдельные issue)

  • Phase 0 — BrowserFetcher abstraction + Docker/deploy (foundation). status/ready.
  • Phase 1 — avito на BrowserFetcher (заменяет curl_cffi + _rotate_ip + firewall-detect). Depends Phase 0.
  • Phase 2 — cian/n1/yandex на BrowserFetcher, снять старые анти-бот костыли (cian DMIR_AUTH cookies + warm-up, yandex captcha). Depends Phase 1.

Trade-offs (принято)

  • Скорость ~5с/страница (vs 0.1с curl_cffi) — приемлемо для ночного sweep.
  • Образ +~1ГБ (Firefox-build), память +~2ГБ. Один браузер на sweep + recycle.
  • Concurrency-guard уже есть (#874) — два sweep'а не запустятся.

Связано

Разблокирует/делает ненужными: #843 (cian SERP dead), баны avito, #562/#726-хвост. Заменяет per-provider анти-бот костыли единым механизмом.

> 🔬 Обоснование — всё провалидировано локально 2026-05-31 (camoufox vs curl_cffi через тот же мобильный прокси). ## Проблема Avito (и остальные) отдают **soft-block заглушку** (HTTP 200, ~375КБ, без данных, `__preloadedState__` stub, captcha-маркеры) на флагнутых прокси-IP, потом hard-429. Это **JS-анти-бот**: `curl_cffi` JS не исполняет → получает заглушку/бан. Доказано A/B: тот же URL/метод — residential IP даёт реальные 1.42МБ, флагнутый proxy-IP даёт 375КБ stub. curl_cffi банится на ~23 запросах/IP. ## Решение **camoufox** (Firefox + C++-инжект fingerprint, Playwright-API) исполняет JS-challenge → отдаёт реальные данные через тот же прокси. Заменяем curl_cffi fetch-слой на browser-fetcher. **Парсинг (`__preloadedState__`→selectolax/JSON) НЕ меняется** — только «как достать HTML». ## Валидация (camoufox+прокси, реальные данные ✅) | | SERP | пагинация | multi-room | detail | house | |---|---|---|---|---|---| | avito | ✅ | ✅ p5 (50 объяв.) | ✅ | ✅ | ✅ | | cian | ✅ | ✅ p3 | ✅ 2room | ✅ | — | | n1 | ✅ | ✅ p2 | — | ✅ | — | | yandex | ✅ | ✅ p2 | — | ✅ | — | | domclick (#796) | ✅ 40 карт. | — | — | — | — | - **Rate:** avito 9/10 на НУЛЕВОЙ задержке (curl_cffi банился на ~23) → реальный браузер снимает IP-rate-стену. delay 1-2с достаточно (вежливость, не анти-бан). - **Память:** утечки НЕТ (RSS bounded, стабилизация ~800МБ, пик ~1.9ГБ). Нужен ~2.5ГБ headroom контейнеру. - **⚠️ Стабильность:** интермиттентный `TargetClosedError` (1/2 длинных прогонов на одном browser) → обязательны **recycle каждые ~15-20 стр + relaunch-on-crash**. - Установка: `camoufox[geoip]` + `python -m camoufox fetch` (Firefox-build ~960МБ). Конфиг: `os="windows", locale="ru-RU", proxy=..., geoip=True, humanize=True`. ## Фазы (отдельные issue) - **Phase 0 — BrowserFetcher abstraction + Docker/deploy** (foundation). `status/ready`. - **Phase 1 — avito на BrowserFetcher** (заменяет curl_cffi + `_rotate_ip` + firewall-detect). Depends Phase 0. - **Phase 2 — cian/n1/yandex на BrowserFetcher**, снять старые анти-бот костыли (cian DMIR_AUTH cookies + warm-up, yandex captcha). Depends Phase 1. ## Trade-offs (принято) - Скорость ~5с/страница (vs 0.1с curl_cffi) — приемлемо для ночного sweep. - Образ +~1ГБ (Firefox-build), память +~2ГБ. Один браузер на sweep + recycle. - Concurrency-guard уже есть (#874) — два sweep'а не запустятся. ## Связано Разблокирует/делает ненужными: #843 (cian SERP dead), баны avito, #562/#726-хвост. Заменяет per-provider анти-бот костыли единым механизмом.
lekss361 added the
scope/backend
scrapers
enhancement
priority/p1
tradein
 labels 2026-05-31 10:36:15 +00:00
lekss361 commented 2026-05-31 10:38:10 +00:00
Author
Owner
Copy link

Фазы:

  • #884 Phase 0 — BrowserFetcher + Docker (status/ready)
  • #885 Phase 1 — avito (blocked на #884)
  • #886 Phase 2 — cian/n1/yandex (blocked на #885)

Порядок: 884 → 885 → 886. Каждая фаза = отдельный PR, верифицируется на проде до следующей.

Фазы: - **#884** Phase 0 — BrowserFetcher + Docker (`status/ready`) - **#885** Phase 1 — avito (blocked на #884) - **#886** Phase 2 — cian/n1/yandex (blocked на #885) Порядок: 884 → 885 → 886. Каждая фаза = отдельный PR, верифицируется на проде до следующей.
bot-analyst commented 2026-05-31 10:44:32 +00:00
Collaborator
Copy link

analyst: дубликат #884 (то же — enable ночной scrape_schedules avito/cian/yandex + verify). Закрываю как dup, канонический — #884. Работа не теряется.

analyst: дубликат #884 (то же — enable ночной scrape_schedules avito/cian/yandex + verify). Закрываю как dup, канонический — #884. Работа не теряется.
bot-analyst commented 2026-05-31 10:46:05 +00:00
Collaborator
Copy link

↑ analyst: реоупен — мой коммент о «дубликате #884» ОШИБОЧЕН. #883 это родительский EPIC (миграция fetch на camoufox), #884 — его Phase 0. Не дубликаты. Прошу прощения за неверное закрытие. EPIC остаётся открытым как зонтик над #884/#885/#886.

↑ analyst: реоупен — мой коммент о «дубликате #884» **ОШИБОЧЕН**. #883 это родительский EPIC (миграция fetch на camoufox), #884 — его Phase 0. Не дубликаты. Прошу прощения за неверное закрытие. EPIC остаётся открытым как зонтик над #884/#885/#886.
lekss361 commented 2026-05-31 10:48:15 +00:00
Author
Owner
Copy link

🔬 Rate-тест camoufox (нулевая задержка, свежий IP per provider) — добили cian+yandex:

поставщик результат rate-бан?
avito 9/10 ok НЕТ
cian 10/10 ok (3.4МБ) НЕТ
yandex реальные 4.2МБ когда грузит, но transient + browser-crash НЕТ (нестабильность)

Вывод: camoufox снимает rate-бан на всех 3. Сбои = не баны, а нестабильность (флейки прокси + TargetClosedError). yandex самый тяжёлый (4.2МБ/стр) → крэшится чаще. Подтверждает требования Phase 0 (#884): transient-retry + recycle + relaunch. delay 1-2с достаточно.

🔬 Rate-тест camoufox (нулевая задержка, свежий IP per provider) — добили cian+yandex: | поставщик | результат | rate-бан? | |---|---|---| | avito | 9/10 ok | НЕТ | | cian | **10/10 ok** (3.4МБ) | НЕТ | | yandex | реальные 4.2МБ когда грузит, но transient + browser-crash | НЕТ (нестабильность) | **Вывод:** camoufox снимает rate-бан на всех 3. Сбои = не баны, а нестабильность (флейки прокси + `TargetClosedError`). yandex самый тяжёлый (4.2МБ/стр) → крэшится чаще. Подтверждает требования Phase 0 (#884): transient-retry + recycle + relaunch. delay 1-2с достаточно.
lekss361 commented 2026-05-31 10:49:09 +00:00
Author
Owner
Copy link

📌 Решение по IP-ротации (после rate-теста): camoufox не банится → проактивная ротация не нужна.

  • _rotate_ip-петля curl_cffi (rotate на каждый 403/429) → убрать (Phase 1/2).
  • Прокси ОСТАЁТСЯ (один стабильный IP): прод datacenter-IP хардбанится Avito («проблема с IP»), нужен RU-mobile/residential egress. Ротация ≠ прокси.
  • Ротация → дремлющий reactive-fallback: триггерится ТОЛЬКО если BrowserFetcher детектит soft-block/429 (с camoufox редко/никогда). Код не выкидываем, но проактивно не дёргаем.
  • ⚠️ Не довалидировано: ~10 запросов/IP без бана подтверждено; полный sweep ~80 запросов/IP на одном IP до отказа НЕ гоняли. Reactive-fallback страхует.
📌 **Решение по IP-ротации (после rate-теста):** camoufox не банится → **проактивная ротация не нужна**. - `_rotate_ip`-петля curl_cffi (rotate на каждый 403/429) → **убрать** (Phase 1/2). - **Прокси ОСТАЁТСЯ** (один стабильный IP): прод datacenter-IP хардбанится Avito («проблема с IP»), нужен RU-mobile/residential egress. Ротация ≠ прокси. - Ротация → **дремлющий reactive-fallback**: триггерится ТОЛЬКО если BrowserFetcher детектит soft-block/429 (с camoufox редко/никогда). Код не выкидываем, но проактивно не дёргаем. - ⚠️ Не довалидировано: ~10 запросов/IP без бана подтверждено; полный sweep ~80 запросов/IP на одном IP до отказа НЕ гоняли. Reactive-fallback страхует.
lekss361 commented 2026-05-31 10:51:07 +00:00
Author
Owner
Copy link

✅ Уточнение по прокси (для воркеров/окон): proxy-инфра УЖЕ ГОТОВА — в скоуп миграции НЕ входит.

Мобильный прокси куплен, настроен на проде и провалидирован (все camoufox-тесты шли через него, реальные данные по всем поставщикам):

  • mobileproxy.space (id 500825, mproxy.site:16928), куплен 2026-05-30;
  • на проде в tradein-mvp/backend/.env.runtime: AVITO_PROXY_URL + AVITO_PROXY_ROTATE_URL (задеплоено #623/#788);
  • креды — в vault meta/00_credentials.md → «Mobile Proxy».

Что это значит для исполнителя:

  • BrowserFetcher (Phase 0 #884) переиспользует существующий settings.scraper_proxy_url — НИЧЕГО нового не покупать/настраивать. _proxy_dict() просто парсит его в формат camoufox {server,username,password}.
  • AVITO_PROXY_ROTATE_URL остаётся, но из «дёргать на каждый бан» → в reactive-fallback (почти не используется, см. решение по ротации выше).

Чистый скоуп миграции = только код (BrowserFetcher + перевод скрейперов на него) + Docker (Firefox-build ~960МБ + headless-libs). Прокси/egress — done.

✅ **Уточнение по прокси (для воркеров/окон): proxy-инфра УЖЕ ГОТОВА — в скоуп миграции НЕ входит.** Мобильный прокси куплен, настроен на проде и провалидирован (все camoufox-тесты шли через него, реальные данные по всем поставщикам): - `mobileproxy.space` (id 500825, `mproxy.site:16928`), куплен 2026-05-30; - на проде в `tradein-mvp/backend/.env.runtime`: `AVITO_PROXY_URL` + `AVITO_PROXY_ROTATE_URL` (задеплоено #623/#788); - креды — в vault `meta/00_credentials.md` → «Mobile Proxy». **Что это значит для исполнителя:** - BrowserFetcher (Phase 0 #884) переиспользует существующий `settings.scraper_proxy_url` — НИЧЕГО нового не покупать/настраивать. `_proxy_dict()` просто парсит его в формат camoufox `{server,username,password}`. - `AVITO_PROXY_ROTATE_URL` остаётся, но из «дёргать на каждый бан» → в **reactive-fallback** (почти не используется, см. решение по ротации выше). **Чистый скоуп миграции = только код (BrowserFetcher + перевод скрейперов на него) + Docker (Firefox-build ~960МБ + headless-libs).** Прокси/egress — done.
bot-backend commented 2026-06-26 17:49:52 +00:00
Collaborator
Copy link

Статус 2026-06-26: эпик substantially done. Phase 0 (#884) + Phase 0.5 sidecar (#905) + Phase 1 avito (#885) + /fetch-json & IMV (#915 Stage 2/3) — закрыты; browser-режим дефолт, tradein-browser sidecar live. Phase 2 (#886) cian/yandex — done, остаток: n1 (low-pri, не построен) + намеренно-оставленный curl_cffi за флагом-фолбэком. Coverage-matrix avito/cian/yandex (SERP+pagination+detail+newbuilding) — ✓. Держу open до закрытия #886.

Статус 2026-06-26: эпик **substantially done**. Phase 0 (#884) + Phase 0.5 sidecar (#905) + Phase 1 avito (#885) + /fetch-json & IMV (#915 Stage 2/3) — закрыты; browser-режим дефолт, tradein-browser sidecar live. Phase 2 (#886) cian/yandex — done, остаток: n1 (low-pri, не построен) + намеренно-оставленный curl_cffi за флагом-фолбэком. Coverage-matrix avito/cian/yandex (SERP+pagination+detail+newbuilding) — ✓. Держу open до закрытия #886.
bot-backend commented 2026-06-26 17:52:16 +00:00
Collaborator
Copy link

✅ Закрыто — эпик camoufox-миграции выполнен: Phase 0/0.5/1 (avito) + Phase 2 (cian/yandex) на BrowserFetcher, sidecar live, browser-режим дефолт, /fetch-json + IMV (#915). Coverage-matrix avito/cian/yandex (SERP+pagination+detail+newbuilding) — ✓. n1 не строим (#886 закрыт), curl_cffi оставлен за флагом-фолбэком намеренно. Миграция fetch-слоя завершена.

✅ Закрыто — эпик camoufox-миграции выполнен: Phase 0/0.5/1 (avito) + Phase 2 (cian/yandex) на BrowserFetcher, sidecar live, browser-режим дефолт, /fetch-json + IMV (#915). Coverage-matrix avito/cian/yandex (SERP+pagination+detail+newbuilding) — ✓. n1 не строим (#886 закрыт), curl_cffi оставлен за флагом-фолбэком намеренно. Миграция fetch-слоя завершена.
Sign in to join this conversation.
No Branch/Tag specified
Branches Tags
main
fix/2013-avito-cohort-null
fix/rbac-test-user2-expired
fix/expire-brusnika-trial-access
feat/tradein-domclick-house-sku-schema
chore/design-sync-tradein
fix/tradein-deploy-scraper-paths-filter
fix/tradein-no-numberless-house-insert
fix/tradein-dedup-fias-pass-no-geoguard
feat/tradein-fias-estimate-frontend
fix/tradein-dedup-by-fias
feat/tradein-fias-tier-matching
fix/tradein-v2-uiux-p1
fix/objective-lots-dedup-1964
fix/audit-followups-1953
feat/concept-house-picker-1965-stage3b
feat/concept-house-catalog-1965-stage3a
feat/concept-live-massing-1965-stage2b
feat/concept-recompute-1965-stage2a
feat/concept-section-1965-stage1
fix/best-layouts-per-object-snapshot-1956
fix/deficit-segmentation-1959
feat/tradein-hedonic-ground-floor
fix/report-map-points-1961
fix/report-microcopy-1963
fix/report-nspd-zoning-1962
fix/report-frontend-display-1953
perf/tradein-estimate-audit
perf/best-layouts-objects-first
fix/171-migration-path
perf/171-objective-crm-report-month-idx
fix/1926-app-log-stdout
fix/estimator-tiebreaker-nanalogs
fix/1917-fetch-json-network-retry
fix/1926-scrape-runs-total-seen
fix/1781-house-fk-source-identity
feat/39-osrm-per-category
feat/1746-utility-infra-map
fix/test-849-savepoint-count
fix/parking-economics-by-class
fix/zouit-engineering-area-gate
fix/zoning-resolution-decouple
feat/dcf-velocity-schedule
feat/zone-regulation-backfill
chore/mock-financial-estimate
fix/finmodel-split-disclosure-threshold
feat/finmodel-financing
feat/finmodel-sitefinder-bridge
feat/finmodel-dcf
feat/finmodel-price-calibration
feat/finmodel-cost-cascade
audit/1871-p2-estimator-dedup-split
audit/1871-p2-avito-coord
audit/1871-p3-uiux
audit/1871-p2-invest-moi
audit/1871-p2-velocity-market
audit/1871-p1-3-isreal-stubs
audit/1871-p1-2-ghost-anchor-guard
audit/1871-p1-scenarios-collapse
revert/site-finder-v2
fix/v2-remove-resource-legend
fix/v2-map-legend-position
feat/site-finder-v2-map-light-polish
rollback/site-finder-home-light
feat/site-finder-v2-cockpit
rollback/sf-old-analysis-design
feat/ptica-tabs-6-6-reports-params
fix/ptica-vri-row
feat/ptica-map-glyphs-sitefinder-dark
fix/ptica-3d-preview-product-verdict
fix/ptica-button-fontsize
fix/ptica-parity-data-mapping
chore/ptica-iso-preview-spin
fix/ptica-inter-map-product
fix/ptica-visual-parity
fix/ptica-left-rail
feat/ptica-cockpit-complete-bottom
feat/ptica-default-and-rich-map
feat/ptica-real-ksit-frontend
feat/tradein-ekb-geoportal-buildings
fix/sf-feedback-batch
feat/avito-newbuilding-sweep
feat/browser-concurrent-pool
fix/backfill-kadastr-column
fix/avito-proactive-ip-rotate
feat/activate-domclick-sweep
feat/avito-newbuilding-capture
fix/house-id-fk-realtime-link
fix/migration-162-table-if-exists
feat/riasurt-sverdl-layers-108
fix/sber-dataset-paths-902
fix/conflict-resolution-freshness-1539
feat/objective-lots-history-writer-307-obj6
feat/velocity-mv-61
fix/objective-mapping-is-reviewed-gate-307-obj2
fix/cian-detail-rich-fields
fix/avito-novostroyki-segment
feat/yandex-novostroyki-newflat
fix/ci-dedup-runner-storm-1709
fix/emiss-pk-granularity-1687
feat/listings-segment-param-1188
fix/inn-regex-word-boundary-1682
fix/excel-deficit-horizon-1590
fix/admin-scrape-validation
fix/admin-leads-interval-cast-1694
fix/dkp-corridor-doc-p10p90-1695
fix/weather-wind-d-allnone
test/residential-zone-rawprops-1681
fix/domrf-badge-regex-narrow-1686
feat/yandex-camoufox-transport
fix/score-sat-factor-1509
fix/base-pace-room-bucket-1593
fix/gate-verdict-no-blocker-1617
fix/confidence-deal-count-window-1637
fix/match-economics-1511-1512
fix/listings-partial-indexes-1398
fix/smart-suggestions-threshold-1503
fix/dkp-corridor-percentile-1520
fix/enrich-economics-window-1513
fix/leads-stats-window-1383
fix/poi-score-scale-1486
fix/geo-weight-floor-1633
fix/inn-regex-context-1640
fix/domrf-status-classify-1609
fix/emiss-period-dedup-1606
fix/cian-paginate-tail-1393
fix/normalize-zero-fill-guard-1638
fix/supply-view-devgroup-key-1650
fix/residential-zone-detect-1353
fix/score-label-threshold-1357
fix/trend-ratio-vprior-zero-1508
fix/district-median-dedup-1352
fix/supply-layers-overlap-1355
fix/pdf-expires-at-1530
fix/quartirography-area-bucket-1406
fix/cad-zones-multipolygon-1344
fix/sold-pct-market-verdict-1407
fix/week-review-finish
fix/week-review-backend-v2
feat/plan-vectorization-spike-299
fix/1668-analyze-confidence
fix/1667-metro-block
fix/1666-layout-velocity-beat
chore/remove-n1-scraper
fix/cian-kitchen-area
feat/yandex-detail-backfill
feat/avito-detail-backfill
fix/best-layouts-bucket-normalization
fix/gknspecial-incremental-commit-per-prefix
fix/okn-objects-full-registry-load
fix/parcel-ird-overlap-except-expand
fix/report-assembler-confounded-keys
fix/job-settings-json-persist-v2
fix/nspd-geo-soft-time-limit-passthrough
fix/nspd-soft-time-limit-v2
fix/pilot-request-modal-validation
fix/recommend-mix-saturation-latest-snapshot
fix/scrape-cadastre-fail-counter-v2
fix/izyatie-ocr-cad-normalize
fix/job-settings-panel-json-state-persist
fix/noise-loader-savepoint-per-row
fix/objective-sync-config-bare-except
fix/parcel-snapshot-mdash-double-escape
fix/poi-loader-leap-year-date-replace
fix/scrape-cadastre-permanent-fail-counter
fix/usermenu-analyst-role-label
feat/location-948b-r
feat/location-entity-948b
feat/insight-entity-948a
feat/analyst-role-audit-962
feat/cbr-inflation-macro-946
feat/cian-zhk-resolve-972
perf/forecast-parallel-horizons-1129
feat/newbuilding-enrich-backfill-972
feat/emiss-macro-indicators-946
feat/rosstat-emiss-macro-946
ci/frontend-vitest-job
chore/frontend-vitest-wkt-tests
feat/forecast-meta-footer
feat/forecast-future-supply-competitors
feat/forecast-docx-pptx-buttons
feat/forecast-scoring-panel
feat/forecast-product-tz-block
feat/market-map-layers-999
feat/forecast-chart-section6
feat/forecast-export-pptx-959
feat/forecast-export-docx-959
feat/forecast-export-ui-959
feat/forecast-export-telegram-959
feat/forecast-export-md-959
feat/analyze-response-contract-961
feat/competitor-velocity-spatial-fallback-968
fix/frontend-healthcheck-hostname
feat/analyze-market-coords-999
fix/site-finder-entry-crash-1001
feat/horizon-selector-996
feat/forecast-section-998
feat/forecast-endpoint-horizon-enqueue
feat/forecast-celery-task-persist
feat/forecast-orchestrator-service
feat/demand-supply-months-of-inventory
feat/wire-district-resolver
feat/district-vocab-reconciliation
fix/affordability-market-spread
fix/backtest-sig-gate
feat/wire-978-almon-rate-regime
feat/backtest-oos-almon-seasonal
ci/forgejo-pytest-gate
fix/tradein-praktika-logo-form-scroll
feat/yandex-exhaustive-price-room
feat/794-sber-time-adjust
chore/bot-harness-tuning
docs/agent-usage-throttle-qa-terminal
fix/avito-sweep-single-run-guard
chore/analyst-inbound-queue-tradein-db
feat/801-preview-full-wt
chore/bot-safety-followups
feat/tradein-avito-imv-fix
feat/tradein-repair-coef-calibration
feat/tradein-avito-houses-fix
feat/tradein-address-precision
feat/tradein-backfill-prioritize-listings
feat/tradein-geocode-deals-nominatim
feat/tradein-geocode-deals-from-houses
feat/tradein-same-building-match
feat/claude-envvars-and-stale-cron
No results found.
Labels
Clear labels   
admin

Admin UI / internal tools / pipeline tracker

  
analytics

Аналитика данных / matching

  
auth

Authentication / authorization / multi-tenancy

  
automation

Автоматизация / cron / scheduler

  
bug

Something isn't working

  
business

Коммерческая воронка / пилоты / pipeline / реестр ПО

  
chore

Operational housekeeping

  
ci

Forgejo Actions / build pipeline

  
compliance

152-ФЗ / реестр ПО / legal / TOS

  
data

Data sources, parsers, ETL

  
data-moat

Уникальные данные — sales tracker, CRM aggregation

  
docs

README / runbooks / onboarding

  
duplicate

This issue or pull request already exists

  
dx

Developer experience / build speed

  
enhancement

New feature or request

  
Fable 5 ревью

Находки полного мульти-агентного ревью (Claude Fable 5, 2026-06-09)

  
feedback/max

Feedback from Max (Senior partner)

  
generative

Generative Design — concept generation engine

  
GG-форсайт

Новое ТЗ от Ген Геныча (июнь 2026): Site Finder v2 — ИИ-прогноз продуктовой стратегии девелопера. Актуальный приоритет.

  
needs-discussion

Pending team sync / decision

  
needs-human

Human review/decision required

  
observability

Monitoring / metrics / logs / Sentry / Uptime

  
pause-bots

Kill-switch — all autonomous bots pause

  
performance

Latency / throughput / DB query tuning

  
priority/p0

Critical / production-blocker

  
priority/p1

High priority

  
priority/p2

Normal priority

  
priority/p3

Низкий приоритет (follow-up, tech-debt)

  
scope/backend

Backend Python — FastAPI, Celery, scrapers

  
scope/db

DB migrations, indexes, SQL

  
scope/devops

docker-compose, Caddy, workflows

  
scope/frontend

Frontend — Next.js, React, TypeScript

  
scope/qa

Tests, smoke, Playwright

  
scrapers

Скрапперы (Avito/Cian/Yandex/Rosreestr)

  
security

Security audit / secrets / vulnerabilities

  
site-finder

Site Finder scoring quality & data layer

  
stage/1

Stage 1: Generative MVP (нед 2-7)

  
stage/2

Stage 2: Site Finder MVP (нед 8-12)

  
status/blocked

Blocked — needs human intervention

  
status/done

Closed, completed

  
status/needs-analysis

Raw/fuzzy task filed by human — auto-analyst подхватывает: code-archeology + декомпозиция в actionable scope/* + status/ready (или split на под-issues)

  
status/needs-fix

Reviewer/QA вернул worker на доработку — worker сам чинит свой PR (fixup), НЕ требует human (в отличие от status/blocked)

  
status/qa

PR merged, awaiting smoke test

  
status/ready

Ready for pickup by worker bot

  
status/review

PR open, awaiting code review

  
status/wip

Work in progress (worker claimed)

  
tech-debt

Технический долг

  
tradein

Trade-In MVP проект

  
ux

User experience / responsive / conversion

  
week ревью 1

Week review 1 — находки multi-agent аудита проекта (2026-06-14)

  
wontfix

This will not be worked on

  
вторичка

Trade-In Estimator — проект оценки вторичного жилья

  
ИРД

Исходно-разрешительная документация — слой ограничений участка для analyze-таблицы

No labels
admin
analytics
auth
automation
bug
business
chore
ci
compliance
data
data-moat
docs
duplicate
dx
enhancement
Fable 5 ревью
feedback/max
generative
GG-форсайт
needs-discussion
needs-human
observability
pause-bots
performance
priority/p0
priority/p1
priority/p2
priority/p3
scope/backend
scope/db
scope/devops
scope/frontend
scope/qa
scrapers
security
site-finder
stage/1
stage/2
status/blocked
status/done
status/needs-analysis
status/needs-fix
status/qa
status/ready
status/review
status/wip
tech-debt
tradein
ux
week ревью 1
wontfix
вторичка
ИРД
Milestone
Clear milestone
No items
No milestone
Projects
Clear projects
No items
No project
Assignees
Clear assignees
No assignees
3 participants
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference: lekss361/gendesign#883
No description provided.
Delete branch "%!s()"

Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?