2619 commits

This branch

This branch

All branches

Author	SHA1	Message	Date
bot-backend	272abac4d2	fix(tradein/matching): город развёртки доезжает до стража Tier-2a — межгородские склейки домов (#2777) (#2808)	2026-08-10 08:51:14 +00:00
bot-backend	72472c2783	fix(tradein/newbuilding): счётчики записи различают вставку и обновление (#2807) (#2809)	2026-08-10 08:50:56 +00:00
bot-backend	84a65d40dd	fix(site-finder): §4.1 «Применить» действительно применяет веса POI (#2790) (#2810)	2026-08-10 08:39:59 +00:00
bot-backend	12c189ac27	fix(tradein/scraper): сводка «что сейчас не собирает» — лестница вех не видит стрик 0 (#2670) (#2806)	2026-08-10 08:29:26 +00:00
bot-backend	27e199e370	fix(tradein/proxy): упавшая проба присваивала себе бан боевого сбора (#2800) (#2805)	2026-08-09 20:13:10 +00:00
bot-backend	9cd6db023b	fix(tradein/cian): Циан переименовал MFE карточки ЖК — читать оба имени (#2767) (#2804)	2026-08-09 18:41:02 +00:00
bot-backend	08bb9d6549	fix(tradein/proxy): проба спрашивает каждую площадку, вердикт пишется на пару «узел × источник» (#2800 B) (#2803)	2026-08-09 18:28:37 +00:00
bot-backend	7cd8c63b89	fix(tradein/proxy): узел, зарезервированный за Домкликом, до Домклика не доходит (#2800 A) (#2802)	2026-08-09 18:15:55 +00:00
bot-backend	f45ce3be2d	fix(tradein/cian): банить узел только когда состояния НЕТ, а не по слову «captcha» (#2767) (#2801)	2026-08-09 18:04:01 +00:00
bot-backend	687bd38322	chore(tradein/db): снести DEPRECATED-колонку listings.ceiling_height (#2799)	2026-08-09 17:51:15 +00:00
bot-backend	f3bcb1a25f	fix(tradein/cian): обогащение ЖК падало не на разметке, а на сожжённом узле (#2767) (#2798)	2026-08-09 17:38:40 +00:00
bot-backend	f1f2bca2e9	fix(tradein/deactivate): TTL не снимает объявления по порогу ниже собственного цикла обхода (#2797)	2026-08-09 17:26:18 +00:00
bot-backend	7b36f86ea6	fix(tradein/domclick): свип ходит через прокси-пул, а отказ узла не обнуляет прогон (#2657) (#2796)	2026-08-09 17:21:49 +00:00
bot-backend	45924021a7	chore(tradein/db): вернуть снос дубля индекса expires_at — теперь с lock_timeout (#2795)	2026-08-09 17:10:18 +00:00
lekss361	ef82172bd1	Merge pull request 'feat(tradein/payments): оплаченный отчёт хранится год — retain_until и предохранители в задаче удаления' (#2754) from feat/tradein-paid-retention into main	2026-08-07 13:08:45 +00:00
bot-backend	5ce95a28a8	fix(tradein/payments): SET LOCAL lock_timeout в миграции 240 (gate threshold — артефакт) ... check-migration-lock-timeout.py требует lock_timeout только для NN >= 250 в tradein — порог назначен по номеру аварийной миграции 250, которую затем сняли с деплоя (#2792). Фактический максимум применённого на main — 239, то есть весь диапазон 240-249 гейтом не проверяется вообще ("проверено новых миграций: 0" = не проверено ни одного файла, не "все чисты"). Функция scan() из самого гейта, прогнанная напрямую без порогового отсечения, помечает ALTER TABLE в этом файле как блокирующий DDL без lock_timeout. trade_in_estimates — самая горячая таблица стека (история, история сотрудников, каждое чтение/PDF оценки); на этой БД уже наблюдались открытые транзакции на 46 и 22 часа. Ждущая ACCESS EXCLUSIVE-блокировка встаёт в очередь перед новыми запросами приложения. DDL на 1058 строках мгновенный — риск не в исполнении, а в ожидании чужой блокировки. Добавлено SET LOCAL lock_timeout = '5s' сразу после BEGIN + объяснение в шапке файла, почему оно здесь при том что гейт формально не требует — чтобы не убрали как "лишнее". Порог гейта не трогаю — отдельный issue.	2026-08-07 15:59:28 +03:00
bot-backend	7431615415	Merge remote-tracking branch 'forgejo/main' into feat/tradein-paid-retention ... # Conflicts: # tradein-mvp/backend/data/sql/_manifest_applied.txt # tradein-mvp/frontend/src/components/trade-in/v2/fixtures.ts	2026-08-07 15:40:52 +03:00
bot-backend	e6591a450a	fix(tradein/payments): миграция 234 → 240 — номер снова занят на main ... main уехал вперёд за сутки: 234 занял 234_scrape_runs_ban_kind_unknown.sql (0de22f4b), максимум на main сейчас 239 (235-237 — дыры). max+1=240 безопаснее дыр; ни один открытый PR номер 235-240 не занимает (сверено по forgejo/main и всем открытым веткам). Переименован файл + обновлены все 7 упоминаний "migration 234" (_manifest_applied.txt, config.py, schemas/trade_in.py, purge_expired_trade_in_data.py, test_estimate_idor.py, content.ts, types/trade-in.ts) — правки текстовые, ни один тест не читает миграцию по имени файла.	2026-08-07 15:31:01 +03:00
bot-backend	482deb4864	fix(migrations): закрепить lock_timeout для блокирующего DDL и ловить невалидные индексы (#2791)	2026-08-07 11:21:28 +00:00
bot-backend	29f1000228	revert(tradein/db): снять 250 с деплоя — очередь за локом блокирует пайплайн (#2792)	2026-08-07 11:01:31 +00:00
bot-backend	e4680082ea	test(ci): развести «нагрузку не создать» и «защита сломана» в двух флапающих гейтах (#2783) (#2789)	2026-08-07 10:35:15 +00:00
bot-backend	209e4e145f	fix(site-finder): вернуть доступ к профилям весов — владелец из сессии (#2782) (#2788)	2026-08-07 10:22:55 +00:00
bot-backend	c3a35a31d4	fix(ptica): скраб ПДн перестаёт утекать то, что защищает + проводка проверяется поведением (#2753) (#2787)	2026-08-07 10:11:36 +00:00
bot-backend	9de690ad4f	chore(tradein/frontend): удалить остаточный слой фикстур (#2755) (#2785)	2026-08-07 10:00:48 +00:00
bot-backend	90c3e7e490	test(scrapers/krt): вернуть в прогон проверку многоблочной страницы (#2778) (#2781)	2026-08-07 09:48:52 +00:00
bot-backend	1f036e94d1	refactor(security): убрать мёртвую проверку админского токена (#2775) (#2776)	2026-08-07 09:30:23 +00:00
bot-backend	a9096f125a	fix(tradein/db): снять побайтовый дубль индекса на trade_in_estimates(expires_at) (#2752) (#2784)	2026-08-07 09:30:14 +00:00
bot-backend	306fd82836	fix(tradein): свести высоту потолков к одной колонке ceiling_height_m (#2779)	2026-08-07 09:18:48 +00:00
bot-backend	de4b2a4ae5	fix(tradein/houses): вернуть координаты объявлений в дом, когда объявления согласны (#2771) (#2780)	2026-08-07 09:08:06 +00:00
bot-backend	05bc321728	build(tradein/frontend): состав зависимостей перестаёт зависеть от даты сборки (#2770) (#2772)	2026-08-07 09:07:58 +00:00
bot-backend	69ba6002da	fix(tradein): поштучный процент гаснет вместе со сводным, когда причина — сама пара (#2672) (#2774)	2026-08-07 08:56:43 +00:00
bot-backend	339713c1aa	fix(tradein/yandex): просмотры режутся по разделителю тысяч + Циан молчит о непонятой фразе (#2669) (#2773)	2026-08-07 08:44:48 +00:00
bot-backend	5046ac7b4e	fix(tradein/cian): показать, ЧТО пришло вместо состояния ЖК-страницы, и честно закрывать нулевой прогон (#2767) (#2768)	2026-08-07 08:06:25 +00:00
bot-backend	a034d7a1c1	test(tradein/frontend): первые проверки поведения — пустое поле, погашенное число, отказ 429 (#2766) (#2769)	2026-08-07 07:55:37 +00:00
bot-backend	0de22f4bc9	fix(tradein/scraper): диагноз бана перестаёт назначаться по умолчанию (#2764) (#2765)	2026-08-06 23:17:59 +00:00
bot-backend	8def690b00	fix(devops): дать trade-in связность с redis, потом уже задать REDIS_URL (#2709) (#2763)	2026-08-06 22:37:25 +00:00
bot-backend	896243cf3f	fix(devops): потолок логов основного стека — journald, как у trade-in (#2761) (#2762)	2026-08-06 22:29:27 +00:00
bot-backend	604ce14858	fix(tradein/devops): починить окно времени в инструкции чтения журнала (#2741) (#2760)	2026-08-06 21:53:02 +00:00
bot-backend	d605f0b938	ci: гейт против публикации занятых на VPS портов в workflow (#2757) (#2759)	2026-08-06 21:40:05 +00:00
bot-backend	b1498a9ca7	fix(tradein/devops): логи в journald — переживают пересоздание контейнера (#2741) (#2758)	2026-08-06 21:24:57 +00:00
bot-backend	79f7b8fff3	ci(tradein): снять последний deselect — он пережил починку своего теста (#2756)	2026-08-06 20:53:55 +00:00
bot-backend	48664dfe0e	fix(tradein/payments): pre-flight должен ловить аномалию, не штатное состояние (review PR #2754) ... Deep-review MEDIUM: предполётная проверка purge_expired_trade_in_data считала по базовому предикату без retain_until — здоровая оплаченная строка (retain_until проставлен, платёж есть) через сутки после продажи тоже попадала под счётчик, и джоба аварийно останавливалась на первой же честной продаже навсегда (вместе с ней — и 180-дневное удаление лидов, вызываемое из той же функции после этой проверки). - _PREFLIGHT_PAID_CANDIDATES_SQL: добавлен терм `retain_until IS NULL` — теперь считает только реальную аномалию (retain_until не проставлен, а платёж есть), а не штатное состояние. Докстринги функции/модуля поправлены под фактическое поведение. - Тест на неверный инвариант (`"retain_until" not in sql`) заменён на позитивный (`"retain_until IS NULL" in sql`) + добавлены live-DB тесты на оба случая из ревью (здоровая оплаченная строка не поднимает тревогу, джоба не блокируется). - privacy/page.tsx: константа "12 месяцев" вынесена в content.ts (PAID_REPORT_RETENTION_MONTHS) вместо литерала + расходящегося комментария; добавлен сверяющий тест (test_paid_retention_text_consistency.py) по образцу _CONSENT_TEXT_SNAPSHOT. Смягчена формулировка про автоматическое удаление — задача на проде выключена и ни разу не запускалась, текст теперь описывает установленный порядок, а не наблюдаемый факт. - Все 10 висячих ссылок на untracked `mera-pr-d-spec.md` (7 файлов) заменены на краткое изложение сути в комментарии + ссылку на PR #2754.	2026-08-06 22:49:09 +03:00
lekss361	76c3f5c110	chore(frontend): фикстуры макета не по умолчанию + удаление осиротевших компонентов (#2747) ... МЕРА: у 8 компонентов витрины v2 проп data больше не имеет дефолта из fixtures.ts — при сбое передачи данных компонент обязан упасть на TS-ошибке, а не отрисовать выдуманные числа на платном экране оценки. Цепная правка в SectionOverlay (4 поля стали обязательными в такт с детьми). Птица: удалены 6 осиротевших компонентов (ноль импортов подтверждён репо-wide), подчищены 2 ссылающихся комментария. Проверено ревьюером: tsc --noEmit и next lint реально отработали на 91b460b1 (лог задачи 18031), vitest 32/264 зелёные (лог 18033); storybook в репозитории отсутствует вовсе — «unwired/storybook usage» как обоснование дефолтов никогда не имело потребителя; ui-preview/estimate использует v1-компоненты со своей локальной фикстурой и не задет.	2026-08-06 18:59:50 +00:00
bot-backend	5ff06d25b4	feat(tradein/payments): оплаченный отчёт хранится год — retain_until и предохранители в задаче удаления ... Мина: purge_expired_trade_in_data (сейчас enabled=false) удаляет строки WHERE expires_at < NOW() AND created_by IS NULL — это ровно популяция будущих платящих физлиц (владелец продаёт отчёт за 150 руб., отчёт должен жить год на нашей стороне, а не 24ч). Первый прогон после запуска продаж безвозвратно снёс бы оплаченное. Делается ДО платёжного кода, которого в этом PR нет: - migration 234: колонка trade_in_estimates.retain_until (NULL = неоплачено, бэкенд-бита-в-бит не меняется) + частичный индекс под purge-предикат. - config.py: trade_in_paid_retention_days=365 (ENV) — единственный источник "12 месяцев" для будущей оферты/экрана/SQL продления. - Единый гейт чтения ESTIMATE_READABLE_SQL + estimate_readable() — раньше SQL-фильтр (404) и Python-проверка (410) в trade_in.py уже разошлись по тексту ответа; текст "estimate expired (24h TTL)" убран (стал бы ложью при годовом хранении). - purge_expired_trade_in_data: retain_until IS NULL (не < NOW() — оплаченное не удаляем в принципе) + NOT EXISTS(payments) как независимая страховка + pre-flight, который считает оплаченных кандидатов и падает в mark_failed ДО первого батча при ненулевом результате. - PDF: "Ссылка доступна до …" только при retain_until IS NOT NULL; "ДЕЙСТВИТЕЛЕН ДО" (expires_at, актуальность расчёта) не тронут. - Фронт: retain_until прокинут в mapper (validUntil остаётся на expires_at). - privacy-страница: убрано устаревшее "механизма удаления нет" (неправда после #2547), добавлен срок 12 месяцев для оплаченных отчётов. Ни строчки платёжного кода. expires_at, trade_in_estimate_retention_hours, _DELETE_EXPIRED_LEADS_SQL не тронуты.	2026-08-06 21:48:06 +03:00
lekss361	ac870b0c58	fix(ptica): скраб ПДн перед отправкой в мониторинг + честная подпись НДС в отчётах (#2457) (#2749) ... PII scrub wired to BOTH channels (before_send AND before_send_transaction) in app/main.py and app/workers/celery_app.py. Before: Celery had no before_send at all, and before_send_transaction was URL-only while glitchtip_traces_sample_rate defaults to 0.05 - the Starlette integration puts request.data on transaction scope exactly as on error scope, so lead bodies leaked through the transaction channel. Keys: full MERA set (client_name/client_phone/client_email/phone/email/name) plus company/message from PilotRequestInput. VAT label: 'NDS (parking)' -> 'NDS (parking + commercial)' in DOCX/HTML exporters - financial.py computes VAT over parking AND non-residential.	2026-08-06 18:47:35 +00:00
lekss361	0535fa209a	chore(tradein/db): уборка временных таблиц, дублей индексов и звёздочки в v_data_quality (#2746) ... Миграции 222 (DROP 2 tmp-таблиц + 5 строгих дублей индексов + v_data_quality с явным списком колонок) и 225 (CREATE INDEX CONCURRENTLY под FK listing_source_snapshots.run_id). Проверено на прод-БД в BEGIN…ROLLBACK и на чистой схеме (полный bootstrap 225 миграций в одноразовом контейнере).	2026-08-06 18:27:39 +00:00
bot-backend	2496670859	fix(tests): объявить 4 live-DB проверки приватности в skip_allowlist (#2750)	2026-08-06 18:20:04 +00:00
lekss361	d3d7464267	fix(tradein/deploy): скрапер пересобирается вместе с бэкендом + сверка образов после деплоя (#2679) (#2680)	2026-08-06 17:53:30 +00:00
bot-backend	eb98852ddf	ci: пропуск теста обязан назвать себя — иначе прогон красный (#2745)	2026-08-06 17:52:56 +00:00
lekss361	d87c9fa191	Merge pull request 'feat(mera/b2c): правовая рамка — согласие до сохранения, удаление по сроку и по запросу — этап 4 из 8' (#2547) from feat/mera-b2c-privacy into main ... Deep review APPROVE (deep-code-reviewer, 2026-08-06). HIGH закрыт: purge trade_in_estimates ограничен `created_by IS NULL` — 129 B2C-строк под удаление, 911 пилотских защищены (сверено на проде: 1040 просрочено всего). MEDIUM закрыт: телефон в erase_person_data сравнивается по каноническому РФ-виду с обеих сторон (8→7 при 11 цифрах, без усечения до последних 10). Проверено: миграции 229/231 прогнаны на прод-схеме в BEGIN…ROLLBACK, тело дважды — идемпотентны; CHECK consent отбивает false; NN свободны на main и в открытых PR; consent-гейт недостижим для B2B (session-cookie инжектит X-Authenticated-User); адрес не попадает в БД раньше согласия ни одним путём. Гейт: CI Trade-In / backend-tests success 3m9s на 4ee4d4b8.	2026-08-06 17:04:27 +00:00