Источники и парсеры
Карта источников
Источники частично ограничены, но рабочий контур виден
Это не проверка в реальном времени, а операционный реестр: какие парсеры считаем доступными, какие деградировали, какие заблокированы и не должны ломать ожидания пользователя.
Как использовать.
Заблокированные источники не должны мешать обновлению одной кнопкой: они вынесены из ожиданий и отмечены явно.
перейти к обновлению →
Заблокированные источники не должны мешать обновлению одной кнопкой: они вынесены из ожиданий и отмечены явно.
перейти к обновлению →
20
источников
16
работают
1
деградировали
3
заблокированы
7
потоков
Статус источников
работает 16 · сбоит 1 · заблокировано 3
Источники по потокам
Что требует внимания
сбоят: e-disclosure.ru
заблокированы: Avito Работа, App Store отзывы, VK
Следующий контроль
После любого сбора данных нужна подтверждённая проверка качества. Для текущего состояния смотрите качество и покрытие таблиц.
Статусы — из КОНФИГУРАЦИИ (последнее известное состояние), не проверка в реальном времени. Эта страница парсеры не запускает (только просмотр); запуск сбора — отдельная страница обновления данных, закрытая владельцем и явным включением живого режима. Клик по заголовку — сортировка.
| статус | источник | код | поток | метод | ID | особенности |
|---|---|---|---|---|---|---|
| работает | Certificate Transparency | cert_transparency | action | CT-журналы | domain | новые поддомены банков |
| работает | hh.ru вакансии | hh_ru | action | HTML выдачи (по employer_id) | employer_id | в записи сохраняется время сбора, а не дата публикации: точную дату публикации сайт отдаёт только по авторизации. Источник ценен агрегатами найма, не датой отдельной вакансии |
| работает | zakupki.gov.ru | gov_procurement | action | HTML (по ИНН) | ИНН | госконтракты, реальные даты 2007-2026 |
| работает | EU sanctions (asset-freeze 269/2014) | sanctions (EU) | environment | XML (designationDate) | — | из десяти банков витрины в списке заморозки активов только ВТБ и Т-Банк; секторальные ограничения (833/2014) отложены — данные недоступны |
| работает | OFAC SDN (US) | sanctions (OFAC) | environment | SDN_ENHANCED.XML | — | даты включения в список берутся из расширенной выгрузки; прежний файл выгрузки больше недоступен |
| работает | UK OFSI | uk_ofsi | environment | CSV (ConList) | — | отбор по российскому режиму санкций, дубли снимаются по идентификатору группы |
| работает | ЦБ ставка / письма | cbr_ru | environment | HTML + RSS | — | ключевая ставка и информационные письма |
| работает | banki.ru рейтинги | banki_ratings | financial | HTML | slug | 10 из 10 банков, финансовая база проверки (5809 строк, 2018-2026) |
| работает | ЦБ панель ф.101/102 | cbr_panel (SOAP) | financial | SOAP | regnum | 50 банков; в данных разрыв январь 2022 — май 2023, до и после он собран по-разному (подробности — в разделе «Качество») |
| работает | Vedomosti / РБК | news_rss | migration | RSS | — | новостные сигналы о переходах клиентов (45 строк) |
| работает | Wordstat (Яндекс) | wordstat | search | Playwright (браузерная сессия с сохранёнными cookies) | query | 160 тысяч строк с 2018 года; запрос «Т-Банк» из-за дефиса сливался с посторонними запросами, поэтому банк исключён из поисковых сигналов — повторный сбор по прежнему названию ради одного банка не делаем |
| работает | Habr RSS | habr | talent | RSS | slug | 8 из 10 банков: у МКБ и Совкомбанка корпоративного блога нет — это отсутствие источника, а не пропуск в сборе |
| работает | Google Play отзывы | google_play | voice | API (google-play-scraper) | package | реальные даты 2022-2026; самый чистый источник отзывов (6000 строк) |
| работает | RuStore отзывы | rustore | voice | Playwright (JSON API отсутствует) | package | 136 строк получили дату-заглушку 2026-05-12 вместо исходной даты |
| работает | Sravni.ru отзывы | sravni | voice | HTML (аналог banki.ru) | slug | часть строк получила дату-заглушку вместо исходной даты |
| работает | banki.ru отзывы | banki_ru | voice | HTML-обход (Playwright) | slug | сайт с динамической защитой — сбор идёт браузерной сессией; 434 записи получили дату-заглушку 2026-05-12, исходные даты не сохранились и восстанавливаются только повторным сбором; раннюю историю досбирать обходом назад |
| сбоит | e-disclosure.ru | e_disclosure | action | Playwright (event.aspx-якорь) | company_id (верифицировать!) | 769 фактов по 4 эмитентам (Сбер/ВТБ/Совкомбанк/Т-Банк); по 6 из 10 банков раскрытие недоступно; идентификаторы компаний обязательно проверять — 7 из 9 непроверенных вели на чужие организации; в записях до исправления обезличивания ([seq:169]) ИНН эмитента мог быть замаскирован избыточно |
| заблокировано | Avito Работа | avito | action | — | — | автоматический сбор недоступен |
| заблокировано | App Store отзывы | app_store | voice | — | — | Apple с 2022 года удаляет приложения российских банков из-за санкций; приложения банков витрины удалены и не возвращались |
| заблокировано | VK | vk | voice | — | — | публичный интерфейс закрыт: сторонние страницы через него недоступны (окончательно, 2026-05-13) |