omni-parse

providers

vault ключей + мост abuse-radar + китайские источники: всё в одном реестре

2026-10-26 23:31:37 +03:00

__init__.py

omni-parse: 12 провайдеров, sqlite+fts5, simhash-дедуп, фильтр релевантности

2026-10-25 13:16:56 +03:00

__main__.py

omni-parse: 12 провайдеров, sqlite+fts5, simhash-дедуп, фильтр релевантности

2026-10-25 13:16:56 +03:00

abuse_sources.py

дарк-форумы + cookie-проход CF + opt_in радара в обходе

2026-10-26 23:39:47 +03:00

abuse.py

abuse: схлопывание перепечаток (sig в индексе, uniq в API), кэш выдачи 60с; scan 13с -> 1.5с

2026-10-27 03:43:42 +03:00

ai.py

fix: 10 пунктов ревью — /run (кортеж store.add), валидация limit/offset в панели, close() соединений SQLite, троттлинг под локом, read-only бот без OMNI_BOT_OWNERS, eviction JOBS, push_new отдаёт свежие записи, ai.py не спит после последней попытки, дедуп реестра, подключён abuse-реестр (+191 источник); tests/test_regress.py 16 проверок + CI py3.10-3.12

2026-10-26 20:15:50 +03:00

bot.py

feat(bot): /tag и /типы — счётчики типов и топ по типу, доступны в read-only режиме; тест (20 passed)

2026-10-26 21:13:18 +03:00

cli.py

реестр: дедуп источников строго по url (2 падавших теста зелёные); инкрементальный abuse-индекс + tgsearch из предыдущей сессии

2026-10-27 01:09:30 +03:00

config.py

tg-сессия в комбайне + панель: ключи/сессия в шапке + фикс пустого radar_sources

2026-10-27 00:15:06 +03:00

dates.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

discover.py

omni: абузы (31 живой источник + классификатор), авто-добавление фидов, Telegram-бот, вкладка абузов; 589 источников

2026-10-26 12:25:24 +03:00

doctor.py

feat: типизация записей (14 типов, до 3 на запись), чипы и бейджи типов в панели, CSV с типами, /api/types, doctor --only по категориям, волны источников 5-6 (635 всего)

2026-10-26 19:01:45 +03:00

feeds.py

fix: preserve short release titles and cover source generation contracts

2026-10-27 02:09:37 +03:00

filter.py

omni-parse: 12 провайдеров, sqlite+fts5, simhash-дедуп, фильтр релевантности

2026-10-25 13:16:56 +03:00

model.py

omni-parse: 12 провайдеров, sqlite+fts5, simhash-дедуп, фильтр релевантности

2026-10-25 13:16:56 +03:00

net.py

vault ключей + мост abuse-radar + китайские источники: всё в одном реестре

2026-10-26 23:31:37 +03:00

panel_api.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

rank.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

serve.py

ui: локальный Tabler dashboard + 150 проверенных TG-источников и probe 595 каналов

2026-10-27 02:54:29 +03:00

source_state.py

fix: 10 пунктов ревью — /run (кортеж store.add), валидация limit/offset в панели, close() соединений SQLite, троттлинг под локом, read-only бот без OMNI_BOT_OWNERS, eviction JOBS, push_new отдаёт свежие записи, ai.py не спит после последней попытки, дедуп реестра, подключён abuse-реестр (+191 источник); tests/test_regress.py 16 проверок + CI py3.10-3.12

2026-10-26 20:15:50 +03:00

sources_abuse.py

абузы: extract промокодов/сумм/ссылок в API и панели, +16 проверенных источников (TG/reddit/discourse/RSS/github/HN), чистка HTML в деталях, клэмп days

2026-10-27 01:50:05 +03:00

sources_cn.py

vault ключей + мост abuse-radar + китайские источники: всё в одном реестре

2026-10-26 23:31:37 +03:00

sources_dark.py

дарк-форумы + cookie-проход CF + opt_in радара в обходе

2026-10-26 23:39:47 +03:00

sources_ext2.py

omni: редизайн панели + 450 источников (341 живых), health-аудит, чистка html/дат, per-source учёт

2026-10-26 09:41:04 +03:00

sources_ext3.py

omni: абузы (31 живой источник + классификатор), авто-добавление фидов, Telegram-бот, вкладка абузов; 589 источников

2026-10-26 12:25:24 +03:00

sources_ext4.py

feat: типизация записей (14 типов, до 3 на запись), чипы и бейджи типов в панели, CSV с типами, /api/types, doctor --only по категориям, волны источников 5-6 (635 всего)

2026-10-26 19:01:45 +03:00

sources_ext5.py

feat: типизация записей (14 типов, до 3 на запись), чипы и бейджи типов в панели, CSV с типами, /api/types, doctor --only по категориям, волны источников 5-6 (635 всего)

2026-10-26 19:01:45 +03:00

sources_ext.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

sources_fresh.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

sources_quality.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

sources_tg_abuse.py

ui: локальный Tabler dashboard + 150 проверенных TG-источников и probe 595 каналов

2026-10-27 02:54:29 +03:00

sources_x.py

feat(x): парсинг X через api.fxtwitter.com — 30 живых хендлов как источники, адаптер x_user, полный текст твитов, метрики; старый syndication-путь (429) убран

2026-10-26 19:33:35 +03:00

sources.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

store.py

абузы: free-панели new-api на вкладке (роут /api/panels + грид), CSS вынесен из JS, панельный классификатор даёт freeapi-вес, тесты

2026-10-27 02:06:32 +03:00

taxonomy.py

feat: типизация записей (14 типов, до 3 на запись), чипы и бейджи типов в панели, CSV с типами, /api/types, doctor --only по категориям, волны источников 5-6 (635 всего)

2026-10-26 19:01:45 +03:00

tgsess.py

abuse: полный пересчёт индекса только по явному вызову (env не тормозит scan)

2026-10-27 01:21:01 +03:00

vault.py

vault ключей + мост abuse-radar + китайские источники: всё в одном реестре

2026-10-26 23:31:37 +03:00