Массовый парсер текстов с URL (Ускоренный) BETA

Асинхронная BETA: параллельная загрузка с автоматическим разносом запросов по доменам. Логи — в Celery worker.
Загрузите XLSX со столбцами «Запрос» и «URL» — на выходе ZIP с:
  • /full/ — полные тексты страниц
  • /selected/ — сокращённая версия по ключевым тегам
  • result.xlsx — статистика по каждому запросу
Файл должен содержать столбцы с запросами и URL
Выберите столбец Excel (A, B, C и т.д.)
Выберите столбец Excel (A, B, C и т.д.)
К обычной версии

Доступ ограничен

Этот инструмент доступен только авторизованным пользователям с активной подпиской.

Оформить подписку (1 500 руб./мес) можно через личные сообщения:

Связь:
Войти в аккаунт Зарегистрироваться

Как работает ускорение

  • URL распределяются по доменам с максимальным интервалом между запросами к одному домену
  • До 12 параллельных потоков с автоматическими повторами и паузами
  • Повторяющиеся URL не скачиваются повторно (кеш)
Файл без заголовков — первая строка = данные. При 4XX/5XX домен переносится в конец очереди.