Инструменты

В этом репозитории будут собраны небольшие скрипты для работы

Парсинг

• collect_dealers_autoru

  • Собирает номера дилеров с карты auto.ru через devTool Console
  • Для работы укажите свой csrfToken и url
  • Так же, дополнительно, можно указать начальное деление на чанки (numLatSplits, numLonSplits) и максимальную глубину рекурсии (maxDepth)

• collect_promo_links

  • Собирает промо ссылки с поисковой выдачи яндекс
  • Автоматически собирает с нескольких страниц автоматически переходя по ним. Для изменения количества обрабатываемых страниц изменить переменную (MAX_PAGES_PER_QUERY)
  • Поддерживает переход по нескольким поисковым запросам указанным в (QUERIES)
  • Эта версия для расширения Tampermonkey для удобной кнопки "Скопировать" после сбора
  • Для запуска скрипта через Tampermonkey нужно разрешить выполнение пользовательских скриптов, путем включения режима разработчика browser://extensions/ (скопировать и вставить в поисковую строку)