Встановлюємо та налаштовуємо ТОР

ТОР – це браузер, який містить вбудовані налаштування проксі-серверів, що гарантують анонімність користувачів в мережі. Його функціонал допомагає обійти різні блокування. Що важливо – абсолютно безкоштовно. Отже, приступимо. 1. Скачайте ТОР з офіційного сайт https://www.torproject.org/ і встановіть на комп’ютер як звичайну програму. 2. Якщо браузер встановлений – переконайтеся що використовуєте останню версію. Її можна подивитися тут: Menu-Help-About Tor Browser
Підключення багатопотокового парсинга в Key Collector через браузер ТОР Підключення багатопотокового парсинга в Key Collector через браузер ТОР Підключення багатопотокового парсинга в Key Collector через браузер ТОР   3. Запустіть браузер і переконайтеся що його не блокує антивірус або фаєрвол, і у вашого профілю досить прав на його використання. Якщо проблеми є, додайте програму в виключення за інструкцією вашого антивіруса.    Підключення багатопотокового парсинга в Key Collector через браузер ТОР  

Підключення ТОР до Key Collector

  4. Завантажуємо додаткову програму, яка яка при відкритому браузері ТОР формує необхідну кількість кількість проксі адрес. В архіві ви знайдете4 файла:

  1. launch – файл запуску проксі сервісу.
  2. stop – зупиняє проксі. 
  3. proxyList – список проксі які будемо использовать. Файл створюється після запуску проксі.
  4. TestProject.xmlz – демонстраціонний проект який показує процес роботи з проксі.

Нас в першу чергу цікавить кількість потоків проксі. Його можна відредагувати в першому рядку файлу launch. Відкриваємо його будь-яким текстовим редактором і прописуємо необхідну кількість потоків.
Підключення багатопотокового парсинга в Key Collector через браузер ТОР Кількість потоків обмежена лише можливостями вашого ПК і пропускною спроможністю вашого інтернету. Але для початку краще не перевищувати 15 потоків, зазвичай цього достатньо. У другому рядку цього файлу можна отримати проксі конкретної країни, якщо це необхідно. Після внесення правок зберігаємо файл. 5. Запускаємо файл launch. 6. У папці з програмою повинен з’явиться файл з адресами проксі proxyList. При цьому в диспетчері завдань повинні з’явиться процеси TOР, рівні кількості потоків, прописаних в файлі launch.
Підключення багатопотокового парсинга в Key Collector через браузер ТОР

Налаштування Key Collector

7. Переходимо в налаштування Key Collector на вкладку “Мережа” і ставимо позначку “Використовувати проксі сервери” і вибираємо тип проксі “SOCKS5”:
Підключення багатопотокового парсинга в Key Collector через браузер ТОР   8. Натискаємо “завантажити з файлу” і вказуємо шлях до файлу з проксі proxyList.    Підключення багатопотокового парсинга в Key Collector через браузер ТОР   Потім бажано перевірити працездатність проксі: зелені будуть допущені до парсингу. 9. Додатково виставляємо в Key Collector такі настройки: Для парсинга Яндекс Вордстат виставляємо кількість потоків менше, ніж кількість робочих акаунтів Яндекс Директ, які ми використовуємо для парсинга.Підключення багатопотокового парсинга в Key Collector через браузер ТОР Підключення багатопотокового парсинга в Key Collector через браузер ТОР Підключення багатопотокового парсинга в Key Collector через браузер ТОР Підключення багатопотокового парсинга в Key Collector через браузер ТОР От і все. Key Collector налаштований на багато-парсинг і готовий до роботи.