Всем привет, если вы искали, как можно добывать приватные и рабочие прокси, тогда эта статья для вас.
Предисловие: Ещё недавно я облазил весь интернет, в поисках рабочих и безопасных способов, сегодня я опишу один из них.
Для начала, нам понадобятся рабочие прокси, их мы можем найти в списке, который я закреплю.
Список сайтов
http://www.proxy50-50.blogspot.com
http://fresh-proxies.blogspot.com
http://proxiesi.blogspot.com
http://www.live-socks.net
http://best-proxy-list-ips.blogspot.com
http://proxy.ucoz.com
http://dynamic-marketing.blogspot.com
http://fresh-proxies-list.blogspot.com
http://freshproxie4u.blogspot.com
http://www.techgranth.com
http://bestproxy.narod.ru
http://en.proxy.net.pl
http://mindjetlabs.blogspot.com
https://www.socks-proxy.net
https://api.proxyscrape.com/?request=getproxies&proxytype=socks5&timeout=10000&country=all
https://www.mensjournal.com
http://www.free-fresh-proxy-daily.blogspot.com
http://www.sslproxies24.top
http://check-proxylist.blogspot.be
http://proxyday.blogspot.com
http://freeproxy-all.blogspot.com
http://discoremoto.cheapnet.it
http://feeds.feedburner.com
https://www.npmjs.com
http://dailyproxylistfree.blogspot.com
http://proxypremium.blogspot.com
http://www.awmproxy.net
http://proxy-ip-list.com
http://proxy.net.pl
http://stealthproxy.org
И т.д
Теперь нам нужно проверить их на валид, я буду использовать "unfx-proxy-checker". По моему мнению это лучший чекер проксей(могу ошибаться).
VirusTotal
Заходим в программу
Интерфейс
Теперь нам нужно проверить наши прокси на валид.
Выставляем нужные нам настройки(потоки выкручиваем на максимум, таймаут и количество попыток по желанию. Выбираем тип наших проксей, я буду проверять Socks4)
Загружаем прокси из файла и нажимаем Check
Ждём пока проверятся наши судьи прокси
Началась проверка наших прокси
Затем жмём кнопку Export чтобы сохранить наши прокси
Теперь у нас есть прокси Socks4, следующим нашим действием будет поиск прокси сайтов, на которых побывали наши проокси, чтобы спарсить ещё больше прокси и проверить на валид.
Дальше нам потребуется парсер ссылок по запросам, я буду использовать YaGo Parser v4.3 By CyberBro - [Cracked By PC-RET]
VT на архив
Интерфейс
Затем нам необходимо вписать наши "Ключевые слова(Keywords)" туда мы будем вписывать наши прокси, которые мы проверили на валид.
Выставляем нужные нам настройки, а именно поисковую систему(желательно Google),прокси и ядра.
В качестве проксей можем использовать те, которые проверили на валид.
Жмём кнопку Start Parsing
Парсер начал свою работу
UPD: Желательно поставьте в этом пункте галочку, если у вас не будут парсится ссылки, попробуйте новые прокси(лучше всего подходят HTTPS)
Начался сбор ссылок
Чем больше ждём, тем больше ссылок, следовательно проксей.
Я не стал дожидаться конца работы программы и остановил на том моменте, когда набралось почти 3к ссылок
У нас создался текстовый документ, в котором находятся ссылки
Дальше нам нужно отсортировать битые ссылки.
Заходим в Notepad++
Жмём ctrl+f, у нас открывается поиск, заходим во вкладку пометки
Ставим галочку напротив пункта "Помечать Закладкой"
Далее смотрим на ссылки которые есть в нашем документе.
*Красной обводкой помечен мусор
Чтобы от него избавиться, вписываем что-то общее между ссылками.
В нашем случае, это слово Search. Жмём кнопку пометить всё.
Дальше удалим ссылки гугла. После того, как мы пометили мусорные ссылки, заходим во вкладку поиск, закладки, удалить все строки с закладкой.
Отлично! Мы удалили мусор(не весь конечно, но парсеру проксей уже будет легче). Теперь нам необходимо спарсить эти прокси.
В качестве парсера проксей я буду использовать софт, который называется unfx-proxy-parser.
VT
Интерфейс
Выставляем мои настройки
Следующим действием, необходимо вставить наши ссылки и нажать кнопку Parse
Начался парс проксей
Когда процесс закончится, вы увидите это
Это значит, что мы спарсили 480к прокси. Дальше нужно их сохранить, жмём на кнопку сохранения(дискету).
Ждём пока появиться файл там, где мы сохраняли прокси.
Ну всё, теперь нам нужно только проверить эти прокси.
Заходим в самую первую программу. Повторяем те же действия и ждём.
В итоге мы получаем прокси
В среднем можно получить около 3-х к, но это не точно.
Ну вот и закончился мой туториал, если он кому-то зайдёт, то я попробую написать ещё статью на эту тему, но получить уже будет сложнее.
Всем удачи, всем пока.