106 подписчиков
🔎 yagooglesearch
библиотека Python для выполнения интеллектуальных, реалистичных и настраиваемых поисковых запросов Google. Имитирует реальное поведение человека при поиске в Google, дабы предотвратить ограничение скорости или бан от Google.
Умеет:
📌 Возвращает список найденных URL адресов
📌 Рандомно ставит паузу между запросами
📌 Поддерживает proxy и cookie
📌 Подставляет рандомный user-agent и много чего интересного
Пример использования:
import yagooglesearch
query = "site:github.com"
client = yagooglesearch.SearchClient(
query,
tbs="li:1",
max_search_result_urls_to_return=100,
http_429_cool_off_time_in_minutes=45,
http_429_cool_off_factor=1.5,
# proxy="socks5h://127.0.0.1:9050",
verbosity=5,
verbose_output=True, # False (only URLs) or True (rank, title, description, and URL)
)
client.assign_random_user_agent()
urls = client.search()
len(urls)
for url in urls:
print(url)
⚙️ GitHub
#python #soft #github
Около минуты
17 сентября 2022