🔥 Полезные библиотеки Python

yagooglesearch — библиотека Python для выполнения интеллектуальных, реалистичных и настраиваемых поисковых запросов Google. Имитирует реальное поведение человека при поиске в Google, дабы предотвратить ограничение скорости или бан от Google.

Умеет:
🌵 Возвращает список найденных URL адресов
🌵 Рандомно ставит паузу между запросами
🌵 Поддерживает proxy и cookie
🌵 Подставляет рандомный user-agent и много чего интересного

Пример использования:

import yagooglesearch
query = "site:github.com"

client = yagooglesearch.SearchClient(
    query,
    tbs="li:1",
    max_search_result_urls_to_return=100,
    http_429_cool_off_time_in_minutes=45,
    http_429_cool_off_factor=1.5,
    # proxy="socks5h://127.0.0.1:9050",
    verbosity=5,
    verbose_output=True,  # False (only URLs) or True (rank, title, description, and URL)
)
client.assign_random_user_agent()

urls = client.search()
len(urls)

for url in urls:
    print(url)

⚙️ GitHub/Инструкция

#python #soft #github

Читать полностью…