Вот ссылки на статьи и ролики моего канала Old Programmer. А здесь все ссылки на мои материалы по языку Python. Обзор моего канала здесь. Сегодня говорим об очень полезном модуле языка Python urllib.parse, который позволяет легко управляться со структурой url (url = Uniform Resource Locator, система унифицированных адресов электронных ресурсов). Python...

Оказывается, что существует несколько библиотек для выполения HTTP запросов на Python. Это может запутать тех, кто впервые начинает работать с этими функциями. Давайте разберемся.  Жил-был встроенный модуль urllib в Python 2.x. Вышел Python 3 и эту библиотеку разбили на модули urllib.request, urllib.error, urllib.parse. А для ветки Python 2 ее переимевали в urllib2. При этом urllib (без цифр) есть и Python 3, и в Python 2. Итого: 👉 urllib - встроенная библиотека для открытия URL ссылок (преимущественно HTTP запросов)...

bash pip install requests beautifulsoup4 selenium scrapy lxml python import requests from bs4 import BeautifulSoup import time # Базовый парсинг с заголовками headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36' } try: response = requests.get('https://example.com', headers=headers, timeout=10) response.raise_for_status() # Проверка на ошибки soup = BeautifulSoup(response.text, 'html.parser') # Поиск элементов titles = soup.find_all('h1') links = soup.find_all('a', class_='some-class') text = soup.find('div', id='content')...

Доброго времени суток, читатели, зрители моего канала programmer's notes. Не забывайте подписываться и писать свои комментарии к моим статьям и видео. Модули библиотеки urlib Библиотека urlib очень полезная, если собрались писать программу, которая работает с интернет-ресурсами. В ней есть несколько полезных модулей. Сегодня, сильно не углубляясь, я сделаю такой не большой обзор. Ну, а далее в следующих статьях я остановлюсь на них подробнее. Кроме того, в сущности я начинаю целую подборку по программированию в сети Интернет...