Использование API — один из тех «магических» навыков, которые открывают мир новых возможностей, а Python — отличный инструмент, чтобы таким навыком овладеть. Материал представляет собой незначительно сокращенный перевод публикации Педро Прегейру Python & APIs: A Winning Combo for Reading Public Data. Перевод также адаптирован в виде блокнота Jupyter. Многие ежедневно используемые приложения и системы имеют свой API. От очень простых и обыденных вещей, таких как проверка погоды по утрам, до более захватывающих, вроде лент Instagram, TikTok или Twitter...
Веб-парсинг (web scraping) утвердился в качестве одного из ключевых инструментов для сбора и анализа больших данных (Big Data) в современной цифровой экономике. Эта технология, заключающаяся в автоматизированном извлечении информации с веб-сайтов, находит применение в широком спектре областей: от бизнес-аналитики и академических исследований до обучения моделей машинного обучения и мониторинга рыночной конъюнктуры.1 В российском сегменте интернета одной из наиболее ценных и востребованных платформ для сбора данных является Avito. Avito, будучи крупнейшим классифайдом в России, представляет собой...