219 читали · 5 лет назад
Как ускорить парсинг дат в Python
Оказывается, можно значительно ускорить парсинг дат в Python! Давайте разбираться. Итак, пусть для начала у нас имеется ~10 Мб файл где записаны даты в формате ГГГГММДД, каждая с новой строки. Нужно считать их все и перевести в тип datetime.datetime. Давайте начнем с самого простого и изящного способа: И этот код работает за 22,5 секунды на моей машине. Его проблема в том, что strptime слишком "умный". Он каждый раз готовиться к тому, что дата будет в новом формате, каждый раз думает как проинтерпретировать цифры...
🐍 Парсинг данных с сайтов на Python — просто, быстро, эффективно с ИИ-промптом
🐍 Парсинг данных с сайтов на Python — просто, быстро, эффективно с ИИ-промптом! Нужно собрать информацию с сайта или автоматизировать рутинную работу? Промпт “Скрипт для парсинга данных с сайта на Python” — это твой надёжный помощник для создания гибких и удобных скриптов под любые задачи! ✨ Что умеет этот промпт: — Генерирует рабочие скрипты для сбора данных с любых сайтов на Python — Помогает структурировать результаты в таблицы, базы данных или Google Sheets — Учитывает ограничения и защищённость...