PharmaDataLab

Парсинг цен с сайтов аптечных сетей: архитектура решения Недавно я писал, что получил диплом Data Engineer, сегодня хочу рассказать про дипломную работу, в частности про архитектуру моего решения. Ниже распишу пайплайн и выложу частичный код, вы можете переиспользовать его и создать собственное приложение. Тема была: парсинг цен с сайтов аптечных сетей Основная идея - это собирать цены по определённому скоупу номенклатуры предоставляя доступ к данным в дашборде со свободным доступом. Изначально...

Всем привет. В эту субботу стартует 2-й поток моего авторского курса в Нетологии. Курс называется: Data Science в медицине - анализ медицинских данных По сути это экстеншн основной программы по DS. В рамках моего блока будут вебинары по следующим темам: 1️⃣ Обзор медицины в сфере Data Science 2️⃣ Онлайн и оффлайн-торговля медицинским ассортиментом, роль онлайн-аптек и маркетплейсов 3️⃣ Государственный сегмент (МДЛП, ЕМИАС, госзакупки, клинические рекомендации) 4️⃣ Работа с табличными медицинскими...

Долгожданная ачивка подъехала 🔥 Диплом по курсу "Дата инженер". Начиная с 2019 года я учился в совокупности 3 года. ⭐️ 2019 - Data Science (1 год) ⭐️ 2020 - Web analysis (0.5 года) ⭐️ 2025 - Data Engineer (1.5 года) Не то, чтобы я понтуюсь, вы не подумайте, просто на дистанции вижу огромный профит от пройденного образования. Из примечательного на этом курсе было: - Продвинутый SQL - Python для анализа данных (numpy, pandas) - Tableau - Data Lake & Hadoop (hdfs, mapreduce, yarn, pig, hive,...

Ценовой Индекс Пааше и Ласпейреса Несколько месяцев назад от бизнеса прилетела задача сделать дашборд для анализа цен с помощью этих индексов. Не самые очевидные показатели, возможно вы слышите о них впервые. Тем не менее это интересные метрики, о них сегодняшняя публикация. Индекс Пааше – характеризует изменение цен за определённый период времени, отвечающий на вопрос: насколько товары в текущем периоде стали дороже (дешевле), чем в предыдущем, назван по имени предложившего его немецкого статистика, экономиста и политика Германа Пааше (1851–1925)...

Data-Informed культура: почему она упирается не в технологии, а в людей В недавнем разговоре с коммерческим директором одной фармкомпании я с энтузиазмом рассказывал о возможностях аналитики: как с помощью данных о пользователях можно детально сегментировать аудиторию, предсказывать спрос, оценивать эффективность каналов и в итоге - принимать гораздо более эффективные стратегические решения. Построить по-настоящему data-informed компанию. Следом последовал вопрос, поставивший меня в тупик: «А зачем?» И этот вопрос, как ни странно, оказался самым показательным. Он не про любопытство. Он - про отсутствие запроса...