Найти в Дзене
Парсинг цен с сайтов аптечных сетей: архитектура решения
Парсинг цен с сайтов аптечных сетей: архитектура решения Недавно я писал, что получил диплом Data Engineer, сегодня хочу рассказать про дипломную работу, в частности про архитектуру моего решения. Ниже распишу пайплайн и выложу частичный код, вы можете переиспользовать его и создать собственное приложение. Тема была: парсинг цен с сайтов аптечных сетей Основная идея - это собирать цены по определённому скоупу номенклатуры предоставляя доступ к данным в дашборде со свободным доступом. Изначально...
1 неделю назад
Всем привет
Всем привет. В эту субботу стартует 2-й поток моего авторского курса в Нетологии. Курс называется: Data Science в медицине - анализ медицинских данных По сути это экстеншн основной программы по DS. В рамках моего блока будут вебинары по следующим темам: 1️⃣ Обзор медицины в сфере Data Science 2️⃣ Онлайн и оффлайн-торговля медицинским ассортиментом, роль онлайн-аптек и маркетплейсов 3️⃣ Государственный сегмент (МДЛП, ЕМИАС, госзакупки, клинические рекомендации) 4️⃣ Работа с табличными медицинскими...
3 недели назад
Долгожданная ачивка подъехала
Долгожданная ачивка подъехала 🔥 Диплом по курсу "Дата инженер". Начиная с 2019 года я учился в совокупности 3 года. ⭐️ 2019 - Data Science (1 год) ⭐️ 2020 - Web analysis (0.5 года) ⭐️ 2025 - Data Engineer (1.5 года) Не то, чтобы я понтуюсь, вы не подумайте, просто на дистанции вижу огромный профит от пройденного образования. Из примечательного на этом курсе было: - Продвинутый SQL - Python для анализа данных (numpy, pandas) - Tableau - Data Lake & Hadoop (hdfs, mapreduce, yarn, pig, hive,...
1 месяц назад
Ценовой Индекс Пааше и Ласпейреса
Ценовой Индекс Пааше и Ласпейреса Несколько месяцев назад от бизнеса прилетела задача сделать дашборд для анализа цен с помощью этих индексов. Не самые очевидные показатели, возможно вы слышите о них впервые. Тем не менее это интересные метрики, о них сегодняшняя публикация. Индекс Пааше – характеризует изменение цен за определённый период времени, отвечающий на вопрос: насколько товары в текущем периоде стали дороже (дешевле), чем в предыдущем, назван по имени предложившего его немецкого статистика, экономиста и политика Германа Пааше (1851–1925)...
1 месяц назад
Data-Informed культура: почему она упирается не в технологии, а в людей
Data-Informed культура: почему она упирается не в технологии, а в людей В недавнем разговоре с коммерческим директором одной фармкомпании я с энтузиазмом рассказывал о возможностях аналитики: как с помощью данных о пользователях можно детально сегментировать аудиторию, предсказывать спрос, оценивать эффективность каналов и в итоге - принимать гораздо более эффективные стратегические решения. Построить по-настоящему data-informed компанию. Следом последовал вопрос, поставивший меня в тупик: «А зачем?» И этот вопрос, как ни странно, оказался самым показательным. Он не про любопытство. Он - про отсутствие запроса...
1 месяц назад
🔥 Топ-10 фишек, которые делают дашборд по-настоящему классным
🔥 Топ-10 фишек, которые делают дашборд по-настоящему классным В одной из предыдущих публикациях я разбирал частые ошибки в дашбордах. Сегодня - антипод: как делать правильно. Делюсь своим опытом и лайфхаками, которые выжили в боях с реальными задачами в фарме и не только. Здесь нет воды - только то, что реально влияет на эффективность. 1. Данные - это всё. Без компромиссов Кривые данные = ложные выводы. Особенно в фарме, где цена ошибки высока. Мой принцип: прежде чем браться за визуализацию, я всегда проверяю ETL, сверяю метрики с источником и договариваюсь с бизнесом о формулах расчёта. Иначе всё - красивая картинка с неправильными цифрами...
2 месяца назад
На прошлой неделе прошла встреча: «DrivenPharma: роль аналитических технологий», на которой я намазывал рассуждал на тему: hard skills
На прошлой неделе прошла встреча: «DrivenPharma: роль аналитических технологий», на которой я намазывал рассуждал на тему: hard skills & soft skill (да-да, именно один soft skill, а не skills) современного аналитика в фарме. Так как времени всегда на подобных митингах в обрез, не разгуляешься и какие-то мысли могли остаться за кадром, плюс не все из вас там были, то я хочу в этой публикации напомнить о чем была речь. Для начала я напомнил, что такое "информационная система", и почему именно такой подход к развитию аналитики в фарме является единственным жизнеспособным и эффективным. Напомню,...
2 месяца назад
Всем привет
Всем привет ✌️ 5 августа 13:00 (начало в 12:00) буду рассказывать про hard и soft skills аналитиков в фарме. Обсудим зачем нам python, какой уровень sql требуется, чтобы развивать аналитику, как "информационную систему", зачем уметь писать кастомные контейнеры в докере и зачем нужна grafana. А также скажу,...
2 месяца назад
Всем привет
Всем привет ✌️ SFE Академия 05.08 проводит онлайн встречу «DrivenPharma: роль аналитических технологий». Есть возможность участия спикером - многим в этом канале точно есть чем поделиться. Для участия напишите, плз, @gordeeva_iulia Ниже темы (можно высказываться по одной из них/предложить свою)...
2 месяца назад
Ранее публиковал видео обзор на этот инструмент от RNC по аудиту рынка, теперь вот вышло интересное интервью коллег для ФармАналитики
Ранее публиковал видео обзор на этот инструмент от RNC по аудиту рынка, теперь вот вышло интересное интервью коллег для ФармАналитики.
3 месяца назад
Всем, привет
Всем, привет ✌️ Чуть менее недели назад мы провели PharmaDataMeeting №2. Было порядка 15 человек в онлайне, а также много вопросов, растём 😀 Темы спикеров были актуальные и интересные, от фармы был я, остальные два спикера представляли бигтех компании не из фармы и было очень интересно послушать, как работают с данными в таких компаниях. Отмечу, к сожалению записи встречи не будет, так как на наш митинг налетели боты, пришлось менять комнату и сделать нормальную запись не получилось, опять же повод приходить на стрим в онлайн, а не ждать запись 😆 Поэтому, хочу текстом написать кратко и тезисно тему своей презентации...
3 месяца назад