Big Data Expert Mode: митап для опытных инженеров
43Tech совместно с Яндекс глубоко погрузятся во все технические аспекты Apache Spark и Apache Iceberg и расскажут подробнее о том, как Spark работает в YTsaurus.
Ведущие дата инженеры представят практические кейсы и экспертные решения по работе с большими данными.
В программе митапа:
• Оптимизация SQL-запросов: как Catalyst использует статистику Iceberg и какие типы оптимизаций существуют.
• Переход с партицированного Parquet: опыт внедрения Iceberg для борьбы с дублированием данных и компакцией, а также инкрементальное чтение данных в Spark Structured Streaming.
• Интеграция Spark в YTsaurus: особенности работы в сравнении с Hadoop и S3
Присоединяйтесь к BigData Meetup 15 августа в Санкт-Петербурге и онлайн.
Участие бесплатное, необходима регистрация.
Это #партнёрский пост
