Не успели мы поговорить и о базовых вещах в сфере комплаенс, как я уже знакомлю вас с новостями из мира бизнес-безопасности и управления рисками. Впрочем, может оно и к лучшему?;) Однако, начну немного издалека...

3 июня 2024 года вышел предварительный релиз Apache Spark 4.0. Эта версия еще не считается стабильной и предназначена только для ознакомления. Поэтому даже полноценные release notes по ней пока отсутствуют. Тем не менее, сегодня познакомимся с наиболее интересными фичами этого выпуска: новый тип данных VARIANT, API источника данных Python и логи в формате JSON. В Apache Spark 4.0 добавлено множество новых интересных функций, включая режим ANSI по умолчанию, источник данных Python, полиморфный Python...