Big Data Technologies. Лекция 2. Архитектура BigData-систем.
MPP-движок для Big Data: архитектура и принципы работы Trino
Как с помощью SQL-запросов анализировать огромные объемы данных из множества источников в реальном времени без их фактического копирования. Архитектура и принципы работы MPP-движка Trino. Массово-параллельная архитектура (MPP, Massively Parallel Processing) с разделяемой памятью, когда система состоит из отдельных узлов, которые вместе выполняют одну задачу, довольно часто встречается в технологиях стека Big Data. Например, этот подход реализован в Greenplum и ClickHouse, что мы разбирали здесь. Такая архитектура особенно хороша для OLAP-сценариев, т...
Биг Дата - Big Data ◄ что это (простыми словами)
Всем привет! Многие уже слышали словосочетание "биг дата", но не все понимают, что это такое. Иногда без технического образования сложно разобраться и вникнуть в суть подобных вещей. Но многие сложные вещи можно объяснить простыми словами на простом примере. Помогут нам в этом - пирожные с начинкой. Пироги с биг датой Представьте, что вы хотите приготовить огромное количество пирогов для вечеринки. Вы знаете, что ваши друзья любят разные вкусы пирогов, но вы не уверены, какие точно им больше всего нравятся...