Ливерморская национальная лаборатория имени Лоуренса (LLNL), IBM и Red Hat объединяют усилия для разработки передовых методов работы с системами высокопроизводительных вычислений (HPC) и облачными платформами. По словам специалистов LLNL, облачные технологии всё чаще задают тренды для вычислительных экосистем. Поэтому взаимодействие HPC и облаков уже назрело, и это позволит обеспечить устойчивость таких систем в принципе.
В соответствии с недавно подписанным меморандумом о взаимопонимании (MOU) исследователи намерены внедрить инфраструктуру планирования LLNL Flux в корпоративную платформу Kubernetes — Red Hat OpenShift. Это позволит HPC использовать облачные и контейнерные технологии, а также удовлетворить растущий спрос на ресурсоёмкие задачи.
Фреймворк для планирования Flux позволяет развёртывать новые типы ресурсов, планировщики и сервисы по мере развития центров обработки данных, включая переход на эксафлопсных мощности. Возможности и большие ресурсы Flux делает его вполне подходящим для облегчения оркестровки с использованием таких инструментов, как Red Hat OpenShift, на крупномасштабных кластерах HPC, которые, по прогнозам исследователей LLNL, получат большее распространение в ближайшие годы. Объединение фреймворка Flux с фреймворками облачной оркестрации, такими как Red Hat OpenShift и Kubernetes, позволит в будущем объединить HPC и облачные технологии, что даст возможность быстрого масштабирования при необходимости.
Толчком к решению использовать Flux в качестве подключаемого модуля планировщика Kubernetes послужил успешный прототип, появившийся в результате сотрудничества Ок-Риджской национальной лаборатории (Oak Ridge National Laboratory, ORNL), Аргоннской национальной лаборатории (ANL), Ливерморской национальной лаборатория им. Э. Лоуренса (LLNL), и проекта центров передового опыта между LLNL и IBM для того, чтобы понять природу формирования рака. По словам исследователей, плагин позволил обеспечить более сложное планирование рабочих процессов Kubernetes, что убедило их в том, что они смогут интегрировать Flux с Red Hat OpenShift.
В целом, в индустрии высокопроизводительных вычислений (HPC) и анализа данных уже давно растёт интерес к использованию контейнеров для упрощения оркестрации и, как следствие более, полному и безопасному использованию ресурсов систем. Кроме того, стали появляться и первые гибридные системы, сочетающие локально установленный суперкомпьютер с облачными ресурсами.