🗣 Запустили новый тариф с 48 ГБ видеопамяти NVIDIA L4 в одном сервере Если для ваших задач нужны 48 ГБ видеопамяти, а мощность и стоимость NVIDIA L40S избыточны — у нас появилась более доступная конфигурация: две NVIDIA L4 по 24 ГБ в одной виртуальной машине. 📌 Что внутри 🔹 2 × NVIDIA L4 по 24 ГБ 🔹 16 vCPU на высокочастотных AMD EPYC 9555 🔹 64 ГБ DDR5 🔹 300 ГБ NVMe Кому подойдёт 🔹 Тем, кто запускает LLM и AI-помощников...
mClouds.ru - облачные технологии
Модель весит 14 ГБ, а видеопамяти на 16 ГБ не хватает
Почему? 🤔 При выборе GPU для LLM легко ориентироваться на размер весов: помещаются в память — значит, можно запускать. Но во время работы модели потребуется место и для других данных. Мы подготовили обзор, который поможет прикинуть, сколько VRAM нужно именно под вашу нагрузку. 📌 Куда уходит видеопамять 🔹 Веса модели. Например, для 7 млрд параметров в FP16 потребуется около 14 ГБ — только на их хранение. 🔹 KV-кэш. Сохраняет результаты вычислений для уже обработанных токенов. Чем длиннее диалог, документ и ответ, тем больше памяти он занимает...
Кто-то перебирает пароли к SSH или ищет уязвимости на сайте? Такие попытки можно блокировать автоматически
CrowdSec — ПО с открытым исходным кодом для обнаружения атак. Оно анализирует логи, выявляет подозрительное поведение и передает решения баунсерам — компонентам, которые блокируют доступ через firewall или веб-сервер. CrowdSec также обменивается с сообществом данными об IP-адресах атакующих, учитывая угрозы, замеченные на других серверах. 📌 Собрали для вас инструкцию по настройке на Ubuntu 26.04 LTS Пошагово показали, как: 📍 установить CrowdSec...
Переключите PostgreSQL с TCP/IP на Unix-сокет и получите прирост производительности без замены сервера и покупки новых лицензий
Поясняем. Мы тестировали 1С на AMD EPYC 9555 с PostgreSQL 18.1 на Ubuntu 24.04. Провели тест Гилёва в двух режимах: 🔹 TCP/IP — 77 баллов 🔹 Unix-сокет — 86,21 балла Разница — +12%. И это при том, что ничего не менялось в железе или настройках СУБД. Только способ подключения к базе. Почему Unix-сокет быстрее TCP/IP передает данные через сетевой стек...
Хорошие новости для тех, кто администрирует Windows Server 2022: Microsoft продлила выпуск «горячих» обновлений (Hotpatch) для этой
платформы до октября 2027 года. Основная поддержка Windows Server 2022 заканчивается 13 октября 2026-го. Но Hotpatch-апдейты будут выходить еще целый год — до октября 2027-го. Напомним, что расширенная поддержка (без Hotpatch) продлится до 2031 года. 💡 Hotpatch — это технология, которая доставляет обновления безопасности без перезагрузки сервера. Сервисы продолжают работать, а система получает критические патчи на лету. 📌 Важное ограничение: Hotpatch работает только для редакции Windows Server 2022 Datacenter: Azure Edition...
