Инфраструктура для AI

Инфраструктура для AI

Подберите инфраструктуру для размещения моделей, инференса, обучения и дообучения по требованиям к памяти и нагрузке.

Выберите конфигурацию в Console, чтобы проверить состав ресурсов и расчётную стоимость.

Что учесть

AI-задача требует не только GPU: веса модели, кеш, датасеты, контрольные точки и API приложения используют разные ресурсы.

Перед расчётом выберите версию модели, точность, длину контекста и параллелизм. Производительность проверьте на своей задаче.

Варианты конфигурации

Класс 24–32 GB

L4, A10, RTX 4090 или RTX 5090. Рассматривайте для небольших моделей после измерения полной памяти, включая среду и кеш.

Класс 48–80 GB

L40S, A40, A100 или H100. Дополнительная память может вместить больший рабочий набор, но не гарантирует параллелизм или скорость токенов.

От 141 GB и несколько GPU

H200, B200, B300 и отдельно рассчитанные системы с несколькими GPU. Уточните модель, точность, топологию и среду исполнения.

Память только весов ≈ число параметров × байты на параметр. Среда, KV-кеш, активации и оптимизатор требуют дополнительной памяти. Это способ оценки, а не готовая рекомендация к запуску.

Smart Infra Finder

Ваша задача, ваши требования

Варианты — из каталога. Неясные требования нужно уточнить; производительность и доступность не выдумываются.

Откройте каталог

Размещение LLM

Размещение LLM: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

AI-инференс

AI-инференс: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Обучение AI

Обучение AI: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Дообучение моделей

Дообучение моделей: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Инфраструктура для DeepSeek

Инфраструктура для DeepSeek: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Инфраструктура для Llama

Инфраструктура для Llama: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Инфраструктура для Mistral

Инфраструктура для Mistral: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Инфраструктура для эмбеддингов

Инфраструктура для эмбеддингов: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Инфраструктура для генерации изображений

Инфраструктура для генерации изображений: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Инфраструктура для речевого AI

Инфраструктура для речевого AI: выбор модели, требования к памяти, хранение и развёртывание без выдуманных обещаний производительности.

Подробнее

Проверить доступность: Инфраструктура для AI

Проверьте цену и конфигурацию в Console. Выбор сохранится при регистрации. Сейчас проверка использует mock-адаптеры; реальные ресурсы не резервируются.

Связанные продукты и сценарии