Micron представила первую в мире память LPDDR‑SOCAMM2 объёмом 256 ГБ, идеальную для ИИ.
Micron запускает новый тип памяти для дата‑центров
Компания Micron представила в мире первый модуль оперативной памяти LPDRAM SOCAMM2 объёмом 256 ГБ, специально созданный для высокопроизводительных центров обработки данных и задач искусственного интеллекта.
Что нового?
| Параметр | Традиционная память | LPDRAM SOCAMM2 |
|---|---|---|
| Энергопотребление | – | втрое ниже |
| Размер модуля | – | компактный, построен из монолитных кристаллов 32 Гбит |
| Пропускная способность | – | повышена для инференса ИИ |
| Задержка | – | существенно сокращена |
При работе на восьми‑канальном процессоре и 2 ТБ общей памяти, скорость запуска моделей ИИ (время до первого токена) возрастает более чем в две с половиной раза.
Кому это нужно?
Модуль ориентирован на:
- вывод больших языковых моделей;
- любые рабочие нагрузки, где критичны объём памяти, пропускная способность и задержка;
- сценарии, когда часть KV‑кеша можно выгружать из видеопамяти в более экономичную системную память без потери производительности.
Формфактор и сотрудничество
SOCAMM2 – компактный вариант формата RDIMM, но с меньшим энергопотреблением. Разработка памяти проходила совместно с Nvidia, что подчёркивает её пригодность для GPU‑акселерации ИИ.
Таким образом, Micron предлагает эффективное решение для дата‑центров, позволяющее сократить затраты на энергию и пространство, одновременно улучшая производительность ИИ‑загрузок.
Комментарии (0)
Оставьте отзыв — пожалуйста, будьте вежливы и по теме.
Войти, чтобы комментировать