Опубликовано в рубрике Кoмпaнія NVIDIA прeдстaвилa свій нoвий тoпoвий фишка для зaвдaнь штучнoгo інтeлeкту — H200, який признaчeний зaмінити попередника H100. Новий микросхема зберігає зовнішній вигляд H100, але отримав важливе оновлення в пам’яті — використовує більш швидкий і місткий экземпляр пам’яті HBM3e.
Одним з ключових покращень ставший пам’яті є збільшення пропускної здатності до самого 4,8 Тбайт/с, порівняно з 3,35 Тбайт/с у H100. Загальний обсяг пам’яті також збільшився з 80 раньше 141 Гбайт. Ради заявою NVIDIA, новий ставка демонструє майже дворазове зростання продуктивності в задачах генеративного штучного інтелекту в порівнянні з H100. Ця оцінка ґрунтується бери тестуванні мовних моделей, таких як GPT-3 і Llama 2.
NVIDIA H200 повністю сумісний з існуючими системами, які підтримують H100. Хмарні підрозділи Amazon, Google, Microsoft і Oracle будуть одними з перших, хто запропонує нові чипи своїм клієнтам. Перші поставки H200 очікуються в другому кварталі 2024 року. Щодо ціни, вона в даний момент невідома, але следовать інформацією ЗМІ, H100 продається від $25 000 впредь до $40 000.
Анонс нового чипу стався в умовах загостреного дефіциту чипів NVIDIA угоду кому) штучного інтелекту. Компанія також планує нарощувати виробництво моделі H100 у наступному році, оскільки вона залишається високо запитуваною серед розробників штучного інтелекту.