Поставщик полупроводников для инфраструктуры данных Marvell Technology объявила, что представит свои решения для памяти и хранения данных, ориентированные на ИИ-инфраструктуру, с 4 по 6 августа. Marvell отметила, что с ростом масштабов инференса агентного ИИ емкость памяти, пропускная способность и способность к передаче данных становятся столь же важными, как и вычислительная мощность. Более крупные модели, более длинные окна контекста и растущие требования к KV Cache создают беспрецедентный спрос на ресурсы памяти в ИИ-системах. Компания утверждает, что ее технологии памяти и хранения данных для ИИ помогают клиентам повысить использование аппаратного обеспечения, увеличить эффективность обработки токенов и достичь более оптимального баланса между производительностью, энергопотреблением и стоимостью за счет сближения данных с вычислительными блоками и снижения задержек. По мере дальнейшего роста масштабов ИИ-моделей традиционная архитектура «приоритет вычислительных чипов» постепенно переходит к «совместной оптимизации вычислений, памяти и интерконнектов». Новые инфраструктурные решения, включая CXL, высокоскоростное хранение и оптические интерконнекты, могут стать ключевыми технологическими направлениями для следующего этапа масштабирования ИИ-центров обработки данных.
Marvell запустит решения для памяти и хранения данных для ИИ-инфраструктуры
TechFlowПоделиться
Marvell представит решения для памяти и хранения данных для инфраструктуры ИИ
Marvell Technology представит решения для памяти и хранения данных для инфраструктуры ИИ с 4 по 6 августа — ключевое обновление в новостях ИИ + криптовалют. По мере масштабирования агентного ИИ-вывода емкость памяти, пропускная способность и связь данных становятся столь же критичными, как и вычислительная мощность. Более крупные модели, расширенные окна контекста и растущие требования к KV Cache стимулируют беспрецедентный спрос на память в системах ИИ. Компания утверждает, что ее решения могут повысить эффективность использования аппаратного обеспечения, производительность обработки токенов и сбалансировать производительность, энергопотребление и стоимость. Традиционные архитектуры «вычисления в первую очередь» постепенно переходят к совместно оптимизированным вычислениям, памяти и интерконнектам, причем технологии, такие как CXL, высокоскоростное хранение и оптические интерконнекты, ожидается, сыграют ключевую роль в расширении центров обработки данных ИИ. Это развитие также связано с новостями о запуске токенов.
Источник:Показать оригинал
Отказ от ответственности: Информация на этой странице может быть получена от третьих лиц и не обязательно отражает взгляды или мнения KuCoin. Данный контент предоставляется исключительно в общих информационных целях, без каких-либо заверений или гарантий, а также не может быть истолкован как финансовый или инвестиционный совет. KuCoin не несет ответственности за ошибки или упущения, а также за любые результаты, полученные в результате использования этой информации.
Инвестиции в цифровые активы могут быть рискованными. Пожалуйста, тщательно оценивайте риски, связанные с продуктом, и свою устойчивость к риску, исходя из собственных финансовых обстоятельств. Для получения более подробной информации, пожалуйста, ознакомьтесь с нашими Условиями использования и Уведомлением о риске.