Odaily Planet Daily сообщение: Главный продуктовый директор Western Digital (WD) Ахмед Шихаб заявил, что с быстрым расширением инфраструктуры искусственного интеллекта основная конкуренция в сфере хранения данных не сводится просто к соперничеству между флеш-памятью (Flash) и механическими жесткими дисками (HDD), а заключается в способности создать архитектуру хранения данных для ИИ с долгосрочной экономической масштабируемостью. Сейчас индустрия ИИ сталкивается с ключевой проблемой: сможет ли выбранная в этом году архитектура хранения данных поддержать рост объемов данных до уровня петабайтов и даже эксабайтов. Он считает, что многие проекты инфраструктуры ИИ терпят неудачу не из-за недостаточной производительности, а из-за финансовых трудностей, возникающих при увеличении объемов данных.
Ахмед Шихаб считает, что объем данных ИИ постоянно растет, включая данные для обучения моделей, данные вывода, записи взаимодействия с пользователями, данные соответствия требованиям и синтетические данные. Если на ранних этапах использовать архитектуру на основе всех твердотельных накопителей, это может быть привлекательно при небольших развертываниях, но с ростом объема данных стоимость хранения станет огромной нагрузкой. Твердотельные накопители и HDD не конкурируют друг с другом, а являются дополнительными технологиями, ориентированными на разные рабочие нагрузки. Для сценариев с высокой производительностью, таких как веса моделей, переполнение GPU, KV-кэш и т.д., необходимы низколатентные твердотельные накопители; в то время как долгосрочное хранение, например, наборы данных для обучения, журналы, контрольные точки, записи соответствия требованиям и крупномасштабные исторические данные, лучше реализовать с использованием HDD, обладающих преимуществом по стоимости.
«Победа в сфере хранения данных ИИ будет зависеть от того, кто сможет предложить экономически масштабируемую емкость», — сказал Шихаб, отметив, что клиенты при выборе решения для хранения данных ориентируются не только на скорость, но и на возможность надежного и устойчивого масштабирования бизнеса ИИ.
Шихаб отметил, что архитектура хранения в эпоху ИИ станет более многоуровневой, а не будет полагаться на один тип носителя. «Флеш-память отвечает за производительность в критические моменты, а HDD — за жизненный цикл данных». На этапе масштабирования инфраструктуры ИИ стоимость хранения уже перестала быть просто операционными расходами и стала частью архитектурного проектирования. Каждый доллар, потраченный на дорогостоящее высокопроизводительное хранение, означает меньшие ресурсы, выделяемые на вычисления, сеть, электропитание и другие инфраструктурные компоненты.
Кроме того, надежность должна учитываться еще на этапе проектирования архитектуры. Для масштабных ИИ-систем сбои оборудования, программного обеспечения, сети и электропитания — это норма; отличная система хранения должна обеспечивать непрерывную работу, изоляцию сбоев и быстрое восстановление. Он подытожил, что будущее развития ИИ-хранилищ — не «замена HDD флеш-памятью», а точечное уровневое распределение в зависимости от жизненного цикла данных и бизнес-требований. «Настоящая инфраструктура — это не стремление к впечатляющей производительности, а надежная основа, способная поддерживать долгосрочный рост ИИ».