Odaily Planet Daily relata que o chefe de produtos da Western Digital (WD), Ahmed Shihab, afirmou que, com a rápida expansão da infraestrutura de inteligência artificial, a competição central no setor de armazenamento não deve ser reduzida simplesmente a uma disputa entre flash e discos rígidos mecânicos (HDD), mas sim à capacidade de construir uma arquitetura de armazenamento para IA com escalabilidade econômica a longo prazo. Atualmente, a indústria de IA enfrenta um problema crucial: a arquitetura de armazenamento escolhida este ano será capaz de suportar o crescimento futuro dos dados até níveis de PB ou mesmo EB? Ele acredita que muitas infraestruturas de IA falham não por falta de desempenho, mas por entrarem em crise de custo após o aumento da escala de dados.
Ahmed Shihab acredita que os dados de IA continuam a crescer, incluindo dados de treinamento de modelos, dados de inferência, registros de interação do usuário, dados de conformidade e dados sintéticos. Embora a adoção de uma arquitetura totalmente flash seja atraente em implantações de pequena escala, à medida que o volume de dados aumenta, o custo de armazenamento se torna uma carga significativa. Flash e HDD não são tecnologias concorrentes, mas sim complementares, destinadas a cargas de trabalho diferentes. Cenários de alto desempenho, como pesos de modelos, transbordamento de GPU e cache KV, exigem suporte de flash de baixa latência; já as necessidades de armazenamento de longo prazo, como conjuntos de dados de treinamento, logs, checkpoints, registros de conformidade e grandes volumes de dados históricos, são mais adequadas a HDDs com vantagem de custo.
“A vitória no armazenamento de IA dependerá de quem conseguir fornecer capacidade economicamente escalável,” disse Shihab, acrescentando que os clientes, ao escolherem soluções de armazenamento, não consideram apenas a velocidade, mas também a capacidade de expandir seus negócios de IA de forma confiável e sustentável.
Shihab apontou que a arquitetura de armazenamento na era da IA será mais hierárquica, em vez de depender de um único meio de armazenamento. “O flash é responsável pelo desempenho em momentos críticos, enquanto o HDD lida com o ciclo de vida dos dados.” Durante a fase de escalonamento da infraestrutura de IA, o custo de armazenamento já não é mais apenas uma despesa operacional, mas sim parte integrante do design da arquitetura. Cada dólar gasto em armazenamento de alto desempenho e alto custo significa menos recursos disponíveis para computação, rede, energia e outras infraestruturas.
Além disso, a confiabilidade também deve ser considerada desde o início do design da arquitetura. Para sistemas de IA em grande escala, falhas de hardware, software, rede e energia são comuns; um sistema de armazenamento excelente precisa ter capacidade de operação contínua, isolamento de falhas e recuperação rápida. Ele concluiu que a direção futura do armazenamento de IA não é “o SSD substituindo o HDD”, mas sim uma camada precisa baseada no ciclo de vida dos dados e nas necessidades de negócios. “A verdadeira infraestrutura não busca desempenho impressionante, mas sim uma base confiável que sustente o crescimento contínuo da IA.”