CPO de Western Digital: Flash para ahora, HDD para almacenamiento de IA a largo plazo

ChainCatcher informa que Ahmed Shihab, Chief Product Officer de Western Digital, publicó que la clave de la competencia en almacenamiento para IA no es simplemente perseguir el medio más rápido, sino la capacidad de escalar la capacidad de forma sostenible a un costo asequible. Considera que muchas arquitecturas funcionan bien en etapas iniciales, pero cuando el volumen de datos crece desde varios PB hasta cientos de PB o incluso EB, pueden revelar problemas debido a un control de costos incontrolable. El flash es adecuado para escenarios de alto rendimiento y baja latencia, como pesos de modelos, overflow de GPU, caché KV y contexto de sesiones; mientras que los HDD son más adecuados para datos a gran escala y de larga duración, sensibles al costo, como corpus de entrenamiento, registros, puntos de control, registros de cumplimiento, datos sintéticos y salidas de inferencia. Concluye: "El flash maneja el presente; el HDD maneja todo el ciclo de vida". Bajo la escala de IA, el costo del almacenamiento en sí mismo se convierte en un problema de arquitectura. Mantener grandes volúmenes de datos durante períodos prolongados en medios de alto rendimiento desplazará presupuestos destinados a cómputo, red, energía y personal. Para muchas cargas de almacenamiento por lotes, la pregunta no es si el flash puede almacenarlos, sino si los clientes pueden asumir el costo total del uso continuo de flash. El almacenamiento futuro para IA no será dominado por una sola tecnología, sino que debe diseñarse en capas según el rendimiento, el costo, el consumo energético, la densidad, la confiabilidad y el ciclo de vida de los datos. Enfatiza que esto no es una competencia entre flash y HDD, sino la necesidad de asignar desde el inicio el medio adecuado para cada carga de trabajo; de lo contrario, la arquitectura podría afectar la sostenibilidad del negocio al escalar.