Huawei presentó su nuevo modelo de almacenamiento de inteligencia artificial (IA), el OceanStor A310, en GITEX GLOBAL 2023 la semana pasada, lo que marca un intento de abordar ciertos desafíos de la industria que rodean las aplicaciones de modelos grandes. Diseñado para la era de los grandes modelos de IA, el OceanStor A310 tiene como objetivo proporcionar una solución de almacenamiento para el entrenamiento de modelos básicos, el entrenamiento de modelos industriales y la inferencia en modelos de escenarios segmentados. Imagine el OceanStor A310 como un bibliotecario súper eficiente en una vasta biblioteca digital. obtener rápidamente piezas de información. En comparación, otro sistema, el ESS 3500 de IBM, es un bibliotecario más lento. Cuanto más rápido pueda obtener información el OceanStor A310, más rápido podrán funcionar las aplicaciones de IA y tomar decisiones inteligentes en el momento oportuno. Este rápido acceso a la información es lo que hace que el OceanStor A310 de Huawei se destaque. La ventaja del OceanStor A310 parece residir en su capacidad para acelerar el procesamiento de datos para la IA. En comparación con el ESS 3500 de IBM, la última matriz totalmente flash de Huawei alimenta las GPU de Nvidia casi cuatro veces más rápido por unidad de rack. Esto se basa en la metodología que utiliza Magnum GPU Direct de Nvidia, en la que los datos se envían directamente desde un recurso de almacenamiento NVMe a las GPU sin que intervenga un sistema host de almacenamiento. El OceanStor A310 de Huawei demostró un rendimiento con un ancho de banda de lectura secuencial de hasta 400 GBps y un ancho de banda de escritura de 208 GBps. Sin embargo, el impacto de los marcos de código abierto y de código cerrado en estas cifras aún no está claro. Al profundizar en su mecanismo, el OceanStor A310 está diseñado como una solución de almacenamiento en lago de datos de aprendizaje profundo que ofrece potencialmente escalabilidad horizontal ilimitada y alto rendimiento para cargas de trabajo mixtas. «Sabemos que para las aplicaciones de IA, el mayor desafío es mejorar la eficiencia del entrenamiento del modelo de IA», dijo Evangeline Wang, Gestión de Productos y Marketing de Huawei, en un comunicado compartido por el medio tecnológico Blocks and Files. «El mayor desafío para el sistema de almacenamiento durante el entrenamiento de la IA es seguir alimentando los datos a la CPU y a las GPU», añadió. «Eso requiere que el sistema de almacenamiento proporcione el mejor rendimiento». Para abordar este problema, cada OceanStor puede admitir hasta 96 SSD NVMe, procesadores y una memoria caché. Los usuarios pueden agrupar hasta 4.096 A310, compartiendo un sistema de archivos global que admite protocolos estándar para aplicaciones. El OceanStor A310 tiene como objetivo minimizar el tiempo de transmisión de datos a través de SmartNIC y un diseño masivamente paralelo. Números de 63GBps.» Block and Files dijo en un estudio de referencia que comparó la solución de Huawei con sus competidores directos.
Imagen: Bloques y archivos La presentación del OceanStor A310 llega en un momento en que la industria de la inteligencia artificial busca soluciones eficientes de almacenamiento y procesamiento de datos. Este esfuerzo de Huawei tiene como objetivo abordar algunos de los desafíos actuales y puede contribuir a lograr un entrenamiento simplificado del modelo de IA. Sin embargo, las sanciones de Estados Unidos a Huawei, principalmente debido a preocupaciones sobre la seguridad nacional y los supuestos vínculos de la compañía con el gobierno chino, agregan una capa de complejidad para la incursión de Huawei en soluciones de almacenamiento de IA. Las implicaciones potenciales del OceanStor A310 de Huawei podrían ser notables. Al ofrecer una solución a algunas de las ineficiencias actuales en el almacenamiento y procesamiento de datos, Huawei intenta desafiar a otros proveedores y empujar a la industria de la IA hacia una nueva era de posible innovación y eficiencia. Editado por Andrew Hayward
Publi













