Las aplicaciones de HPC/IA hacen un uso intensivo de los datos y deben ser protegidas
HPE Data Management Framework 7 crea versiones inmutables de archivos y toma snapshots del sistema de archivos mediante el reflejo del espacio de nombres. Gestionado mediante una política de administrador, la recuperación se puede personalizar para ofrecer los RTO más bajos de disco, el menor coste de cinta o de ubicaciones remotas mediante S3/cloud.
La pérdida del sistema debida a fallos tiene un gran impacto en la disponibilidad del clúster de la computación de alto rendimiento. Incluso cuando un sistema de archivos pueda repararse, la complejidad y el tiempo que lleva reparar un sistema averiado puede provocar la caída de la computación más allá de los niveles aceptables según los acuerdos de nivel de servicio.
Hasta ahora, proteger los sistemas de archivos y datos ha sido una inversión costosa, con imponentes desventajas, como la falta de ventanas de copia de seguridad, utilidades de copia de seguridad no optimizadas, optimizadas para sistemas de archivos en paralelo con tamaños que alcanzan los PB y el impacto negativo sobre el rendimiento de escanear los metadatos del sistema de archivos.
La emergencia de la computación a exaescala está desafiando los límites de escala del almacenamiento HPC heredado
HPE Data Management Framework 7 gestiona el espacio libre en el almacenamiento al retirar automáticamente archivos caducados del almacenamiento de alto rendimiento y crear un espacio de almacenamiento subyacente más grande en el interior. Los administradores gestionan fácilmente los ajustes de las políticas, así se reduce la necesidad de tomar medidas drásticas.
Quizá sean los administradores de almacenamiento los que perciben el reto de manera más aguda, pues deben esforzarse por mantener espacio libre suficiente en un costoso almacenamiento de alto rendimiento, mientras que los usuarios de forma independiente inundan el sistema con nuevos archivos Aumentar el presupuesto de almacenamiento y/o eliminar archivos no son remedios prácticos.
El volumen y la diversidad de los datos exigidos por aplicaciones de HPC/IA ha avivado el crecimiento de la «bestia del almacenamiento» que se alimenta de presupuestos de HPC. Al mismo tiempo, las arquitecturas de sistemas de archivos en paralelo tradicionales se ven aplastadas por el peso del crecimiento incesante del número de archivos y nodos índice.
Con el tiempo, los administradores necesitan trabajar con los usuarios para extraer los archivos no utilizados del sistema a fin de garantizar que el rendimiento de los metadatos no se ve reducido. Cuando los archivos antiguos deben eliminarse, no es necesario mover dato alguno puesto que HPE DMF7 ya conserva los archivos y metadatos en almacenamiento back-end menos costoso.
Los entornos de almacenamiento de HPC/IA son variados y los datos necesitan ser móviles
HPE Data Management Framework 7 migra automáticamente archivos a niveles jerárquicos inferiores del sistema de almacenamiento sin la interacción del administrador y los vuelve a elevar al almacenamiento de alto rendimiento bajo demanda. Utiliza migradores de datos en paralelo y una red de alta velocidad para mover archivos con mayor rapidez que las utilidades de escritorio estándar.
Gestionar los movimientos de datos de HPC/IA es una tarea imponente. Las herramientas no son fáciles de utilizar, no escalan bien, el ancho de banda del canal de red es limitado y los usuarios podrán no disponer de las capacidades necesarias. Cuando los datos no se pueden mover con facilidad y la motivación para migrar es limitada, la opción por defecto es dejarlos donde están.
Los sistemas de almacenamiento están optimizados para rendimiento, capacidad y coste, y los datos siempre están en tránsito entre estas capas. Los flujos de trabajo de aplicaciones exigen que los datos sigan al usuario y la aplicación, y los administradores están presionados constantemente para gestionar los costes de almacenamiento y hacer descender los datos por la jerarquía.
La migración de tecnología es un factor común para el movimiento de datos y HPE DMF7 ofrece protección contra este riesgo en el futuro. Automatiza la migración de objetos de back-end de tecnologías de disco duro o cinta más antiguas e ineficientes a generaciones con mayor densidad, fiabilidad y rendimiento.
Cuando el sistema debe ser retirado, los administradores migran el sistema y los archivos a dispositivos back-end HPE DMF7. Una vez protegido, el sistema de archivos se puede almacenar provisionalmente en un espacio de nombres totalmente nuevo y los archivos se pueden almacenar provisionalmente en el nuevo espacio de nombres o permanecer conservados en HPE DMF7.
Reducir el coste del almacenamiento HPC significa más dinero para computación
HPE Data Management Framework 7 es la plataforma de gestión de almacenamiento HPC que automatiza flujos de trabajo de datos y reduce los costes del almacenamiento HPC para que los clientes de HPC puedan gastar sus valiosos presupuestos para proyectos en el recurso de infraestructura que más importa.
La bestia del almacenamiento se resiste a este objetivo. La bestia del almacenamiento anima a los clientes de HPC a replicar archivos en almacenamiento exclusivo y costoso, a escalar horizontalmente la capa de almacenamiento más cara para hacer frente al crecimiento de los datos y afirma que es más fácil no mover los datos de almacenamiento de alto coste que moverlos.
El principal objetivo de HPE DMF7 es reducir los costes del almacenamiento. En lugar de comprar almacenamiento más costoso, HPE DMF7 facilita a los clientes de HPC la protección, la escalabilidad y la migración de datos utilizando almacenamiento de menos coste, además de mejorar la utilización y el rendimiento de recursos de almacenamiento HPC de misión crítica.
El incesante crecimiento de los datos de HPC y la organización de grandes conjuntos de datos para IA/aprendizaje automático están impulsando un crecimiento sin precedentes en las necesidades de almacenamiento. Y la adopción del almacenamiento flash a un coste efectivo superior significa que contener los costes es el objetivo principal de los compradores de almacenamiento HPC.
