Software HPE Machine Learning Data Management
¿Necesitas escalar tus pipelines de datos y el aprendizaje automático al procesar grandes cantidades de datos desestructurados y estructurados? El software HPE Machine Learning Data Management ofrece una flexible plataforma de capa de datos que automatiza los complejos pipelines de datos y aprendizaje automático, al tiempo que ofrece versionados y linajes de datos para su reproducibilidad. Aumenta el rendimiento de los pipelines con escalabilidad automática y procesamiento paralelo basado en Kubernetes para la organización de los recursos. Los almacenes de objetos estándares, la deduplicación y los pipelines se activan de forma automática al modificarse los datos, lo que permite ahorrar recursos y reducir el tiempo de trabajo de los ingenieros. Esta plataforma cuenta con un linaje de datos inmutable con versiones de datos de cualquier tipo para ofrecer resultados trazables, lo que permite reproducir cualquier resultado.
- Especificaciones rápidas (PDF) (HTML)
- | Ficha técnica
-
text.warning.msg.reseller
Más información
Novedades
- Pipelines de datos con versiones y linajes para una reproducibilidad completa.
- Escala las cargas de trabajo a petabytes con autoescalado y procesamiento paralelo.
- Los pipelines basados en datos se activan de manera inteligente al detectar cualquier cambio en los datos.
- Impulsa la colaboración y escala los equipos gracias a una plataforma central, modular y de uso compartido que hace las veces de fuente única de información verdadera.
- Genera código más sencillo, limpio y fácil de depurar con el mejorado SDK basado en Python.
Principales características
Escalabilidad y rendimiento
Al utilizar Kubernetes para la organización de los recursos, el software HPE Machine Learning Data Management puede procesar petabytes de datos y miles de millones de registros mediante el autoescalado y el procesamiento paralelo en múltiples nodos.
Deduplica de forma automática los datos y procesos solamente en los datos nuevos o modificados (procesamiento incremental) con el objetivo de que los modelos cuenten constantemente con los datos más actualizados.
Estructura modular de repos y pipelines similar a git que permite a los equipos escalar, compartir recursos y colaborar de manera eficaz.
Reproducibilidad y automatización
Gracias a las inmutables versiones y linaje de datos, el software HPE Machine Learning Data Management ofrece una reproducibilidad integral de cualquier resultado.
Versiones completas de los datos y metadatos, incluidos todos los análisis, parámetros, artefactos, modelos y resultados intermedios.
Los pipelines basados en datos se activan automáticamente al detectar los cambios en los datos (adiciones o modificaciones), en los pipelines o en el código.
Combina la automatización, las versiones de datos y el procesamiento paralelo para transformar los proyectos impredecibles y costosos en ágiles flujos de trabajo de producción de IA/aprendizaje automático de nivel empresarial a través de los pipelines globales.
Plataforma flexible
Con independencia del idioma o de las herramientas, el software HPE Machine Learning Data Management permite a los ingenieros disfrutar de una autonomía completa. De esta forma, pueden utilizar los idiomas, los marcos o las bibliotecas que mejor se adapten a cada caso de uso.
Con independencia de los datos, la solución admite tanto datos desestructurados como estructurados de forma sencilla, así como flujos y lotes de datos.
Se ejecuta en contenedores Docker en Kubernetes para ofrecer una portabilidad completa en la nube o localmente.
Cargas de trabajo de aprendizaje automático rentables
El software HPE Machine Learning Data Management puede reducir los costes de computación y de almacenamiento al procesar solo los datos nuevos o modificados, y deduplicar los datos.
Personaliza la utilización de los recursos ubicando las cargas de trabajo en las CPU o GPU según lo requiera el caso de uso.
Especificaciones rápidas
Vínculos relacionados
Sitio de soporte de Pachyderm
Docker es una marca comercial o marca comercial registrada de Docker, Inc. en Estados Unidos y en otros países. Todas las marcas de terceros son propiedad de sus respectivos titulares.
* Los precios pueden variar según el distribuidor local.