Google lanza tres nuevas opciones de almacenamiento en la nube: Cloud Storage FUSE, Parallelstore y NetApp Volumes

InfoQ Inicio Noticias Google lanza tres nuevas opciones de almacenamiento en la nube: Cloud Storage FUSE, Parallelstore y NetApp Volumes

29 de agosto de 2023 Lectura de 2 minutos

por

Steef Jan Wiggers

Google lanzó recientemente tres nuevas opciones de almacenamiento en la nube: Cloud Storage FUSE para aplicaciones de Inteligencia Artificial (IA) que requieren semántica del sistema de archivos, un sistema de archivos paralelo Parallelstore para aplicaciones exigentes de IA y HPC que utilizan GPU, y NetApp Volumes para aplicaciones empresariales que se ejecutan en la nube. .

Cloud Storage FUSE ya estaba disponible como una versión de código abierto, lo que permitía acceder a los objetos en los depósitos de Cloud Storage como archivos montados como un sistema de archivos local. La empresa lo mejoró con nuevos niveles de portabilidad, confiabilidad, rendimiento e integración dirigidos a cargas de trabajo de IA. En una publicación de blog de Google, los autores Marco Abela, gerente de producto, y Akshay Ram, gerente senior de producto de Google, explican:

El nuevo Cloud Storage FUSE es particularmente importante para las cargas de trabajo de IA. Debido a que las aplicaciones pueden acceder a los datos directamente (en lugar de descargarlos localmente), no hay que implementar una lógica personalizada y hay menos tiempo de inactividad para recursos valiosos como TPU y GPU mientras se copian los datos. Además, un nuevo controlador Cloud Storage FUSE CSI para Google Kubernetes Engine (GKE) permite que las aplicaciones monten Cloud Storage utilizando la conocida API de Kubernetes, y se ofrece como una implementación llave en mano administrada por GKE.

Descripción general de Cloud Storage FUSE (Fuente: publicación de blog de Google)

JW Davis, un evangelista de la nube, comentó sobre la disponibilidad de los sistemas de archivos FUSE en GKE en un tweet:

Esto parece destinado a muchos desastres. Útil para una gama muy limitada de casos de uso; la mayoría lo usará mal y sufrirá.

Además de Cloud Storage FUSE para aplicaciones de IA, la compañía anuncia una vista previa privada de un sistema de archivos paralelo llamado Parallelstore que ayuda a los usuarios a dejar de desperdiciar valiosos recursos de GPU mientras, al mismo tiempo, esperan la E/S de almacenamiento al proporcionar un alto rendimiento. Solución de almacenamiento de archivos paralelo para cargas de trabajo AI/ML y HPC. La solución se basa en la arquitectura Intel Distributed Asynchronous Object Storage (DAOS) de próxima generación.

Sameet Agarwal, vicepresidente/director general de almacenamiento, y Sean Derrington, gerente de producto del grupo, almacenamiento, explican en una publicación del blog de Google sobre las nuevas opciones de almacenamiento en la nube:

Basado en la arquitectura Intel DAOS de próxima generación, todos los nodos informáticos en un entorno Parallelstore tienen igual acceso al almacenamiento, por lo que las máquinas virtuales pueden obtener acceso inmediato a sus datos. Con un rendimiento de lectura de hasta 6,3 veces mayor en comparación con las ofertas competitivas de Lustre Scratch, Parallelstore es ideal para aplicaciones basadas en la nube que requieren un rendimiento extremadamente alto (IOPS y rendimiento) y una latencia ultrabaja.

Finalmente, la tercera nueva opción de almacenamiento en la nube es NetApp Volumes, un servicio de almacenamiento de archivos de alto rendimiento totalmente administrado por Google. Esta opción de almacenamiento está diseñada para empresas que desean migrar sus aplicaciones sobre matrices de almacenamiento locales de NetApp a la nube. El servicio brinda la capacidad de aumentar volúmenes de 100 GiB a 100 TiB para una máxima escalabilidad, implementar la administración de datos ONTAP para cargas de trabajo híbridas y ejecutar aplicaciones de Windows o Linux como máquinas virtuales sin refactorización.

Cuando InfoQ le preguntó qué está impulsando esta inversión de Google, esto es lo que Derrington dijo:

A medida que la IA se ha vuelto fundamental para automatizar la gestión de datos, las organizaciones están recurriendo a la nube para ofrecer la solución de almacenamiento adecuada para la aplicación adecuada. Con las nuevas ofertas de almacenamiento optimizado para IA de Google Cloud, Cloud Storage FUSE y Parallelstore, ayudamos a los clientes a adaptarse a cargas de trabajo complejas de IA al ofrecer soluciones de almacenamiento personalizadas que simplifican las operaciones, desbloquean la innovación, reducen costos y más.

Los volúmenes Cloud Storage FUSE y NetApp están disponibles a través de Google Cloud Console, mientras que Parallel Store está a través de un administrador de cuentas de Google.

La verdadera promesa de la nube es facilidad, no costo. DoiT proporciona tecnología y experiencia en la nube para reducir los costos de la nube y aumentar la productividad de los ingenieros. Todo de un socio de nube de AWS, Microsoft y Google. Aprende más.

Escribir para InfoQ ha abierto muchas puertas y aumentado las oportunidades profesionales. para mí. Pude interactuar profundamente con expertos y líderes de opinión para aprender más sobre los temas que cubrí. Y también puedo difundir mis conocimientos a la comunidad tecnológica en general y comprender cómo se utilizan las tecnologías en el mundo real.

¡Descubrí el programa de colaboradores de InfoQ a principios de este año y lo he disfrutado desde entonces! Además de brindarme una plataforma para compartir aprendizaje con una comunidad global de desarrolladores de software, el sistema de revisión entre pares de InfoQ ha mejorado significativamente mi escritura. . Si está buscando un lugar para compartir su experiencia en software, comience a contribuir a InfoQ.

Comencé a escribir noticias para la cola InfoQ .NET como una forma de mantenerme actualizado con la tecnología, pero saqué mucho más provecho de ello. Conocí gente conocedora, obtuve visibilidad global y mejoré mis habilidades de escritura..

Convertirme en editor de InfoQ fue una de las mejores decisiones de mi carrera . Me ha desafiado y me ha ayudado a crecer de muchas maneras. . Nos encantaría tener más gente.Unete a nuestro equipo.

InfoQ busca un editor en jefe a tiempo completo para unirse al equipo internacional y siempre remoto de C4Media. Únase a nosotros para cubrir las tecnologías más innovadoras de nuestro tiempo, colabore con los profesionales de software más brillantes del mundo y ayude a más de 1,6 millones de equipos de desarrollo a adoptar nuevas tecnologías y prácticas que superan los límites de lo que el software y los equipos pueden ofrecer.

Todos los martes se envía un resumen del contenido de la semana pasada en InfoQ. Únase a una comunidad de más de 250.000 desarrolladores senior. Ver un ejemplo

Protegemos su privacidad.

Debe registrar una cuenta InfoQ o iniciar sesión o iniciar sesión para publicar comentarios. Pero hay mucho más detrás de estar registrado.

Aproveche al máximo la experiencia InfoQ.

HTML permitido: a,b,br,blockquote,i,li,pre,u,ul,p

HTML permitido: a,b,br,blockquote,i,li,pre,u,ul,p

HTML permitido: a,b,br,blockquote,i,li,pre,u,ul,p