Descubre las nuevas características de DEOS en Intel DAOS 2.0
📑 Tabla de contenido
- Introducción
- ¿Qué es DEOS?
- Arquitectura de DEOS
- 3.1 Almacenamiento en niveles
- 3.2 Ventajas de DEOS
- 3.3 Desafíos de adopción
- Progreso de adopción de DEOS
- 4.1 Asociación de hardware
- 4.2 Asociación de revendedores
- 4.3 Clientes finales
- Destacados de DEOS
- Próximas características de DEOS
- 6.1 Soporte para censor ocho
- 6.2 Codificación de borrado
- 6.3 Reintegración de servidores
- 6.4 Telemetría y paneles de control
- 6.5 Ampliación de soporte de red
- 6.6 Mejoras de estabilidad y usabilidad
- Impacto en el rendimiento de las nuevas características
- Tamaño y archivos típicos en un entorno de cliente DEOS
- Limitaciones de la codificación de borrado y configuración de nodos
- Preguntas frecuentes
📝 Artículo
Introducción
¡Hola a todos! En este artículo vamos a hablar sobre las novedades de DEOS en nuestro viaje hacia el futuro. Para aquellos que no tuvieron la oportunidad de unirse a nosotros en eventos anteriores, DEOS es un sistema de archivos paralelo distribuido que estamos desarrollando en Intel. Está basado en la memoria persistente Octane de Intel y en nuestras unidades de estado sólido NVMe. En este artículo, vamos a profundizar en los detalles de la arquitectura de DEOS, el progreso de su adopción en la industria y las próximas características que estamos desarrollando.
¿Qué es DEOS?
DEOS es un sistema de archivos paralelo distribuido que rompe con el paradigma tradicional de sistemas de bloques para el almacenamiento de datos. Lo que hace a DEOS diferente es su enfoque en la memoria persistente y la capacidad de acceder y almacenar datos a nivel de bytes en lugar de bloques. Esto nos permite ofrecer un rendimiento y una latencia mucho mejores, especialmente para operaciones de E/S más pequeñas. DEOS está diseñado para atender a varios mercados, como HPC, IA y análisis de datos de alto rendimiento.
Arquitectura de DEOS
La arquitectura de DEOS se basa en un enfoque de almacenamiento en niveles, donde se separa el almacenamiento de metadatos y E/S pequeñas en la memoria persistente Octane, mientras que las E/S más grandes se almacenan en las unidades NVMe SSD. Esta arquitectura nos permite superar los cuellos de botella en la industria y aprovechar al máximo el hardware Octane. Al separar los datos en niveles, podemos lograr un rendimiento óptimo y satisfacer las necesidades de diferentes mercados.
Progreso de adopción de DEOS
En cuanto al progreso de adopción de DEOS, nos complace destacar que hemos logrado establecer asociaciones con numerosos socios de hardware, como Hewlett Packard y Lenovo. También hemos ampliado nuestras asociaciones con Supermicro, Inspur, Juana y otros, para crear un ecosistema sólido en torno a DEOS. Además, hemos visto un creciente interés por parte de los clientes finales, con casos de uso que van desde bases de datos SQL hasta servidores de correo. DEOS también ha sido reconocido en la industria, con una presencia destacada en la lista I/O 500.
Destacados de DEOS
Algunos de los aspectos más destacados de DEOS incluyen su rendimiento líder en su clase en términos de IOPS y ancho de banda, lo que lo convierte en una solución rentable para aplicaciones de alto rendimiento. DEOS también ofrece flexibilidad en la protección de datos, permitiendo a los usuarios elegir entre replicación y codificación de borrado según sus necesidades específicas. Además, DEOS está enfocado en ofrecer estabilidad, usabilidad y documentación excelentes para garantizar una experiencia de usuario satisfactoria.
Próximas características de DEOS
En la próxima versión de DEOS, estamos introduciendo varias características emocionantes. Una de ellas es el soporte para censor ocho, lo que nos permitirá aprovechar las últimas tecnologías de hardware. También estamos implementando la codificación de borrado, que ofrece una mayor eficiencia en el uso del espacio de almacenamiento al tiempo que proporciona protección de datos. Otras mejoras incluyen la capacidad de reintegrar servidores y un sistema de telemetría para monitorear el rendimiento del sistema. También estamos ampliando el soporte de red para permitir la integración con Ethernet. Por último, nos estamos enfocando en mejorar la estabilidad y usabilidad de DEOS para garantizar una experiencia sin problemas.
Impacto en el rendimiento de las nuevas características
Es importante tener en cuenta que las nuevas características de DEOS pueden tener un impacto en el rendimiento. Por ejemplo, la codificación de borrado puede requerir un mayor tiempo de procesamiento para realizar escrituras y reconstruir datos. Sin embargo, gracias a nuestra arquitectura y enfoque de versionado, somos capaces de minimizar este impacto y ofrecer un rendimiento aceptable. En futuras publicaciones, compartiremos datos específicos sobre las pruebas de rendimiento.
Tamaño y archivos típicos en un entorno de cliente DEOS
El tamaño y los archivos típicos en un entorno de cliente DEOS varían considerablemente. Algunos clientes pueden tener sistemas DEOS con solo cuatro servidores, mientras que otros pueden llegar a sistemas de varios petabytes. El tamaño de los nodos de almacenamiento depende de la relación entre la memoria persistente y las unidades NVMe SSD. En general, los despliegues más comunes oscilan entre el rango de 0.5 a 1 petabyte.
Limitaciones de la codificación de borrado y configuración de nodos
En cuanto a la codificación de borrado, existen limitaciones inherentes a este enfoque. Por lo general, los archivos de mayor tamaño se benefician más de la codificación de borrado, mientras que los archivos pequeños pueden no ser tan eficientes. Además, es importante destacar que los nodos de almacenamiento en un sistema DEOS deben ser homogéneos en cuanto a capacidad y rendimiento.
¡Si tienes más preguntas, no dudes en hacerlas!
✨ Destacados
- DEOS es un sistema de archivos paralelo distribuido basado en la memoria persistente de Intel y las unidades NVMe SSD.
- La arquitectura de DEOS utiliza un enfoque de almacenamiento en niveles para maximizar el rendimiento y la eficiencia.
- DEOS ha logrado una sólida adopción en la industria, con asociaciones con varios socios de hardware y presencia destacada en la lista I/O 500.
- Las próximas características de DEOS incluyen soporte para censor ocho, codificación de borrado, reintegración de servidores y telemetría.
- La codificación de borrado y la configuración de nodos tienen limitaciones en términos de rendimiento y eficiencia.
- Los clientes DEOS varían en tamaño y archivos típicos, con despliegues que van desde pequeños sistemas de petabyte hasta grandes sistemas de varios petabytes.
📝 Preguntas frecuentes
Q: ¿DEOS tiene algún impacto en el rendimiento de las operaciones de escritura?
A: Sí, las nuevas características de DEOS, como la codificación de borrado, pueden afectar el rendimiento de las operaciones de escritura. Sin embargo, hemos diseñado DEOS de manera que minimiza este impacto y ofrece un rendimiento aceptable.
Q: ¿Puede DEOS proteger solo ciertos datos y no otros?
A: Sí, DEOS permite a los usuarios elegir qué datos desean proteger utilizando replicación o codificación de borrado. Esto ofrece flexibilidad en términos de protección de datos y eficiencia de almacenamiento.
Q: ¿Existe un límite en el tamaño de los nodos de almacenamiento en un sistema DEOS?
A: Sí, en DEOS se requiere que los nodos de almacenamiento sean homogéneos en términos de capacidad y rendimiento. Esto garantiza un funcionamiento óptimo y consistente del sistema.