¡Comienza una nueva era de NovelAI ahora!

Tabla de Contenidos

1. Introducción
2. La llegada de la pintura a la imagen gen
3. Los nuevos módulos de TextGen V2
4. Cleo: La modelo personalizada
5. Increíbles características de Cleo
6. Clio: Un modelo de prueba
7. El desafío de entrenar grandes modelos de lenguaje
8. Opus: Los primeros en disfrutar de Cleo
9. Próximas novedades y agradecimientos
10. Conclusión

🖌️ La llegada de la pintura a la imagen gen

¡Hola a todos! Espero que estén bien. Antes de empezar, déjenme presentarles a este Lindo perrito bailando. Ahora que les he capturado la atención, quiero hablarles sobre una emocionante novedad relacionada con la generación de texto.

En primer lugar, quiero mencionar que estamos llevando la pintura a la imagen gen. Sé que no es generación de texto, pero no me miren así. Miren a este adorable perro en su lugar. ¿No es encantador? Muy bien, ahora que todos los demás dejaron de mirarme y están contentos, permítanme explicarles cómo funciona.

Los nuevos módulos de TextGen V2

Hoy tenemos dos noticias emocionantes relacionadas con la generación de texto. Primero que nada, los módulos de Andrew y Terpy han sido actualizados a la versión V2. Pero no son solo módulos comunes y corrientes, ¡son de la versión V2!

Estos módulos no solo sustituyen completamente a los originales, sino que también presentan algunas novedades adicionales. Por aquí, tenemos algunos más... y aquí están el resto. Como podrán ver, hay muchos.

No se preocupen, eso no es todo. Hemos estado trabajando arduamente en nuestra cocina y tenemos algunas delicias en nuestro Slack, como huevos fritos, sushi y pollo asado. Pero hoy tengo la oportunidad de presentarles nuestro último bocado: Cleo.

🚀 Cleo: La modelo personalizada

Cleo es nuestro primer modelo personalizado creado completamente en nuestra casa, con la ayuda de nuestro gran clúster h100 llamado Shaggy. Hemos entrenado a Cleo desde cero, con un tokenizador personalizado, un conjunto de datos pre-entrenado de 6 terabytes, un afinamiento personalizado y un modelo pre-entrenado personalizado. Todo esto está enfocado en brindarles lo mejor de lo mejor en lo que hacemos: contar historias.

Cleo es realmente impresionante. Ha sido entrenada con 1.5 billones de tokens y tiene un mejor sentido del conocimiento general y mejores resultados de evaluación que cualquier otro modelo de IA disponible en la actualidad, incluido Creek. En realidad, Cleo tiene el puntaje de Lambada más alto entre todos los modelos de tamaño similar, alcanzando un 73 por ciento, superando todas nuestras expectativas.

Pero eso no es todo. Cleo también presenta una capacidad sorprendente: ¡puede manejar hasta 8192 tokens de contexto! Y todo esto viene en un paquete pequeño y veloz de solo 3B de parámetros.

Cleo es nuestro modelo de prueba, un ejemplo de lo que podemos lograr. Demostramos que entrenar un modelo de lenguaje grande no es una tarea fácil, todo lo contrario, es todo un desafío. A través de Cleo, hemos perfeccionado nuestro proceso de entrenamiento, resolviendo problemas en los conjuntos de datos y superando obstáculos. Esto ha valido la pena, ya que hemos comenzado a entrenar modelos aún más grandes, pero eso es Algo que les contaré en el futuro.

Como Cleo todavía está en una etapa experimental, permitiremos que nuestros suscriptores de Opus lo utilicen primero para que podamos mejorar cualquier detalle final. El resto de ustedes podrán disfrutar de Cleo en dos semanas, listo para jugar y disfrutar.

En nombre de todo el equipo, les agradecemos enormemente su paciencia y su apoyo constante. Tenemos muchas cosas más emocionantes reservadas para este año y esperamos que estén tan emocionados como nosotros.

¡Ahora sí, a disfrutar del resto de este genial beat!

⭐ Destacados

• La llegada de la pintura a la imagen gen
• Nuevos módulos de TextGen V2
• Cleo: El modelo personalizado
• Increíbles características de Cleo
• Desafíos del entrenamiento de grandes modelos de lenguaje
• Opus: Los primeros en disfrutar de Cleo
• Próximas novedades y agradecimientos

Preguntas Frecuentes

P: ¿Qué es la pintura en la imagen gen? R: La pintura en la imagen gen es una nueva funcionalidad que permite agregar colores y palabras a las imágenes generadas por el modelo.

P: ¿Cuáles son las mejoras de los módulos de TextGen V2? R: Los módulos de TextGen V2 presentan mejor rendimiento y nuevas funcionalidades en comparación con los módulos originales.

P: ¿Qué hace a Cleo tan especial? R: Cleo es un modelo personalizado entrenado desde cero con una gran cantidad de datos. Tiene un mejor conocimiento general y supera a otros modelos de IA en términos de evaluación y capacidad de contexto.

P: ¿Cuándo estará disponible Cleo para todos los usuarios? R: Cleo estará disponible para todos los usuarios en dos semanas después de su lanzamiento inicial para los suscriptores de Opus.

P: ¿Qué otros proyectos emocionantes podemos esperar en el futuro? R: El equipo tiene planeadas muchas novedades emocionantes para este año. Manténganse atentos para más detalles.