Turing-NLG de Microsoft tiene 17.000 millones de párametros de lenguaje

20 febrero, 2020
9 Compartido 1,193 Visualizaciones

Es el mayor modelo de lenguaje de parámetros  que ha existido. Han presentado una demostración libre del modelo que ha respondido a preguntas y ha realizado resúmenes; este modelo tiene fines académicos y de investigación.

La compañía Microsoft ha publicado en su propio blog un resumen de la presentación de este modelo que ha sido realizado por el propio programa.

Mejorar los modelos de lenguaje de aprendizaje masivo (las siglas en ingles son LM) ha permitido que las respuestas a preguntas, los agentes conversacionales y la comprensión de documentos sean mucho mejor de lo que ya eran. Esta nueva herramienta tendrá varias aplicaciones, entre las que se encuentran ayudar a los autores a componer su contenido, realizar resúmenes de textos extensos o mejorar la experiencia de los clientes con asistentes digitales. Este modelo ha recibido el nombre de Turing Natural Language Generation (T-NLG), el modelo más grande jamás publicado con 17 mil millones de parámetros. La creación de este modelo ha sido gracias a la biblioteca DeepSpeed ​​(compatible con PyTorch) y el optimizador ZeRO.

Microsoft ya ha lanzado una demostración privada de T-NLG a un pequeño conjunto de usuarios dentro de la comunidad académica para hacer pruebas iniciales y poder mejorarlo.

Beneficios del sistema

T-NLG es un modelo de lenguaje generativo basado en transformadores, lo que significa que puede generar palabras para completar tareas textuales abiertas. Esto es muy importante para las tareas de PNL, ya que responde de manera directa, precisa y fluida; provocando la sensación de estar hablando con un humano.  Anteriormente, los sistemas de respuesta y resumen de preguntas se basaban en la extracción de contenido existente de documentos que podían servir como respuesta o resumen suplente, pero a menudo parecían antinaturales o incoherentes. T-NLG puede responder preguntas sobre un documento personal o incluso un hilo de correo electrónico.

Te podría interesar

Google Cloud y Lufthansa llegan a un acuerdo para optimizar las operaciones de la aerolínea
Actualidad
8 compartido1,141 visualizaciones
Actualidad
8 compartido1,141 visualizaciones

Google Cloud y Lufthansa llegan a un acuerdo para optimizar las operaciones de la aerolínea

Redacción BDM - 21 enero, 2020

Google Cloud impulsará con su tecnología la nueva plataforma de operaciones del Grupo Lufthansa. Google Cloud ha anunciado que Lufthansa Group, la aerolínea más grande del mundo…

Siemens muestra a la industria catalana cómo conseguir una fábrica inteligente
Actualidad
6 compartido933 visualizaciones
Actualidad
6 compartido933 visualizaciones

Siemens muestra a la industria catalana cómo conseguir una fábrica inteligente

Vicente Ramírez - 4 junio, 2018

Con el tour ‘Alcanza tus sueños’, la compañía ha visitado ocho ciudades españolas para dar a conocer las principales herramientas con las que responde a los retos…

«Estamos trabajando nuevas formas de pago a través de Chatbots, Inteligencia Artificial o Comercio conversacional»
Actualidad
321 compartido3,974 visualizaciones
Actualidad
321 compartido3,974 visualizaciones

«Estamos trabajando nuevas formas de pago a través de Chatbots, Inteligencia Artificial o Comercio conversacional»

Samuel Rodríguez - 28 mayo, 2018

Hablamos con Alberto López, Director de Pagos Digitales, Desarrollo de Producto e Innovación de Mastercard para España y Portugal. Alberto está al frente de las tecnologías relacionadas…

Dejar comentario

Su email no será publicado

Este sitio usa Akismet para reducir el spam. Aprende cómo se procesan los datos de tus comentarios.