Este poderoso generador de texto establece una nueva barra para escribir IA – Adweek



El grupo de investigación OpenAI ha provocado la comunidad de inteligencia artificial al publicar un nuevo documento sobre la última versión de su avanzado sistema de generación de lenguaje, GPT-3. El modelo fue entrenado en un conjunto de datos más de 100 veces la cantidad de texto ya registrado que informó la versión anterior, GPT-2.

Si bien OpenAI aún no ha publicado el código detrás de GPT-3 como lo hizo con GPT-2, los resultados de los experimentos descritos en el estudio muestran grandes mejoras en La capacidad de AI para generar artículos de noticias y otros textos de sonido realista. El modelo fue entrenado en casi un billón de palabras en total, raspado en Internet con un total de 175 mil millones de parámetros para 1,5 mil millones de GPT-2. Todo el proceso de capacitación costó alrededor de $ 12 millones.

El anuncio de GPT-2 en enero de este año ha provocado una ola de titulares preocupantes sobre su potencial para ser mal utilizado para crear noticias falsas o spam a gran escala. Una agencia incluso creó un blog falso completamente creado por AI para mostrar cómo podría ser este tipo de abuso.

Debido a estos temores, OpenAI eligió publicar el sistema en piezas cada vez más grandes, y finalmente lanzó la versión de tamaño completo en el otoño después de que los investigadores determinaron que las noticias falsas Pocalypse no había venido después de todo. En cambio, GPT-2 ha estimulado una multitud de proyectos creativos, desde un juego de rol basado en IA de Dungeons and Dragons hasta una multitud de cuentas de parodia en redes sociales y Adweek Super Bowl bot. Debido a su imprevisibilidad, aún no ha experimentado una adopción comercial a gran escala, aunque varias compañías han comenzado a experimentar con el uso de la tecnología para un chatbot.

Sin embargo, el último artículo de GPT-3 vuelve a señalar amenazas como "información errónea, spam, phishing, abuso de procesos legales y gubernamentales, la redacción de ensayos académicos fraudulentos y el pretexto de la ingeniería social ".

No está claro cuáles podrían ser las implicaciones cuando y si se lanza GPT-3, con una escala más de 100 veces mayor que la de su predecesor. Cuando su lanzamiento se probó en un grupo de alrededor de 80 sujetos de prueba, los artículos de prensa falsa producidos por la versión de tamaño completo podrían engañarlos aproximadamente la mitad del tiempo. El sistema también funciona muy bien en una serie de estándares utilizados para evaluar la sofisticación del software de procesamiento del lenguaje natural, desde su capacidad para terminar oraciones en busca de respuestas correctas hasta preguntas básicas.

Quizás su mejora más notable es su versatilidad. Los modelos como GPT-2 necesitan ser "refinados" o entrenados en otro conjunto de datos más pequeño para definir un estilo particular, pero la versión de generación de concepto publicitario de Adweek ha sido entrenada en casi 5,000 descripciones Mientras tanto, GPT-3 puede dominar diferentes imitaciones con solo unos pocos ejemplos. Los investigadores descubrieron que AI fue capaz de escribir un poema viable al estilo de Wallace Stevens después de que solo le pidieran unos pocos párrafos de su prosa real. En algunos casos, GPT-3 puede superar a los modelos que se han refinado después de ver un solo aviso.

OpenAI

Este logro es el último avance en un modelo de procesamiento de lenguaje natural que ha estimulado un boom de investigación en el subcampo llamado transformador. Lanzado por Google en 2017, los transformadores permiten una amplia gama de tareas de generación de lenguaje a través de un modelo básico que ya comprende los mecanismos básicos del lenguaje, a través de horas de entrenamiento en un paquete de entrenamiento masivo. Algunos investigadores creen que los transformadores podrían conducir a otro auge de la IA en torno a los chatbots y la generación de texto de la misma manera que un conjunto de datos masivo llamado ImageNet allanó el camino para el auge actual en IA en visión artificial desde 2012.

The post Este poderoso generador de texto establece una nueva barra para escribir IA – Adweek appeared first on SEM Marketing Online.



from WordPress https://semmarketing.online/2020/06/04/este-poderoso-generador-de-texto-establece-una-nueva-barra-para-escribir-ia-adweek/

Comentarios