Crean una Inteligencia Artificial que ENTIENDE TABLAS en coreano (KO-TaBERT) скачать в хорошем качестве

Crean una Inteligencia Artificial que ENTIENDE TABLAS en coreano (KO-TaBERT)

Un equipo de investigadores de LG AI Research ha desarrollado un nuevo sistema de inteligencia artificial capaz de comprender y responder preguntas sobre datos presentados en tablas, pero específicamente para el idioma coreano. Este es un desafío importante, ya que la mayoría de los sistemas existentes se centran en el inglés y en datos de texto sin formato, mientras que gran parte de la información mundial se almacena en formatos estructurados como tablas en bases de datos o en la web. Para lograr esto, crearon dos enormes conjuntos de datos en coreano. El primero, llamado KorWikiTabular, contiene 1.4 millones de tablas extraídas de la Wikipedia en coreano, que se utilizan para 'pre-entrenar' al modelo de lenguaje, enseñándole a entender la estructura y el contenido de las tablas. El segundo conjunto de datos, KorWikiTQ, consta de 70,000 pares de preguntas y respuestas sobre estas tablas, creadas por personas para entrenar al modelo en la tarea específica de responder preguntas. El modelo, llamado KO-TaBERT, se basa en la conocida arquitectura Transformer y, después de ser entrenado con estos datos, ha demostrado ser muy eficaz. Los resultados muestran que el modelo funciona bien, especialmente cuando se le presentan tablas con estructuras complejas. Este avance es significativo para el procesamiento del lenguaje natural en coreano y abre la puerta a futuras investigaciones para que la IA pueda responder preguntas aún más complejas utilizando tanto texto como tablas. Link al paper: https://arxiv.org/pdf/2201.06223 Autores del estudio: Changwook Jun, Jooyoung Choi, Myoseop Sim, Hyun Kim, Hansol Jang, Kyungkoo Min Apoyanos en   / audioarxiv   Unete en   / discord   #Ciencias de la computación #InteligenciaArtificial #CienciaDeDatos #Coreano #BigData #Tecnologia