Suppr超能文献

基于推特的西班牙语变体区域化模型。

Regionalized models for Spanish language variations based on Twitter.

作者信息

Tellez Eric S, Moctezuma Daniela, Miranda Sabino, Graff Mario, Ruiz Guillermo

机构信息

Conacyt, Consejo Nacional de Ciencia y Tecnología., Av. Insurgentes Sur 1582, Col. Crédito Constructor., 03940 CDMX, Mexico.

INFOTEC, Centro de Investigación e Innovación en Tecnologías de la Información y Comunicación, Circuito Tecnopolo Norte, No.112 Col. Tecnopolo Pocitos II, 20326 Aguascalientes, Aguascalientes Mexico.

出版信息

Lang Resour Eval. 2023 Mar 2:1-31. doi: 10.1007/s10579-023-09640-9.

Abstract

Spanish is one of the most spoken languages in the world. Its proliferation comes with variations in written and spoken communication among different regions. Understanding language variations can help improve model performances on regional tasks, such as those involving figurative language and local context information. This manuscript presents and describes a set of regionalized resources for the Spanish language built on 4-year Twitter public messages geotagged in 26 Spanish-speaking countries. We introduce word embeddings based on FastText, language models based on BERT, and per-region sample corpora. We also provide a broad comparison among regions covering lexical and semantical similarities and examples of using regional resources on message classification tasks.

摘要

西班牙语是世界上使用最广泛的语言之一。其广泛传播伴随着不同地区书面和口头交流的差异。理解语言差异有助于提高模型在区域任务中的表现,例如那些涉及比喻语言和当地上下文信息的任务。本手稿展示并描述了一组基于在26个讲西班牙语国家进行地理标记的4年推特公开消息构建的西班牙语区域化资源。我们介绍了基于FastText的词嵌入、基于BERT的语言模型以及每个区域的样本语料库。我们还提供了各区域之间在词汇和语义相似性方面的广泛比较,以及在消息分类任务中使用区域资源的示例。

https://cdn.ncbi.nlm.nih.gov/pmc/blobs/1f25/9979884/436b9c8ef4df/10579_2023_9640_Fig1_HTML.jpg

文献检索

告别复杂PubMed语法,用中文像聊天一样搜索,搜遍4000万医学文献。AI智能推荐,让科研检索更轻松。

立即免费搜索

文件翻译

保留排版,准确专业,支持PDF/Word/PPT等文件格式,支持 12+语言互译。

免费翻译文档

深度研究

AI帮你快速写综述,25分钟生成高质量综述,智能提取关键信息,辅助科研写作。

立即免费体验