logo logo

Búsqueda en lenguaje natural del corpus BCC basada en un gran modelo de lenguaje

Tingchao Liu ,  

Luming Lu ,  

Endong Xun ,  

Zeying Jin ,  

Zhaoyong Yang ,  

,  

摘要

Los corpus son fundamentales en la lingüística y el procesamiento del lenguaje natural. El corpus BCC de la Universidad de Lenguas de Pekín es rico en recursos y eficiente en la búsqueda, y está altamente valorado. Sin embargo, la complejidad de las consultas BCC limita su popularidad. Por ello, este artículo propone el modelo TextToBCC, cuyo objetivo es realizar la búsqueda del corpus BCC mediante lenguaje natural. Primero, se construyó un conjunto de datos equilibrado de consultas BCC usando un gran modelo de lenguaje para generar descripciones en lenguaje natural de las consultas BCC. Luego, se ajustó el gran modelo de lenguaje para soportar la conversión del lenguaje natural a consultas BCC. Los resultados experimentales demuestran el excelente rendimiento del modelo TextToBCC. Este logro no solo reduce la dificultad de uso del corpus BCC, sino que también ayuda a promover su difusión y aplicación en áreas más amplias, facilitando la investigación lingüística y la práctica del procesamiento del lenguaje natural.

关键词

corpus;consulta;gran modelo de lenguaje;ajuste fino

阅读全文