Busca em linguagem natural no corpus BCC baseada em grande modelo de linguagem
Tingchao Liu
,
Luming Lu
,
Endong Xun
,
Zeying Jin
,
Zhaoyong Yang
,
,
DOI:
摘要
Os corpora são essenciais na linguística e no processamento de linguagem natural. O corpus BCC da Universidade de Línguas de Pequim é rico em recursos e eficiente na busca, sendo altamente valorizado. No entanto, a complexidade das consultas BCC limita sua popularidade. Para isso, este artigo propõe o modelo TextToBCC, que visa realizar a busca do corpus BCC em linguagem natural. Primeiro, foi construído um conjunto de dados equilibrado de consultas BCC, utilizando um grande modelo de linguagem para gerar descrições em linguagem natural das consultas BCC. Em seguida, foi ajustado finamente o grande modelo de linguagem para suportar a conversão de linguagem natural para consultas BCC. Os resultados experimentais comprovam o excelente desempenho do modelo TextToBCC. Esta conquista não apenas reduz a dificuldade de uso do corpus BCC, mas também ajuda a promover sua disseminação e aplicação em áreas mais amplas, facilitando a pesquisa linguística e a prática do processamento de linguagem natural.
关键词
corpus;consulta;grande modelo de linguagem;ajuste fino