logo logo

Поиск по корпусу BCC на естественном языке на основе большой языковой модели

Tingchao Liu ,  

Luming Lu ,  

Endong Xun ,  

Zeying Jin ,  

Zhaoyong Yang ,  

,  

摘要

Корпусы имеют решающее значение в лингвистике и обработке естественного языка. BCC корпус Пекинского лингвистического университета богат ресурсами и обладает эффективным поиском, вызывая высокую оценку. Тем не менее, сложность поискового запроса BCC ограничивает его распространение. В связи с этим в данной статье предложена модель TextToBCC с целью реализации поиска корпуса BCC на естественном языке. Во-первых, был построен сбалансированный набор данных поисковых запросов BCC с использованием большой языковой модели для генерации описаний на естественном языке поисковых запросов BCC. Во-вторых, была донастроена большая языковая модель для поддержки преобразования с естественного языка в поисковый запрос BCC. Экспериментальные результаты показывают превосходную производительность модели TextToBCC. Этот результат не только снижает сложность использования корпуса BCC, но и способствует его распространению и применению в более широких областях, что облегчает лингвистические исследования и практику обработки естественного языка.

关键词

корпус;поисковый запрос;большая языковая модель;тонкая настройка

阅读全文