С развитием технологии искусственного интеллекта и обработки естественного языка были достигнуты существенные успехи в понимании языка и генерации естественного языка, представленные моделью большого языка ChatGPT. Однако большинство исследований сначала сосредотачивались на производительности большой языковой модели в конкретных задачах, а не на оценку познавательных способностей. Во-вторых, научное сообщество в настоящее время не располагает исследованиями оценки специальных знаний и способностей в области больших языковых моделей. В данном исследовании было проведено комплексное оценивание способности GPT-4 к теоретическому фреймворку когнитивной лингвистики - теории концептуальной метафоры. Оценка проводилась на четырех уровнях, включая понимание основных терминов, понимание теоретического фреймворка, применение теоретического фреймворка, а также способность к высокоуровневому мышлению. Результаты исследования показали, что несмотря на некоторые преимущества в определенных задачах, модель страдает отклонениями в производительности, отсутствием глубоких системных знаний и способностей в области когнитивной лингвистики, и в настоящее время не достигает уровня начинающих исследователей в области когнитивной лингвистики. При использовании большой языковой модели исследователи должны дополнительно проверять генерируемое содержание вручную, чтобы получить более удовлетворительные результаты.

ChatGPT; GPT-4; Большая языковая модель; Теория концептуальной метафоры; Концептуальная метафора