تعتمد هذه الدراسة على نظرية استجابة العنصر، وتقارن بين ثلاث أنماط لصياغة الأسئلة في اختبار القراءة متعددة الخيارات للغة الإنجليزية يقودها الخبراء، والذكاء الاصطناعي، والتعاون بين الإنسان والآلة، لتقييم حدود قدرة الذكاء الاصطناعي في صياغة الأسئلة وإمكانات التعاون بين الإنسان والآلة. أظهرت النتائج: 1) من حيث الصلاحية المضمونية، كانت أداء أوراق الخبراء هو الأفضل، وأوراق التعاون بين الإنسان والآلة الأقل مثالية؛ 2) من حيث الصلاحية البنيوية، كانت أوراق الخبراء الأعلى من حيث الثبات، وكانت مطابقة البنية أفضل بشكل ملحوظ من أوراق التعاون والذكاء الاصطناعي؛ 3) من حيث الصلاحية الارتباطية المعيارية، فقط أوراق الخبراء كانت ذات ارتباط ملحوظ مع درجات CET-4، ولم تظهر أوراق التعاون والذكاء الاصطناعي قدرة تنبؤية فعالة. كشفت الدراسة أن نمط التعاون "تصميم الخبراء للأسئلة + توليد الذكاء الاصطناعي للخيارات" لم يرفع جودة صياغة الأسئلة، بل أدى إلى انخفاضها، لذا هناك حاجة ماسة لإعادة بناء نموذج التعاون بين الإنسان والآلة، واستكشاف آليات تعاون جديدة مثل "الفرز الأولي بواسطة الذكاء الاصطناعي - تحسين الخبراء".

التعاون بين الإنسان والآلة في صياغة الأسئلة;الصلاحية;اختبار القراءة الإنجليزية;الاختيار من متعدد