بقلم شون جي ويستوود وجوستين جريمر وأندرو ب. هول:
نقوم بتطوير نهج جديد يضع المستخدمين في دور المقيِّم ، باستخدام مطالبات صالحة من الناحية البيئية في 30 موضوعًا سياسيًا ومقارنات مقترنة للمخرجات من 24 LLMs. مع 180126 تقييمًا من 10،007 من المجيبين الأمريكيين ، نجد أن جميع النماذج تقريبًا تعتبر ذات ميول يسارية بشكل كبير-حتى من قبل العديد من الديمقراطيين-وأن نموذج واحد يستخدم على نطاق واسع يميل في 24 من 30 موضوعًا. علاوة على ذلك ، نوضح أنه عندما يُطلب من النماذج اتخاذ موقف محايد ، فإنها توفر مزيدًا من التناقض ، ويرى المستخدمون الإخراج أكثر حيادية. بدوره ، يزيد المستخدمون الجمهوريون عن الاهتمام بشكل متواضع باستخدام النماذج في المستقبل. نظرًا لأن الموضوعات التي ندرسها تميل إلى التركيز على المقايضات المحملة بالقيمة التي لا يمكن حلها بالحقائق ، ولأننا نجد أن أعضاء كلا الطرفين والمستقلين يرون أدلة على الميل عبر العديد من المواضيع ، فإننا لا نعتقد أن نتائجنا تعكس ديناميكية يدرك فيها المستخدمون المعلومات الموضوعية والواقعية على أنها مائلة سياسية ؛ ومع ذلك ، فإننا نحذر من أن قياس تصورات الميل السياسي ليس سوى واحد من بين مجموعة متنوعة من المعايير التي قد يرغب صناع السياسة والشركات في استخدام المحتوى السياسي لـ LLMs. تحقيقًا لهذه الغاية ، يعتمد إطار عملنا عبر المستخدمين والمواضيع وأنواع النماذج ، مما يسمح للبحوث المستقبلية بفحص العديد من النتائج الأخرى ذات الصلة سياسيًا.
