التوليد
آلاف الأسئلة المرشّحة، تُكتب وفق مواصفات تصميم دقيقة وترتبط بسلوكيات محدّدة.
غيّر الذكاء الاصطناعي طريقة تصميم الاختبار، لكنه لم يغيّر طريقة إثباته. تعرض هذه الصفحة ما بنيناه به والأدلة خلف كل جزء، وهي أعمق من بقية الموقع عن قصد.
قبل أن أصبح عالم نفس صناعي وتنظيمي، درستُ هندسة الطيران والفضاء في جامعة الملك فهد للبترول والمعادن في التسعينيات، حين صارت الحواسيب قادرة على محاكاة العالم المادي وتوقّف التصميم عن أن يكون بناءً ثم تجربة. واليوم يحصل علم النفس على نفقه الهوائي، فالمحاكاة تجد التصميم، والناس يُثبتونه.
المنهج نفسه بنى إطار السلوكيات، ومجموعة الشخصية، ومشاهد الحكم الموقفي، واختبار الاستدلال. تستغرق الخطوات الأربع الأولى يوماً لكل منها، وتأخذ الخامسة ما تحتاجه من وقت.
آلاف الأسئلة المرشّحة، تُكتب وفق مواصفات تصميم دقيقة وترتبط بسلوكيات محدّدة.
يُفحص كل سؤال من حيث هدفه ومستوى قراءته وأي صياغة قد تُضرّ بمجموعة ما، فإما أن يُعدَّل وإما أن يُحذف.
قراءة لبنية الأسئلة نفسها، تُظهر أيّها يُرجَّح أن يعمل جيداً قبل أن يجيب عنه أحد.
يجيب عن كل سؤال جديد القرناءُ، وهم توائم رقمية للأشخاص الذين جرت معايرة الاختبار عليهم، قبل أن يصل إلى أي متقدّم.
كل اختبار دون استثناء، لأن المحاكاة تجد التصميم والتجربة تُثبته.
تُفحص أحكام الخبراء من حيث اتفاقهم قبل أن تصبح مفتاحاً للتصحيح، وتُقارَن كل مرحلة يتولّاها نموذج ببيانات بشرية على المحتوى نفسه. ويعرض الشكل المثال الذي ننشره، إذ يُقارَن التحليل العاملي الافتراضي لمجموعة أسئلة بتحليل عاملي تقليدي لإجابات حقيقية عن الأسئلة نفسها.
ويقطع التحليل العاملي الافتراضي معظم الطريق وحده، وهذا كل ما يُطلب منه، لأن مهمته أن يحدّد أيّ الأسئلة تذهب إلى التجربة، لا أن يحلّ محلّها.
| مطابقة العوامل | مطابقة الجوانب | |
|---|---|---|
| MiniLM-L6 22M | 70 | 55 |
| MiniLM-L12 33M | 69 | 54 |
| mpnet-base 110M | 74 | 66 |
| المجموع 3 نماذج | 79 | 70 |
| التحليل الفعلي 790 استمارة | 78 | 89 |
| التشابه الدلالي (mpnet) | الارتباط البوليكوري | |
|---|---|---|
| داخل الجانب | .45 | .55 |
| داخل العامل، بين الجوانب | .25 | .31 |
| بين العوامل | .18 | .11 |
يقرأ التحليل العاملي الافتراضي بنية السؤال، لكنه لا يخبركم كيف سيجيب الناس عنه. لذلك، قبل أن يصل سؤال جديد إلى أي متقدّم، يجيب عنه القرناء، وهم توائم رقمية للموظفين الذين جرت معايرة اختبار الشخصية عليهم، وكل قرين مبني من إجابات شخص واحد ويجيب عن أسئلة لم يرها ذلك الشخص من قبل.
واختبرنا القرناء كما نختبر كل شيء آخر، بمحاولة كسرهم. فأخفينا أسئلة سيئة عمداً بين أسئلة جيدة، أسئلة متحيّزة للجنس أو العمر أو مزدوجة أو مفتاحها خاطئ، فالتقطت تجربة القرناء أغلبها تقريباً. وهي لا تحلّ محلّ التجربة البشرية التي تجري في كل مرة، لكنها تعني أن من يشاركون فيها يجيبون عن أسئلة مرّت بالنفق قبلهم.
المصدر: The Pilot Before the Pilot، تقرير فني لمرآي، 2026. اقرأوه على Open Science Framework
يُحكم على اختبار التوظيف بمدى تنبّئه بالأداء، لكن الأداء في أغلب المؤسسات تقدير عام واحد من مدير واحد. وكان يُفترض بنماذج الجدارات أن تعالج ذلك، لكن أكثرها يُكتب في ورشة من يومين. أما إطارنا فبُني من الأدلة المنشورة، 898 عبارة سلوكية من 46 مصدراً تغطّي أربعة عقود من البحث، وخرجت بنيته من تلك المادة لا من غرفة يتّفق فيها الناس مع بعضهم.
السلوكيات السبعة والسبعون كلها، مرتّبة بحسب قربها من بعضها. ولم تُحدَّد المجموعات الست بعد ذلك، بل هي حيث تجمّعت السلوكيات من تلقاء نفسها. اسحبوا أو كبّروا أو انقروا على أي سلوك لتروه ومصدره.
لم تكن المعايير القديمة لتوثيق الاختبار كافية لأي أحد من خارج الناشر كي يتحقّق من ادعاءاته، لذلك ننشر العمل الذي يقف خلف اختباراتنا.
ستة عوامل واثنتا عشرة سمة وأربعة وعشرون جانباً، جرت معايرتها على 662 موظفاً. ودراسة التحقّق منشورة بتقريرها ونتائج فرضياتها وسجل تحليلها، والدليل الفني يتجاوز مئتي صفحة.
شاهدوهيُوثَّق كل مخزون مشاهد من أوله إلى آخره، من مصدر كل مشهد ومن اعتمده إلى طريقة اشتقاق المفتاح وما أظهرته فحوص العدالة. ولا تبدأ مرحلة قبل أن يعتمد عالم نفس مُسمّى المرحلة التي قبلها.
شاهدوهخلف الآلية التي تُمسكونها اختبار متكيّف تقليدي بمخزون أسئلة مُعايَر، فتقع كل الدرجات على مقياس واحد أياً كانت الأسئلة التي رآها الشخص، ويُوثَّق عمل التصميم بالطريقة نفسها التي يُوثَّق بها كل ما في هذه الصفحة.
شاهدوهنُجري دراسات مشتركة مع الجامعات والممارسين، ونتيح اختباراتنا وبياناتنا للبحث الأكاديمي.
القول بصلاحية أي اختبار لا يساوي أكثر مما يمكنك التحقّق منه. ونتائجنا منشورة على Open Science Framework وGitHub ومعها البيانات والشيفرة. ينشر أغلب مقدّمي الاختبارات كتيّباً دعائياً ويحجبون من الأدلة ما لا يبدو في صالحهم. أما نحن فننشر الدراسة كاملة لا ملخّصها. فما توقّعنا أن نجده، وما وجدناه، وكيف حلّلناه، والشيفرة التي أجرت التحليل، كلها في العلن.
سنبني أول مشهد له ونعرضه عليكم، لتروا الشيء نفسه بدل أن تقرأوا عنه.