Психометрична валидация за AI платформа за оценка

Предизвикателството

AI платформа за личностна оценка с рисково финансиране имаше нужда генерираното от AI съдържание да бъде проверено спрямо реални психометрични данни, а батерията ѝ от шест рамки – да достигне нужното качество на измерване.

Подходът

Изградих слой за валидация, базиран на правила и на реални корелации от над 15 000 респонденти, и с него сравних генерираното от платформата съдържание с Claude Opus и GPT. В основата стоеше класическо конструиране и валидиране на тестове – факторен анализ, преработка на въпроси, надеждност и анализ на неравностойно въздействие – върху батерия от шест рамки с над 9500 респонденти: три кръга поправки на въпроси, проверени на терен, и анализ между инструментите за съкращаване на батерията.

Ключови функции

• Слой за валидация, базиран на правила и на корелации от над 15 000 респонденти
• Сравнение на генерираното от AI съдържание с Claude Opus и GPT при откриване на психометрично напрежение
• Факторен анализ, преработка на въпроси, надеждност и анализ на неравностойно въздействие
• Батерия от шест рамки, над 9500 респонденти, три кръга поправки, проверени на терен
• Анализ между инструментите за премахване на излишни въпроси
• Свързана работа: сертификационни доклади за институти за психологическа оценка