Cada avaliação da Xobin começa com uma definição de construto escrita e um mapa de relevância do trabalho que vincula cada competência ao papel que se destina a prever. Os itens são elaborados por especialistas no assunto com base nesse plano, testados em uma amostra representativa e somente então promovidos para o banco de itens ao vivo. Este é o passo que faz a diferença entre um teste que parece relevante e um teste que realmente é.
Caracterizamos cada avaliação em três eixos e documentamos cada um deles. A confiabilidade utiliza α de Cronbach, divisão ao meio e, onde existem dados de repetição, teste-reteste. Também documentamos a validade de construto por meio de análise de itens e estrutura fatorial, e validade de critério em relação a resultados reais de contratação contribuídos por clientes que optaram por participar. Itens com discriminação fraca ou dificuldade pouco clara são eliminados antes que a avaliação seja enviada, e o dossiê completo de evidências está disponível para clientes empresariais mediante solicitação.
A validade é uma afirmação sobre um teste usado em um contexto específico, não uma propriedade permanente do próprio teste. Quando o papel-alvo muda, a população de candidatos muda, ou o banco de itens é atualizado, a evidência precisa ser restabelecida. A Xobin realiza a validação como um processo contínuo com reavaliações programadas e portões de liberação. Uma avaliação que sai da tolerância é pausada, não mantida em produção silenciosamente.
Cada estudo de validação descrito aqui é realizado por trás das avaliações que as equipes de contratação realizam todos os dias. Equipes que desejam a mesma rigorosidade em suas próprias contratações podem usá-lo diretamente através de Xobin.
A metodologia descrita aqui é o que opera dentro de cada avaliação da Xobin e entrevista de IA, para que as equipes de contratação possam tomar decisões sobre talentos com base em evidências, não em instintos. Veja Xobin.