La solution
En raison de la portée ambitieuse du projet, chaque activité a été définie en détail et des délais ont été attribués à chacune des parties prenantes clés du GRS et de Talogy.
Pour que le test soit réaliste quels que soient les services et les niveaux d’ancienneté, 61 entretiens approfondis avec des experts internes ont été réalisés et plus de 200 descriptions de poste ont été examinées. Une équipe de 9 psychologues de Talogy a généré 3 078 questions pour l’évaluation et le contenu a été révisé par 74 experts internes, dont 42 % étaient issus de réseaux ou d’unités de diversité. Il leur a été demandé d’évaluer et de commenter l’équité, l’inclusion et la pertinence du test.
Le test devait également être attrayant et pertinent. Par conséquent, une série de 6 ateliers a été réalisée avec 22 experts pour réviser les scripts des éléments multimédias de l’évaluation. Des efforts importants ont été investis dans l’identification d’acteurs diversifiés et talentueux pour rendre le test immersif et réaliste. Plus de 1 300 candidatures ont été reçues, parmi lesquelles 57 des meilleurs acteurs ont été retenus pour 77 rôles. Pour s’assurer que la production était aussi rentable que possible, le tournage a eu lieu dans un studio spécialisé sur fond vert. 67 vidéos ont été produites en seulement 6 jours, ce qui aurait été beaucoup plus long et coûteux si elles avaient été filmées sur site.
Le projet a impliqué une participation significative des parties prenantes avec des contributeurs de 27 professions, 98 services/agences, des réseaux de personnel, le bureau des commissaires de la fonction publique et la représentation des syndicats. Le GRS a fait un effort important tout au long du projet pour inclure les personnes handicapées dans les phases de cadrage, de mise en œuvre et de test précoce. En février 2017, le Digital Accessibility Center (DAC) a été chargé de tester le logiciel pour s’assurer qu’il respectait les bonnes pratiques en matière de normes d’accessibilité et de législation. Ce test a impliqué 10 évaluateurs de qualité, tous en situation de handicap et ayant fait l’expérience directe des obstacles qu’un site web inaccessible pouvait créer.
L’objectif final était de concevoir une évaluation en banque d’items comprenant 44 tests. Plus de 16 000 tests ont été utilisés pour analyser les biais et la validité des évaluations avant la mise en œuvre et créer des normes précises.