Comment les diplômés d’OpenClassrooms sont validés

Je reçois souvent des questions sur la façon dont on valide les compétences des étudiants sur OpenClassrooms. Quand on n’est pas habitué à notre façon de former en ligne, on a de quoi être sceptique :

  • Qu’est-ce qui prouve que l’étudiant a bien suivi les cours ?
  • Qu’est-ce qui prouve que l’étudiant n’a pas triché à ses examens avec des antisèches ?
  • Et d’ailleurs, qu’est-ce qui prouve que c’était bien lui et pas un ami qui répondait aux questions ?

Pour certains, l’examen en salle (comme au Bac) reste le plus sûr. Un surveillant passe dans les rangs, les portables sont interdits et les calculatrices ne doivent surtout pas être trop puissantes. Vous noterez que tout cela n’a jamais vraiment complètement empêché la triche (il faut dire que les étudiants peuvent être inventifs !).

Spoiler alert : la triche existe partout, y compris sur OpenClassrooms. Mais nous avons développé avec le temps un système solide que je vais vous présenter ici.


Un contrôle continu par projets

Nous avons opté pour un contrôle continu strict plutôt qu’un méga examen final. Cela nous paraît bien plus adapté.

Il faut savoir que chaque formation diplômante est articulée autour de projets à réaliser, une dizaine environ. De nombreux cours sont disponibles pour aider à compléter ces projets, mais leur lecture n’est pas obligatoire.
C’est d’ailleurs une des décisions les plus contre-intuitives et les plus importantes que j’aie eu à prendre. La lecture des cours ne prouve en effet pas grand chose, mais réaliser un projet prouve en revanche qu’on sait mettre en oeuvre des compétences.

Les multiples niveaux de validation

La validation suit plusieurs étapes. A chacune d’elles correspond une validation supplémentaire :

  1. L’étudiant est accompagné par son mentor chaque semaine en visioconférence. Le mentor est un expert du métier. Il voit l’étudiant progresser petit à petit sur le projet, le conseille, l’encourage. Il prend des notes sur ses progrès, alerte quand l’étudiant risque de décrocher.
    Lorsque le mentor estime que le projet est terminé, il passe la main à un évaluateur, un autre expert choisi aléatoirement.
  2. L’évaluateur interroge l’étudiant sur son projet en visioconférence en direct. La vidéo est enregistrée et ajoutée au dossier de l’étudiant. On lui demande comment il a fait, on lui pose des questions pour vérifier qu’il maîtrise son projet. Souvent, cela prend la forme d’un jeu de rôle.
    Si l’évaluateur considère que l’étudiant n’a pas entièrement acquis les compétences, il l’invite à améliorer son projet. Cela arrive à la plupart des étudiants et n’est absolument pas considéré comme un échec.
  3. Dès que le projet est validé, l’étudiant passe au projet suivant avec son mentor. Les étapes 1 et 2 sont donc répétées jusqu’à ce que tous les projets soient validés.
  4. En parallèle, des évaluateurs sont invités à regarder des vidéos de soutenance aléatoires et à donner leur avis : auraient-ils validé ce projet-là ou non ? Ils ne savent pas ce que l’autre évaluateur a décidé, ce qui nous permet de repérer des écarts.
  5. A tout moment, en cas de suspicion de fraude, on peut nous alerter via un système de signalement (whistleblowing). Nous enquêtons le plus souvent pour des suspicions de plagiat (qui ne sont pas toujours avérées).
  6. Ce n’est pas fini ! Une fois tous les projets validés, le dossier de l’étudiant passe entre les mains du jury du diplôme. Le jury est composé d’experts du métier, de recruteurs et de l’équipe pédagogique d’OpenClassrooms avec un mentor. Ce jury regarde les documents à sa disposition :
    • Les notes hebdomadaires du mentor sur le progrès de l’étudiant
    • Les documents et projets réalisés par l’étudiant
    • Les vidéos des sessions de validation
  7. Si le jury rend un verdict positif sur son travail, l’étudiant se voit délivrer son diplôme. Ouf !
    En cas de doute, le jury demandera à l’étudiant de réaliser un projet supplémentaire et à le rencontrer si nécessaire. Cela arrive rarement (moins de 5% des cas en moyenne) car le système de validation continu est rigoureux, mais cela arrive.
La validation multi-niveaux d’OpenClassrooms

Un système solide… qui ne peut être 100% parfait

Comme vous le voyez, le système de validation multi-niveaux d’OpenClassrooms est assez unique en son genre. Il est exigeant et rigoureux. Je ne suis pas objectif puisque j’ai contribué à le mettre en place, mais je le pense sincèrement : de multiples garde-fous sont présents tout au long du processus.

Est-ce un système parfait pour autant ? Non. Par ailleurs, nous avons régulièrement des alertes d’étudiants qui auraient plagié les projets d’autres étudiants via notre système de whistleblowing. Parfois ce sont de fausses alertes, parfois ce sont de vrais cas qui nous poussent à intervenir. Mais pour moi, c’est aussi un signe que le système fonctionne : on ne peut pas empêcher les tentatives de triche, mais on peut les repérer.

Toutes ces vérifications ont un coût que nous assumons car cela nous semble être la chose juste à faire. Nous allons continuer à améliorer ce système avec le temps, en particulier l’analyse aléatoire en double aveugle entre évaluateurs qui vient de démarrer cette année !

Et pour vous, qu’est-ce qui fait un bon système d’évaluation ?