Nous publions la méthode avant le résultat.
Chaque chiffre de performance et de validation sur ce site est étayé par une étude consultable. Chacune est préenregistrée et verrouillée par empreinte avant l'ouverture de toute donnée d'évaluation, et rapportée avec son dénominateur, son intervalle de confiance et ses échecs.
Études publiées
Méthode
Préenregistrement
Seuils, métriques, dénominateurs et logique des règles sont figés et hachés avant toute récupération de données. Le fichier de verrouillage refuse l'exécution si quoi que ce soit a changé.
Séparation des cas retenus
Les ensembles de calibrage, de validation et de test sont séparés par organisme, non par échantillonnage. L'ensemble retenu n'est ouvert qu'une seule fois.
Publication des échecs
Cas interrompus, objectifs non atteints et axes sous-puissants sont publiés avec leurs codes de motif. Une étude qui n'atteint pas sa taille d'échantillon prévue le dit.