Reproductibilité expérimentale
Conserver le problème, la configuration, le contexte d'exécution et l'analyse nécessaires pour examiner un résultat.

Quelqu'un pourrait-il dire si un résultat différent est issu de la méthode ou de l'installation?
Un enregistrement d'expérience devrait relier la question avec la configuration exacte utilisée pour l'étudier. Capturer les entrées, les versions d'implémentation, les paramètres d'exécution et l'environnement dans lequel le travail a fonctionné.
Redoublement distingue d'une conclusion qui se généralise. Répéter une configuration aide à examiner la variabilité dans cette configuration; il n'établit pas de comportement dans chaque instance de problème ou condition matérielle.
Conservez les observations brutes et les étapes d'analyse ensemble. Enregistrer les exclusions et les échecs plutôt que de ne préserver que le résultat le plus persuasif. Un flux de travail reproductible facilite la contestation et l'amélioration d'une revendication.
Que faire pour aller de l'avant
- Entrées et configurations en version
- Contexte et observations clairs en matière d'exécution
- Analyse transparente et exclusions
Que dois-je apporter à une conversation?
Apportez la décision que vous devez prendre, les contraintes que vous connaissez déjà et un petit exemple non confidentiel. Nous pouvons alors décider si une ressource, un examen ciblé ou une discussion plus détaillée est la prochaine étape.
