Synchronie City

Résultats de l'expérience E6

( = recherche de biais )

du 11 août au 23 août 2018

Comptes arrétés à 1000 résultats

* * *

 
HA
HB
Evaluation
Probabilité
1 Nombre total de tirages
1351
1383
Non significatif
2 Nombre total de tirages identiques (HA+HA ou HB+HB)
336
352
Non significatif
3 Nombre de tirages ayant fait l'objet d'une réaction
967
1033
Non significatif
4 Nombre de tirages identiques ayant fait l'objet d'une réaction
234
267
Non significatif
5 Nombre de tirages validés
526
532
Non significatif
6 Nombre de validations d'image
234
257
Non significatif
7 Nombre de validations de légende
292
275
Non significatif
8 Nombre de doubles validations (image + légende)
97
92
Non significatif
9 Nombre de rejets d'image seule
10
17
Non significatif
10 Nombre de rejets de légende seule
7
5
Non significatif
11 Nombre de doubles rejets (image + légende)
65
82
Non significatif
12 Nombre de tirages rejetés
82
104
Non significatif
13 Nombre de tirages décisifs sur validation d'image seule
7
14
Non significatif
14 Nombre de tirages décisifs sur validation de légende seule
14
22
Non significatif
15 Nombre de tirages décisifs sur double validation
124
100
Non significatif
16 Nombre total de tirages décisifs
145
136
Non significatif
17 Nombre d'actes décidés sur image seule
2
3
Non significatif
18 Nombre d'actes décidés sur légende seule
3
5
Non significatif
 
19 Nombre d'actes décidés sur double validation
36
44
Non significatif

HA = tirage au sort supposé sensible au futur

HB = HA

Résultat E6: absence de biais

Expériences précédentes: E1 E2 E3 E3b E4 E4b E5

* * *

Discussion

Cette expérience avait pour but comme pour E2 (mais non précisé d'avance) de détecter un éventuel biais pouvant expliquer les résultats significatifs de l'expérience E5, en particulier sur les scores du nombre total de tirages (en aveugle), sachant qu'un excès significatif de HA sur HB est le principal résultat attendu.

Tous les résultats ci-dessus étant non significatifs, la recherche de biais est négative, ce qui confirme les résultats des expériences E3 à E5.

Sur le principal écart attendu, nous avons même un léger excès non significatif de 32 points de HB devant HA (1383 contre 1351), à l'inverse de l'écart attendu et significatif de 96 points de HA devant HB (1280 contre 1184) de l'expérience E5 (de probabilité 1/36), et de l'écart cumulé de 274 points sur l'ensemble des expériences valides (de probabilité 1/110).

La seule différence entre les expériences E5 et E6 est la suppression (mise en commentaires) dans le code de l'application de la ligne de programme attribuant à HB un tirage qualifié de "peu sensible au futur", avec en conséquence HB = HA.

Tous les tirages de E6 étaient donc sensibles au futur et il n'y avait donc plus aucune raison pour que le score de HA dépasse celui de HB (=HA) de manière significative, ce qui a bien été observé.

Conclusion générale (E1 à E6)

L'expérience E6 confirme l'absence de biais sur les expériences préliminaires E3 à E5, lesquelles sont donc un succès, de par la reproductibilité sur ces 3 expériences du principal écart attendu sur les tirages en aveugle, dont la probabilité qu'il soit du au hasard est de 1/110. A noter qu'en ce qui concerne E3, cet écart n' a commencé à se creuser qu'après la correction de biais (clicks rapprochés en faveur de HB) qui a été effectuée au milieu de l'expérience E3.

Par contre, en ce qui concerne les écarts attendus sur les validations, ils n'ont pas été reproduits par E5. Le seul résultat observé comme significatif dans E3 et qui a été reproduit dans E5 est celui qui porte sur les validations de légendes, parvenu à p=1/1000 durant E5 mais effondré en fin d'expérience. Si l'on considère maintenant l'anomalie sur les rejets enregistrée durant E4, on peut en déduire que les validations pourraient être sujettes à une double tendance: (1) reconnaissance de l'information du futur et (2) rejet ou résistance devant l'information du futur. Le résultat final dépend alors du phénomène dominant sur l'ensemble des participants. C'est la seule explication qui permet de comprendre à mon sens pourquoi l'expérience visite les deux extrèmes à travers un effet yoyo plusieurs fois observé en cours d'expérience.

L'absence de reproductibilité dans E5 des résultats des campagnes précédentes ne doit pas faire oublier un résultat important apparu dans le cumul de E3 et E4: le nombre de tirages décisifs sur double validation (image + légende) avait une probabilité de se produire égale à 1/144. On peut alors attribuer cette non reproductibilité dans E5 à différents facteurs: le changement de protocole et/ou une baisse de motivation ou de fréquentation au mois d'août, qui nous a conduit à stopper cette dernière campagne à seulement 1000 enregistrements, alors que le cumul de E3+E4 correspond à 4000 enregistrements.

La conclusion générale à tirer de toutes les expériences préliminaires est donc la suivante:

* * *