-
Notifications
You must be signed in to change notification settings - Fork 0
/
ResultSurvey0.txt
189 lines (164 loc) · 14 KB
/
ResultSurvey0.txt
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
************************************************************************************************************************
********************************* RISULTATI QUESTIONARI ~ Versione A e Versione B ************************************
************************************************************************************************************************
** VERSIONE A **********************************************************************************************************
___________________________________________________________________________________________________
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 136 CONFERME della diagnosi prodotta dall'AI. | 304 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 148 CONFERME della diagnosi prodotta dall'AI. | 292 NEGAZIONI della diagnosi prodotta dall'AI **
___________________________________________________________________________________________________
___________________________________________________________________________________________________
** Di seguito sono riportate tutte le variazioni suddivise in base alla correttezza dei casi.
** Qualora non ci fossero variazioni i dati non saranno visualizzati.
___________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE CORRETTO e SPIEGAZIONE CORRETTA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 64 CONFERME della diagnosi prodotta dall'AI. | 156 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 76 CONFERME della diagnosi prodotta dall'AI. | 144 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE ERRATO e SPIEGAZIONE ERRATA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 34 CONFERME della diagnosi prodotta dall'AI. | 54 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 35 CONFERME della diagnosi prodotta dall'AI. | 53 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE ERRATO e SPIEGAZIONE CORRETTA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 14 CONFERME della diagnosi prodotta dall'AI. | 30 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 13 CONFERME della diagnosi prodotta dall'AI. | 31 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
************************************************************************************************************************
** VERSIONE B **********************************************************************************************************
___________________________________________________________________________________________________
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 317 CONFERME della diagnosi prodotta dall'AI. | 123 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 305 CONFERME della diagnosi prodotta dall'AI. | 135 NEGAZIONI della diagnosi prodotta dall'AI **
___________________________________________________________________________________________________
___________________________________________________________________________________________________
** Di seguito sono riportate tutte le variazioni suddivise in base alla correttezza dei casi.
** Qualora non ci fossero variazioni i dati non saranno visualizzati.
___________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE CORRETTO e SPIEGAZIONE CORRETTA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 173 CONFERME della diagnosi prodotta dall'AI. | 47 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 177 CONFERME della diagnosi prodotta dall'AI. | 43 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE ERRATO e SPIEGAZIONE ERRATA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 66 CONFERME della diagnosi prodotta dall'AI. | 22 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 61 CONFERME della diagnosi prodotta dall'AI. | 27 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE CORRETTO e SPIEGAZIONE ERRATA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 64 CONFERME della diagnosi prodotta dall'AI. | 24 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 51 CONFERME della diagnosi prodotta dall'AI. | 37 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
__________________________________________________________________________________________________
** Dati relativi ai casi aventi ADVICE ERRATO e SPIEGAZIONE CORRETTA:
** PRIMA del visionamento della spiegazione testuale si sono riscontrati:
** 14 CONFERME della diagnosi prodotta dall'AI. | 30 NEGAZIONI della diagnosi prodotta dall'AI **
** DOPO il visionamento della spiegazione testuale si sono riscontrati:
** 16 CONFERME della diagnosi prodotta dall'AI. | 28 NEGAZIONI della diagnosi prodotta dall'AI **
__________________________________________________________________________________________________
************************************************************************************************************************
** OSSERVAZIONI E DIFFERENZE TRA LE VERSIONI **************************************************************************************************
__________________________________________________________________________________________________________________________________________
** PERCENTUALI ACCETTAZIONE DIAGNOSI AI:
** Di seguito sono riportate le percentuali d'accettazione della diagnosi prodotta dall'AI per le due versioni.
** 33.64 % - Percentuale conferme dell'AI per la Versione A
** 69.32 % - Percentuale conferme dell'AI per la Versione B
** Nella Versione A i rispondenti hanno quindi confermato meno frequentemente la diagnosi suggerita dall'AI in confronto alla Versione B.
__________________________________________________________________________________________________________________________________________
__________________________________________________________________________________________________________________________________________
** LA SPIEGAZIONE HA INFLUENZATO LE SCELTE DELL'UTENTE?
** Dopo la visione della spiegazione testuale i rispondenti hanno confermato la diagnosi suggerita dall'AI
** con una frequenza maggiore nella versione A. Invece, nella versione B hanno rigettato la diagnosi dell'AI con maggior
** frequenza dopo aver visionato la spiegazione testuale.
** Si sono registrate 12 CONFERME AGGIUNTIVE per la versione A. Per un totale di 148 CONFERME.
** Si sono registrate 12 NEGAZIONI AGGIUNTIVE per la versione B.
** La visualizzazione della spiegazione ha influenzato le scelte degli utenti per entrambe le versioni, convincendo alcuni utenti
** a confermare la diagnosi per la versione A e a negarla per la versione B.
__________________________________________________________________________________________________________________________________________
__________________________________________________________________________________________________________________________________________
** LA SPIEGAZIONE HA INDOTTO A PIÙ ERRORI?
** Nella versione A, precedentemente alla visualizzazione della spiegazione, l'intelligenza artificiale ha indotto l'utente
** a selezionare una diagnosi errata in 48 casi.
** Successivamente alla visualizzazione della spiegazione, l'intelligenza artificiale ha indotto l'utente
** a selezionare una diagnosi errata in 48 casi, di cui:
** - 35 aventi spiegazione errata.
** - 13 aventi spiegazione corretta.
** L'intelligenza artificiale non ha alterato gli errori compiuti dall'utente dopo la visualizzazione della spiegazione.
__________________________________________________________________________________________________________________________________________
** Nella versione B, precedentemente alla visualizzazione della spiegazione, l'intelligenza artificiale ha indotto l'utente
** a selezionare una diagnosi errata in 80 casi.
** Successivamente alla visualizzazione della spiegazione, l'intelligenza artificiale ha indotto l'utente
** a selezionare una diagnosi errata in 77 casi, di cui:
** - 61 aventi spiegazione errata.
** - 16 aventi spiegazione corretta.
** L'intelligenza artificiale ha indotto a meno errori dopo la visualizzazione della spiegazione.
__________________________________________________________________________________________________________________________________________
__________________________________________________________________________________________________________________________________________
** TEST D'IPOTESI SULL'ACCURATEZZA:
** ACCURATEZZA SULLE DIAGNOSI PRODOTTE DALL'AI e CONFERMATE DALL'UTENTE:
____________________________________________________________________________
** VERSIONE A | CORRETTI | ERRATI | TOTALE |
** PRE-SPIEGAZIONE | 88 | 48 | 136 |
** POST-SPIEGAZIONE | 100 | 48 | 148 |
** TOTALE | 188 | 96 | 284 |
____________________________________________________________________________
VALORE CHI-QUADRO: 0.25938
GRADI DI LIBERTÀ: 1
** La differenza tra le due proporzioni non è significativa al livello di probabilità 5% e 1 %.
** In conclusione, la differenza tra la correttezza delle conferme dell'AI prima e dopo il visionamento della spiegazione
** è STATISTICAMENTE NON SIGNIFICATIVA AL LIVELLO DI PROBABILITÀ 5% e 1%.
__________________________________________________________________________________________________________________________________________
____________________________________________________________________________
** VERSIONE B | CORRETTI | ERRATI | TOTALE |
** PRE-SPIEGAZIONE | 237 | 80 | 317 |
** POST-SPIEGAZIONE | 228 | 77 | 305 |
** TOTALE | 465 | 157 | 622 |
____________________________________________________________________________
VALORE CHI-QUADRO: 0.00001
GRADI DI LIBERTÀ: 1
** La differenza tra le due proporzioni non è significativa al livello di probabilità 5% e 1 %.
** In conclusione, la differenza tra la correttezza delle conferme dell'AI prima e dopo il visionamento della spiegazione
** è STATISTICAMENTE NON SIGNIFICATIVA AL LIVELLO DI PROBABILITÀ 5% e 1%.
__________________________________________________________________________________________________________________________________________
** ACCURATEZZA SULLE DIAGNOSI PRODOTTE DALL'UTENTE:
____________________________________________________________________________
** VERSIONE A | CORRETTI | ERRATI | TOTALE |
** PRE-SUGGERIMENTO | 164 | 276 | 440 |
** POST-SUGGERIMENTO | 146 | 146 | 292 |
** TOTALE | 310 | 422 | 732 |
____________________________________________________________________________
VALORE CHI-QUADRO: 11.64510
GRADI DI LIBERTÀ: 1
** La differenza tra le due proporzioni è significativa al livello di probabilità 5% e 1 %.
** In conclusione, la differenza tra la correttezza delle diagnosi prodotte dall'utente prima e dopo il visionamento del suggerimento
** è STATISTICAMENTE SIGNIFICATIVA AL LIVELLO DI PROBABILITÀ 5% e 1%.
__________________________________________________________________________________________________________________________________________
____________________________________________________________________________
** VERSIONE B | CORRETTI | ERRATI | TOTALE |
** PRE-SPIEGAZIONE | 25 | 98 | 123 |
** POST-SPIEGAZIONE | 34 | 101 | 135 |
** TOTALE | 59 | 199 | 258 |
____________________________________________________________________________
VALORE CHI-QUADRO: 0.86183
GRADI DI LIBERTÀ: 1
** La differenza tra le due proporzioni non è significativa al livello di probabilità 5% e 1 %.
** In conclusione, la differenza tra la correttezza delle diagnosi prodotte dall'utente prima e dopo il visionamento della spiegazione
** è STATISTICAMENTE NON SIGNIFICATIVA AL LIVELLO DI PROBABILITÀ 5% e 1%.
__________________________________________________________________________________________________________________________________________