Ming3993 commited on
Commit
1fb4d47
·
1 Parent(s): f09bac6

Test: Using Vifactcheck dataset to test our framework

Browse files
Pipeline_Test_With_Vifactcheck/Full_Pipeline_Testing.ipynb ADDED
The diff for this file is too large to render. See raw diff
 
Pipeline_Test_With_Vifactcheck/abbr_map.json ADDED
@@ -0,0 +1,26 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "ko": "không",
3
+ "k": "không",
4
+ "hok": "không",
5
+ "hong": "không",
6
+ "hông": "không",
7
+ "dc": "được",
8
+ "mk": "mình",
9
+ "mik": "mình",
10
+ "b": "bạn",
11
+ "bn": "bạn",
12
+ "vs": "với",
13
+ "j": "gì",
14
+ "bh": "bây giờ",
15
+ "lm": "làm",
16
+ "ms": "mới",
17
+ "dk": "đăng ký",
18
+ "r": "rồi",
19
+ "nx": "nhận xét",
20
+ "nt": "nhắn tin",
21
+ "add": "thêm",
22
+ "ok": "được rồi",
23
+ "mn": "mọi người",
24
+ "qtq": "quan trọng quá",
25
+ "v": "vậy"
26
+ }
Pipeline_Test_With_Vifactcheck/sample_claims.json ADDED
@@ -0,0 +1,4 @@
 
 
 
 
 
1
+ {"original_claim": "Đối tượng cố gắng bỏ chạy sau khi lực lượng công an đón dừng xe để kiểm tra.", "extract_claim": "Đối tượng cố gắng bỏ chạy sau khi lực lượng công án đón dừng xe để kiểm tra.", "predict_verdict": "True", "predict_confidence": 0.9781049489974976, "predict_stance_ratio": {"Support": 0.9781049489974976, "Refute": 0.011573282070457935, "Neutral": 0.01032176148146391}, "ground_label": "True"}
2
+ {"original_claim": "Tại một địa điểm trên địa bàn huyện Củ Chi, TPHCM, Công an đã phát hiện hai nghi phạm có liên quan đến vụ việc là N. được xác định là mẹ ruột bé Th. và B. là người đàn ông xăm trổ xuất hiện trong video clip được lan truyền những ngày gần đây với nội dung bạo hành.", "extract_claim": "Tại một địa điểm trên địa bàn huyện Củ Chi, TP.HCM, Công án đã phát hiện hai nghi phạm có liên quan đến vụ việc là N. được xác định là mẹ rùột bé Th. và B. là người đàn ông xăm trổ xuất hiện trong video clip được lan truyền những ngày gần đây với nội dung bạo hành.", "predict_verdict": "True", "predict_confidence": 0.5503911972045898, "predict_stance_ratio": {"Support": 0.5503911972045898, "Refute": 0.19169528782367706, "Neutral": 0.2579135298728943}, "ground_label": "True"}
3
+ {"original_claim": "Chuỗi sự kiện “UEH Sharing - Career Fair” là hoạt động khởi đầu cho chương trình “Kết nối cộng đồng - Lan tỏa tri thức - Hành động bền vững” của Trường Đại học Kinh tế TP Hồ Chí Minh trong năm 2023.", "extract_claim": "Chuỗi sự kiện Sharing Carer Fair , là hoạt động khởi đầu cho chương trình Kết nối cộng đồng: Lan tỏa trí thức, Hành động bền vững , của Trường Đại học Kinh tế TP Hồ Chí Minh trong năm 2023.", "predict_verdict": "True", "predict_confidence": 0.9360114932060242, "predict_stance_ratio": {"Support": 0.9360114932060242, "Refute": 0.013538301922380924, "Neutral": 0.050450243055820465}, "ground_label": "True"}
4
+ {"original_claim": "Câu chuyện về cô gái Tô Thị Sự bị phỏng với việc gom rác vào buổi sáng và tối đến đi hát phòng trà đã khiến nhiều người khâm phục.", "extract_claim": "Cô gái Tô Thị Sự bị phỏng với việc gom rác vào buổi sáng và tối đến đi hát phòng trà", "predict_verdict": "True", "predict_confidence": 0.6906439065933228, "predict_stance_ratio": {"Support": 0.6906439065933228, "Refute": 0.24556079506874084, "Neutral": 0.06379532814025879}, "ground_label": "True"}
Pipeline_Test_With_Vifactcheck/selected_tags_names.txt ADDED
@@ -0,0 +1,528 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ -
2
+ a-a
3
+ a-à
4
+ a-á
5
+ a-â
6
+ a-ã
7
+ a-ă
8
+ a-ạ
9
+ a-ả
10
+ a-ấ
11
+ a-ầ
12
+ a-ẩ
13
+ a-ẫ
14
+ a-ậ
15
+ a-ắ
16
+ a-ằ
17
+ a-ẳ
18
+ a-ẵ
19
+ a-ặ
20
+ aa-aa
21
+ aaa-aaa
22
+ ae-ae
23
+ aeo-aeo
24
+ ai-ai
25
+ ai-ài
26
+ ai-ái
27
+ ai-ãi
28
+ ai-ại
29
+ ai-ải
30
+ aia-aia
31
+ aii-aii
32
+ aio-aio
33
+ ao-ao
34
+ ao-ào
35
+ ao-áo
36
+ ao-ão
37
+ ao-ạo
38
+ ao-ảo
39
+ au-au
40
+ au-àu
41
+ au-áu
42
+ au-âu
43
+ au-ấu
44
+ au-ầu
45
+ au-ẩu
46
+ au-ẫu
47
+ au-ậu
48
+ auy-auy
49
+ ay-ay
50
+ ay-ày
51
+ ay-áy
52
+ ay-ây
53
+ ay-ãy
54
+ ay-ạy
55
+ ay-ảy
56
+ ay-ấy
57
+ ay-ầy
58
+ ay-ẩy
59
+ ay-ẫy
60
+ ay-ậy
61
+ aya-aya
62
+ aye-aye
63
+ ayo-ayo
64
+ d-đ
65
+ da-đa
66
+ da-đà
67
+ da-đá
68
+ da-đâ
69
+ da-đã
70
+ da-đă
71
+ da-đạ
72
+ da-đả
73
+ da-đấ
74
+ da-đầ
75
+ da-đẫ
76
+ da-đậ
77
+ da-đắ
78
+ da-đằ
79
+ da-đẳ
80
+ da-đặ
81
+ dai-đai
82
+ dai-đài
83
+ dai-đái
84
+ dai-đãi
85
+ dai-đại
86
+ dao-đao
87
+ dao-đào
88
+ dao-đáo
89
+ dao-đạo
90
+ dao-đảo
91
+ dau-đau
92
+ dau-đáu
93
+ dau-đâu
94
+ dau-đấu
95
+ dau-đầu
96
+ dau-đẩu
97
+ dau-đậu
98
+ day-đay
99
+ day-đày
100
+ day-đáy
101
+ day-đây
102
+ day-đấy
103
+ day-đầy
104
+ day-đẩy
105
+ day-đẫy
106
+ day-đậy
107
+ de-đe
108
+ de-đè
109
+ de-đé
110
+ de-đê
111
+ de-đẹ
112
+ de-đế
113
+ de-đề
114
+ de-để
115
+ de-đệ
116
+ deo-đeo
117
+ deo-đèo
118
+ deo-đẽo
119
+ deu-đều
120
+ deu-đểu
121
+ di-đi
122
+ di-đì
123
+ di-đí
124
+ di-đỉ
125
+ di-đị
126
+ dia-đìa
127
+ dia-đĩa
128
+ dia-đỉa
129
+ dia-địa
130
+ die-điê
131
+ die-điế
132
+ die-điề
133
+ die-điể
134
+ die-điệ
135
+ diu-đìu
136
+ diu-địu
137
+ do-đo
138
+ do-đò
139
+ do-đó
140
+ do-đô
141
+ do-đơ
142
+ do-đọ
143
+ do-đỏ
144
+ do-đố
145
+ do-đồ
146
+ do-đổ
147
+ do-đỗ
148
+ do-độ
149
+ do-đớ
150
+ do-đờ
151
+ do-đỡ
152
+ do-đợ
153
+ doa-đoa
154
+ doa-đóa
155
+ doa-đọa
156
+ doi-đòi
157
+ doi-đói
158
+ doi-đôi
159
+ doi-đối
160
+ doi-đồi
161
+ doi-đổi
162
+ doi-đỗi
163
+ doi-đội
164
+ doi-đới
165
+ doi-đời
166
+ doi-đợi
167
+ du-đu
168
+ du-đù
169
+ du-đú
170
+ du-đụ
171
+ du-đủ
172
+ du-đứ
173
+ du-đừ
174
+ du-đự
175
+ dua-đua
176
+ dua-đùa
177
+ dua-đũa
178
+ dua-đưa
179
+ dua-đứa
180
+ dui-đùi
181
+ dui-đủi
182
+ duo-đuố
183
+ duo-đươ
184
+ duo-đườ
185
+ duo-đượ
186
+ e-e
187
+ e-è
188
+ e-é
189
+ e-ê
190
+ e-ẹ
191
+ e-ẻ
192
+ e-ẽ
193
+ e-ế
194
+ e-ề
195
+ e-ể
196
+ e-ễ
197
+ e-ệ
198
+ ea-ea
199
+ ee-ee
200
+ eee-eee
201
+ ei-ei
202
+ eia-eia
203
+ eo-eo
204
+ eo-èo
205
+ eo-éo
206
+ eo-ẹo
207
+ eo-ẻo
208
+ eo-ẽo
209
+ eou-eou
210
+ eu-eu
211
+ eu-êu
212
+ eu-ếu
213
+ eu-ều
214
+ eue-eue
215
+ ey-ey
216
+ eye-eye
217
+ i-i
218
+ i-ì
219
+ i-í
220
+ i-ĩ
221
+ i-ỉ
222
+ i-ị
223
+ ia-ia
224
+ ia-ià
225
+ ia-iá
226
+ ia-iã
227
+ ia-iă
228
+ ia-iả
229
+ ia-iấ
230
+ ia-iẫ
231
+ ia-iậ
232
+ ia-iắ
233
+ ia-iằ
234
+ ia-iặ
235
+ ia-ìa
236
+ ia-ía
237
+ ia-ĩa
238
+ ia-ỉa
239
+ ia-ịa
240
+ iai-iai
241
+ iai-iãi
242
+ iai-iải
243
+ iao-iao
244
+ iao-iáo
245
+ iau-iàu
246
+ iau-iấu
247
+ iay-iày
248
+ iay-iây
249
+ iay-iãy
250
+ iay-iấy
251
+ iay-iầy
252
+ ie-ie
253
+ ie-iê
254
+ ie-iẻ
255
+ ie-iẽ
256
+ ie-iế
257
+ ie-iề
258
+ ie-iể
259
+ ie-iễ
260
+ ie-iệ
261
+ iea-iea
262
+ ieo-ieo
263
+ ieu-iêu
264
+ ieu-iếu
265
+ ieu-iều
266
+ ieu-iểu
267
+ ieu-iễu
268
+ ieu-iệu
269
+ ii-ii
270
+ iii-iii
271
+ io-io
272
+ io-iò
273
+ io-ió
274
+ io-iô
275
+ io-iơ
276
+ io-iọ
277
+ io-iỏ
278
+ io-iố
279
+ io-iồ
280
+ io-iỗ
281
+ io-iờ
282
+ io-iở
283
+ io-iỡ
284
+ ioi-iòi
285
+ ioi-iỏi
286
+ ioi-iới
287
+ ioi-iời
288
+ iu-iu
289
+ iu-iù
290
+ iu-iú
291
+ iu-iụ
292
+ iu-iữ
293
+ iu-ìu
294
+ iu-íu
295
+ iu-ĩu
296
+ iu-ỉu
297
+ iu-ịu
298
+ iua-iữa
299
+ iuo-iuộ
300
+ iuo-iươ
301
+ iuo-iườ
302
+ iya-iya
303
+ o-o
304
+ o-ò
305
+ o-ó
306
+ o-ô
307
+ o-õ
308
+ o-ơ
309
+ o-ọ
310
+ o-ỏ
311
+ o-ố
312
+ o-ồ
313
+ o-ổ
314
+ o-ỗ
315
+ o-ộ
316
+ o-ớ
317
+ o-ờ
318
+ o-ở
319
+ o-ỡ
320
+ o-ợ
321
+ oa-oa
322
+ oa-oà
323
+ oa-oá
324
+ oa-oã
325
+ oa-oă
326
+ oa-oạ
327
+ oa-oả
328
+ oa-oắ
329
+ oa-oằ
330
+ oa-oặ
331
+ oa-òa
332
+ oa-óa
333
+ oa-õa
334
+ oa-ọa
335
+ oa-ỏa
336
+ oai-oai
337
+ oai-oài
338
+ oai-oái
339
+ oai-oại
340
+ oai-oải
341
+ oay-oay
342
+ oay-oáy
343
+ oe-oe
344
+ oe-oé
345
+ oe-oẹ
346
+ oe-òe
347
+ oe-óe
348
+ oe-ọe
349
+ oe-ỏe
350
+ oei-oei
351
+ oi-oi
352
+ oi-òi
353
+ oi-ói
354
+ oi-ôi
355
+ oi-õi
356
+ oi-ơi
357
+ oi-ọi
358
+ oi-ỏi
359
+ oi-ối
360
+ oi-ồi
361
+ oi-ổi
362
+ oi-ỗi
363
+ oi-ội
364
+ oi-ới
365
+ oi-ời
366
+ oi-ởi
367
+ oi-ỡi
368
+ oi-ợi
369
+ oo-oo
370
+ oo-oò
371
+ oo-oó
372
+ oo-oọ
373
+ ou-ou
374
+ oui-oui
375
+ oy-oy
376
+ oya-oya
377
+ oye-oye
378
+ oyu-oyu
379
+ u-u
380
+ u-ù
381
+ u-ú
382
+ u-ũ
383
+ u-ư
384
+ u-ụ
385
+ u-ủ
386
+ u-ứ
387
+ u-ừ
388
+ u-ử
389
+ u-ữ
390
+ u-ự
391
+ ua-ua
392
+ ua-uà
393
+ ua-uá
394
+ ua-uâ
395
+ ua-uã
396
+ ua-uă
397
+ ua-uạ
398
+ ua-uả
399
+ ua-uấ
400
+ ua-uầ
401
+ ua-uẩ
402
+ ua-uẫ
403
+ ua-uậ
404
+ ua-uắ
405
+ ua-uằ
406
+ ua-uẳ
407
+ ua-uặ
408
+ ua-ùa
409
+ ua-úa
410
+ ua-ưa
411
+ ua-ụa
412
+ ua-ủa
413
+ ua-ứa
414
+ ua-ừa
415
+ ua-ửa
416
+ ua-ữa
417
+ ua-ựa
418
+ uae-uae
419
+ uai-uai
420
+ uai-uái
421
+ uai-uại
422
+ uay-uay
423
+ uay-uây
424
+ uay-uấy
425
+ uay-uầy
426
+ uay-uẩy
427
+ uay-uậy
428
+ ue-ue
429
+ ue-uè
430
+ ue-ué
431
+ ue-uê
432
+ ue-uẹ
433
+ ue-uẻ
434
+ ue-uế
435
+ ue-uề
436
+ ue-uể
437
+ ue-uệ
438
+ uee-uee
439
+ ui-ui
440
+ ui-uí
441
+ ui-uĩ
442
+ ui-ùi
443
+ ui-úi
444
+ ui-ũi
445
+ ui-ụi
446
+ ui-ủi
447
+ ui-ửi
448
+ uo-uo
449
+ uo-uô
450
+ uo-uơ
451
+ uo-uố
452
+ uo-uồ
453
+ uo-uổ
454
+ uo-uỗ
455
+ uo-uộ
456
+ uo-uớ
457
+ uo-uở
458
+ uo-ươ
459
+ uo-ướ
460
+ uo-ườ
461
+ uo-ưở
462
+ uo-ưỡ
463
+ uo-ượ
464
+ uoi-uôi
465
+ uoi-uối
466
+ uoi-uồi
467
+ uoi-uổi
468
+ uoi-uỗi
469
+ uoi-uội
470
+ uoi-uới
471
+ uoi-uời
472
+ uoi-ươi
473
+ uoi-ưới
474
+ uoi-ười
475
+ uoi-ưởi
476
+ uoi-ưỡi
477
+ uoi-ượi
478
+ uou-ươu
479
+ uou-ướu
480
+ uou-ượu
481
+ uu-uu
482
+ uu-ưu
483
+ uu-ứu
484
+ uu-ừu
485
+ uu-ửu
486
+ uu-ữu
487
+ uu-ựu
488
+ uy-uy
489
+ uy-uý
490
+ uy-uỳ
491
+ uy-uỵ
492
+ uy-uỷ
493
+ uy-uỹ
494
+ uy-ùy
495
+ uy-úy
496
+ uy-ũy
497
+ uy-ụy
498
+ uy-ủy
499
+ uya-uya
500
+ uye-uye
501
+ uye-uyê
502
+ uye-uyế
503
+ uye-uyề
504
+ uye-uyể
505
+ uye-uyễ
506
+ uye-uyệ
507
+ uyo-uyo
508
+ y-y
509
+ y-ý
510
+ y-ỳ
511
+ y-ỵ
512
+ y-ỷ
513
+ y-ỹ
514
+ ya-ya
515
+ ye-ye
516
+ ye-yê
517
+ ye-yế
518
+ ye-yể
519
+ yea-yea
520
+ yeo-yeo
521
+ yeu-yêu
522
+ yeu-yếu
523
+ yeu-yểu
524
+ yi-yi
525
+ yo-yo
526
+ yoo-yoo
527
+ you-you
528
+ yu-yu