Skip to Main Content
Table 5: 

Binary-F1 scores for the Rumour Detection task and macro-F1 scores for the MNLI task.

Rumour DetectionMNLI
All CAll FRAll GWAll OSAll SAVGAll FAll GAll SLAll TEAll TRAVG
Tr-MoE 68.0 46.1 74.8 58.2 64.9 62.4 64.3 73.9 65.3 62.4 69.8 67.1 
T5-MoE 68.1 46.0 73.6 65.3 66.3 63.9 74.0 82.0 73.4 74.6 78.3 76.5 
T5-DAN 64.9 52.4 69.1 72.7 64.4 64.7 74.4 76.3 61.0 72.4 77.7 72.4 
T5-IRM 63.5 39.4 70.1 44.2 65.7 56.6 72.0 81.5 73.2 69.3 78.9 75.0 
T5-NoDA 64.1 46.9 75.1 72.0 71.0 65.8 76.4 83.5 75.5 74.9 81.3 78.3 
 
Prompt-DN 66.4 53.7 72.4 71.4 70.1 66.8 77.0 84.4 75.6 76.3 80.5 78.8 
Prompt-RDW 64.1 53.1 71.8 66.0 70.0 65.0 76.0 84.2 76.6 77.0 79.9 78.7 
Prompt-REW 64.2 54.3 71.6 70.0 69.1 65.8 75.7 81.4 76.7 78.8 81.2 78.7 
 
PADA-NP 65.8 54.8 71.6 72.2 74.0 67.7 76.2 83.6 75.4 77.2 81.4 78.8 
PADA-NM 63.6 54.1 74.3 70.1 70.3 66.5 76.0 83.7 76.5 78.0 81.0 79.0 
 
PADA 68.6 54.4 73.0 75.2 75.1 69.3 76.4 83.4 76.9 78.9 82.5 79.6 
Rumour DetectionMNLI
All CAll FRAll GWAll OSAll SAVGAll FAll GAll SLAll TEAll TRAVG
Tr-MoE 68.0 46.1 74.8 58.2 64.9 62.4 64.3 73.9 65.3 62.4 69.8 67.1 
T5-MoE 68.1 46.0 73.6 65.3 66.3 63.9 74.0 82.0 73.4 74.6 78.3 76.5 
T5-DAN 64.9 52.4 69.1 72.7 64.4 64.7 74.4 76.3 61.0 72.4 77.7 72.4 
T5-IRM 63.5 39.4 70.1 44.2 65.7 56.6 72.0 81.5 73.2 69.3 78.9 75.0 
T5-NoDA 64.1 46.9 75.1 72.0 71.0 65.8 76.4 83.5 75.5 74.9 81.3 78.3 
 
Prompt-DN 66.4 53.7 72.4 71.4 70.1 66.8 77.0 84.4 75.6 76.3 80.5 78.8 
Prompt-RDW 64.1 53.1 71.8 66.0 70.0 65.0 76.0 84.2 76.6 77.0 79.9 78.7 
Prompt-REW 64.2 54.3 71.6 70.0 69.1 65.8 75.7 81.4 76.7 78.8 81.2 78.7 
 
PADA-NP 65.8 54.8 71.6 72.2 74.0 67.7 76.2 83.6 75.4 77.2 81.4 78.8 
PADA-NM 63.6 54.1 74.3 70.1 70.3 66.5 76.0 83.7 76.5 78.0 81.0 79.0 
 
PADA 68.6 54.4 73.0 75.2 75.1 69.3 76.4 83.4 76.9 78.9 82.5 79.6 
Close Modal

or Create an Account

Close Modal
Close Modal