Skip to Main Content
Table 3: 
Stability analysis.
ED
avgmaxminstd
R-PERL 84.6 85.8 83.1 0.7 
PERL 85.2 86.0 84.4 0.4 
Fine-tuned BERT 81.3 83.2 79.0 1.2 
BERT 75.0 76.8 70.6 1.8 
PBLM 71.7 79.3 65.9 3.4 
HATN 73.7 81.1 53.9 10.7 
 
BK 
 avg max min std 
R-PERL 89.5 90.5 88.8 0.5 
PERL 89.4 90.2 88.8 0.3 
Fine-tuned BERT 86.9 87.7 84.9 0.8 
BERT 81.1 82.5 78.6 1.1 
PBLM 78.6 84.1 71.3 3.3 
HATN 76.8 82.8 59.5 7.7 
 
AB 
 avg max min std 
R-PERL 75.3 79.0 72.0 1.7 
PERL 73.9 77.1 70.9 1.7 
Fine-tuned BERT 72.1 74.2 68.2 1.7 
BERT 69.9 73.0 66.9 1.8 
PBLM 64.2 71.6 60.9 2.7 
HATN 57.6 65.0 53.7 3.5 
 
KA 
 avg max min std 
R-PERL 85.3 86.4 84.6 0.5 
PERL 83.8 84.9 81.5 0.9 
Fine-tuned BERT 77.8 82.1 67.1 4.2 
BERT 70.4 74.0 65.1 2.6 
PBLM 76.1 86.1 66.2 6.8 
HATN 72.1 79.2 53.9 9.9 
ED
avgmaxminstd
R-PERL 84.6 85.8 83.1 0.7 
PERL 85.2 86.0 84.4 0.4 
Fine-tuned BERT 81.3 83.2 79.0 1.2 
BERT 75.0 76.8 70.6 1.8 
PBLM 71.7 79.3 65.9 3.4 
HATN 73.7 81.1 53.9 10.7 
 
BK 
 avg max min std 
R-PERL 89.5 90.5 88.8 0.5 
PERL 89.4 90.2 88.8 0.3 
Fine-tuned BERT 86.9 87.7 84.9 0.8 
BERT 81.1 82.5 78.6 1.1 
PBLM 78.6 84.1 71.3 3.3 
HATN 76.8 82.8 59.5 7.7 
 
AB 
 avg max min std 
R-PERL 75.3 79.0 72.0 1.7 
PERL 73.9 77.1 70.9 1.7 
Fine-tuned BERT 72.1 74.2 68.2 1.7 
BERT 69.9 73.0 66.9 1.8 
PBLM 64.2 71.6 60.9 2.7 
HATN 57.6 65.0 53.7 3.5 
 
KA 
 avg max min std 
R-PERL 85.3 86.4 84.6 0.5 
PERL 83.8 84.9 81.5 0.9 
Fine-tuned BERT 77.8 82.1 67.1 4.2 
BERT 70.4 74.0 65.1 2.6 
PBLM 76.1 86.1 66.2 6.8 
HATN 72.1 79.2 53.9 9.9 
Close Modal

or Create an Account

Close Modal
Close Modal