Skip to Main Content
Table 3: 

SpanBERT (SB) and T5 model performance for Task 2: recovering answer and QED annotations given a passage that is known to contain the answer.

Mention IdentificationMention AlignmentAnswer AccuracySentence Accuracy
PRF1PRF1
SB-QED-only 74.0 63.1 68.1 63.6 54.2 58.6 – 88.4 
SB-QA-only – – – – – – 73.0 81.5 
SB-QA+QED 77.6 64.4 70.4 68.9 57.2 62.5 74.5 90.8 
 
T5-QED-only 71.1 73.3 72.2 59.5 61.4 60.4 – 88.9 
T5-QA-only – – – – – – 78.9 88.7 
T5-QA+QED 70.3 72.3 71.3 58.3 59.9 59.1 79.2 89.1 
Mention IdentificationMention AlignmentAnswer AccuracySentence Accuracy
PRF1PRF1
SB-QED-only 74.0 63.1 68.1 63.6 54.2 58.6 – 88.4 
SB-QA-only – – – – – – 73.0 81.5 
SB-QA+QED 77.6 64.4 70.4 68.9 57.2 62.5 74.5 90.8 
 
T5-QED-only 71.1 73.3 72.2 59.5 61.4 60.4 – 88.9 
T5-QA-only – – – – – – 78.9 88.7 
T5-QA+QED 70.3 72.3 71.3 58.3 59.9 59.1 79.2 89.1 
Close Modal

or Create an Account

Close Modal
Close Modal