Skip to Main Content
Table 5 
Results of the two natural language inference (NLI) tasks in SentEval. SICKE = SICK entailment set. Results marked with † taken from Cífka and Bojar (2018); with ‡ from Conneau et al. (2018a).
  SNLISICKE
EN-DE k = 1 63.86 77.09 
EN-DE k = 10 65.30 78.77 
EN-DE k = 25 65.13 79.34 
EN-DE k = 50 65.30 79.36 
  
EN-ES k = 1 62.79 76.76 
EN-ES k = 10 66.02 77.65 
EN-ES k = 25 65.20 79.30 
EN-ES k = 50 65.49 78.83 
  
EN-FR k = 1 63.71 76.19 
EN-FR k = 10 65.64 78.08 
EN-FR k = 25 65.68 79.97 
EN-FR k = 50 65.47 79.14 
  
M ↔ EN k = 1 65.56 77.96 
M ↔ EN k = 10 67.01 79.48 
M ↔ EN k = 25 66.94 79.85 
M ↔ EN k = 50 67.38 80.54 
  
M ↔ M k = 1 66.92 77.82 
M ↔ M k = 50 67.73 81.12 
  
Most frequent baseline 34.30 56.70 
  
GloVe-BOW 66.00 78.20 
en → cs (2018) 69.30 80.80 
en → fi (2018a) 81.70 
Subramanian et al. (2018) 87.40 
  SNLISICKE
EN-DE k = 1 63.86 77.09 
EN-DE k = 10 65.30 78.77 
EN-DE k = 25 65.13 79.34 
EN-DE k = 50 65.30 79.36 
  
EN-ES k = 1 62.79 76.76 
EN-ES k = 10 66.02 77.65 
EN-ES k = 25 65.20 79.30 
EN-ES k = 50 65.49 78.83 
  
EN-FR k = 1 63.71 76.19 
EN-FR k = 10 65.64 78.08 
EN-FR k = 25 65.68 79.97 
EN-FR k = 50 65.47 79.14 
  
M ↔ EN k = 1 65.56 77.96 
M ↔ EN k = 10 67.01 79.48 
M ↔ EN k = 25 66.94 79.85 
M ↔ EN k = 50 67.38 80.54 
  
M ↔ M k = 1 66.92 77.82 
M ↔ M k = 50 67.73 81.12 
  
Most frequent baseline 34.30 56.70 
  
GloVe-BOW 66.00 78.20 
en → cs (2018) 69.30 80.80 
en → fi (2018a) 81.70 
Subramanian et al. (2018) 87.40 
Close Modal

or Create an Account

Close Modal
Close Modal