Skip to Main Content
Table 3:
Zero-Shot Classification Accuracy Comparison on Benchmarks.
AwAaPYCUBSUN
MethodsSSPSSSPSSSPSSSPS
DAPb 64.44 46.22 35.73 39.67 43.47 40.23 41.25 45.83 
DAP+ASa — 48.29 — 34.87 — 41.55 — 42.27 
DAP+IAS 86.65(+22.2171.88(+25.6657.12(+21.3943.06(+3.3955.35(+11.8854.22(+13.9947.85(+6.6050.56(+4.73
LatEmb 71.51 48.33 24.43 34.66 50.38 48.57 58.75 55.13 
LatEm+ASa — 59.07 — 38.82 — 52.82 — 58.09 
LatEm+IAS 81.83(+10.3267.13(+18.8047.22(+22.7948.36(+13.7056.05(+5.6752.14(+3.5759.03(+0.2856.18(+1.05
SAEb 79.19 48.48 8.33 8.33 26.41 24.65 36.94 32.78 
SAE+IAS 87.95(+8.7670.36(+21.8845.90(+37.5738.53(+30.2048.21(+21.8042.85(+18.2045.14(+8.2042.22(+9.44
MFMRb 86.06 68.04 52.16 34.09 43.09 39.55 50.49 53.33 
MFMR+IAS 87.10(+1.0471.37(+3.3358.51(+6.3537.67(+3.5851.40(+8.3147.89(+8.3458.47(+7.9858.26(+4.93
GANZrla 86.23 — — — 62.56 — — — 
GANZrl+IAS 88.51(+2.28— — — 66.76(+4.20— — — 
fVGa — 70.30 — — — 72.90 — 65.60 
fVG+IAS — 74.28(+3.98— — — 74.53(+1.63— 68.39(+2.79
LLAEa 85.24 — 56.16 — 61.93 — — — 
LLAE+IAS 88.95(+3.71— 60.88(+4.72— 64.42(+2.49— — — 
AwAaPYCUBSUN
MethodsSSPSSSPSSSPSSSPS
DAPb 64.44 46.22 35.73 39.67 43.47 40.23 41.25 45.83 
DAP+ASa — 48.29 — 34.87 — 41.55 — 42.27 
DAP+IAS 86.65(+22.2171.88(+25.6657.12(+21.3943.06(+3.3955.35(+11.8854.22(+13.9947.85(+6.6050.56(+4.73
LatEmb 71.51 48.33 24.43 34.66 50.38 48.57 58.75 55.13 
LatEm+ASa — 59.07 — 38.82 — 52.82 — 58.09 
LatEm+IAS 81.83(+10.3267.13(+18.8047.22(+22.7948.36(+13.7056.05(+5.6752.14(+3.5759.03(+0.2856.18(+1.05
SAEb 79.19 48.48 8.33 8.33 26.41 24.65 36.94 32.78 
SAE+IAS 87.95(+8.7670.36(+21.8845.90(+37.5738.53(+30.2048.21(+21.8042.85(+18.2045.14(+8.2042.22(+9.44
MFMRb 86.06 68.04 52.16 34.09 43.09 39.55 50.49 53.33 
MFMR+IAS 87.10(+1.0471.37(+3.3358.51(+6.3537.67(+3.5851.40(+8.3147.89(+8.3458.47(+7.9858.26(+4.93
GANZrla 86.23 — — — 62.56 — — — 
GANZrl+IAS 88.51(+2.28— — — 66.76(+4.20— — — 
fVGa — 70.30 — — — 72.90 — 65.60 
fVG+IAS — 74.28(+3.98— — — 74.53(+1.63— 68.39(+2.79
LLAEa 85.24 — 56.16 — 61.93 — — — 
LLAE+IAS 88.95(+3.71— 60.88(+4.72— 64.42(+2.49— — — 

Notes: Italicized numbers in brackets are relative performance gains. — indicates that no reported results are available. aResults published in the paper. bResults reproduced.

Close Modal

or Create an Account

Close Modal
Close Modal