| family,model,tag,contr_ent_short,contr_ent_medium,contr_ent_long,contr_bg_short,contr_bg_medium,contr_bg_long,irrel_ent_short,irrel_ent_medium,irrel_ent_long,irrel_bg_short,irrel_bg_medium,irrel_bg_long,Avg | |
| ALIGN,align-base,coyo700m,63.33333333,55.41666667,51.25,50,50,50,77.5,57.5,50,50,50,50,54.58333333 | |
| CLIPS,CLIPS-Large-14-224,recap-datacomp1b,56.66666667,62.91666667,52.08333333,50,50,50,77.08333333,62.91666667,53.33333333,50,50,50,55.41666667 | |
| CLIPS,CLIPS-Large-14-336,recap-datacomp1b,58.33333333,62.91666667,52.91666667,50,50,50,77.08333333,63.75,54.16666667,50,50,50,55.76388889 | |
| CLIPS,CLIPS-Huge-14-224,recap-datacomp1b,72.5,62.08333333,48.75,50,50,49.16666667,85.41666667,62.08333333,52.5,50,50,49.16666667,56.80555556 | |
| DreamLIP,dreamlip-vitb16,cc3m-long,68.33333333,53.75,51.25,50,50,50,67.91666667,53.33333333,49.16666667,50,50,50.83333333,53.71527778 | |
| DreamLIP,dreamlip-vitb16,cc12m-long,61.66666667,55.41666667,47.91666667,50,50,50,72.91666667,55.83333333,53.33333333,50,50,50,53.92361111 | |
| DreamLIP,dreamlip-vitb16,yfcc15m-long,62.5,50.41666667,49.58333333,50,50,50,77.91666667,59.16666667,55,50,50,50,54.54861111 | |
| DreamLIP,dreamlip-vitb16,cc30m-long,71.66666667,55.41666667,49.58333333,50,50,50.83333333,82.08333333,65.83333333,52.5,50,50,50,56.49305556 | |
| FLAIR,flair-vitb16,cc3m-recap,68.33333333,51.25,50.41666667,50,50,50,73.75,59.16666667,53.33333333,50,50,50,54.6875 | |
| FLAIR,flair-vitb16,cc12m-recap,71.66666667,54.58333333,49.58333333,50,50,49.16666667,75.41666667,61.66666667,52.5,50,50,49.16666667,55.3125 | |
| FLAIR,flair-vitb16,yfcc15m-recap,66.66666667,54.58333333,50.41666667,50,50,49.16666667,71.25,58.33333333,55,50,50,49.16666667,54.54861111 | |
| FLAIR,flair-vitb16,cc30m-recap,70,54.58333333,52.08333333,50,50,49.16666667,77.08333333,59.16666667,53.33333333,50,50,49.16666667,55.38194444 | |
| FSC-CLIP,fsc-clip-ViT-B-32,laioncoco-ft,69.16666667,50.41666667,49.58333333,50,50,50,82.91666667,64.16666667,53.33333333,50,50,49.16666667,55.72916667 | |
| FSC-CLIP,fsc-clip-ViT-B-16,laioncoco-ft,70,52.91666667,50.41666667,50,50,50,82.91666667,70,53.33333333,50,50,49.16666667,56.5625 | |
| FSC-CLIP,fsc-clip-ViT-L-14,laioncoco-ft,59.16666667,52.08333333,50.41666667,50,50,50,87.91666667,70,52.5,50,50,50,56.00694444 | |
| Jina-CLIP,jina-clip-v1,jinaai,66.66666667,70,70,60.83333333,76.66666667,69.16666667,82.5,80.83333333,70.83333333,67.5,72.5,70,71.45833333 | |
| Jina-CLIP,jina-clip-v2,jinaai,76.25,67.5,58.75,82.08333333,79.16666667,68.75,80.83333333,79.58333333,67.08333333,77.08333333,68.75,63.75,72.46527778 | |
| LoTLIP,LoTLIP-ViT-B-32,lotlip100m,54.16666667,61.25,61.66666667,70,52.91666667,50.83333333,65.83333333,60.83333333,67.91666667,64.16666667,54.16666667,50.83333333,59.54861111 | |
| LoTLIP,LoTLIP-ViT-B-16,lotlip100m,55.83333333,60.41666667,58.33333333,66.66666667,50.41666667,50,63.33333333,66.66666667,64.58333333,60,50.83333333,50,58.09027778 | |
| LongCLIP,longclip-vitb32,sharegpt4v-1m,72.08333333,60.83333333,63.33333333,81.25,70,59.58333333,90,77.08333333,80.83333333,86.66666667,72.5,59.16666667,72.77777778 | |
| LongCLIP,longclip-vitb16,sharegpt4v-1m,69.16666667,66.66666667,60.83333333,74.58333333,63.33333333,43.33333333,90.41666667,91.25,67.5,82.08333333,76.25,54.16666667,69.96527778 | |
| LongCLIP,longclip-vitl14,sharegpt4v-1m,67.91666667,58.75,57.91666667,61.25,63.75,50.41666667,84.16666667,81.25,71.66666667,78.75,69.58333333,57.5,66.90972222 | |
| LongCLIP,longclip-vitl14_336px,sharegpt4v-1m,74.58333333,56.66666667,52.5,77.08333333,63.75,44.16666667,89.16666667,85,64.16666667,88.33333333,72.5,48.75,68.05555556 | |
| OpenCLIP,roberta-ViT-B-32,laion2b_s12b_b32k,67.08333333,60,51.25,49.58333333,50,49.16666667,76.25,58.75,50.83333333,50,50,50,55.24305556 | |
| OpenCLIP,coca_ViT-B-32,laion2b_s13b_b90k,67.91666667,56.66666667,50.41666667,50,50,49.16666667,82.91666667,63.75,52.08333333,50,50,50,56.07638889 | |
| OpenCLIP,coca_ViT-L-14,laion2b_s13b_b90k,64.58333333,60,49.58333333,50,50,49.16666667,79.58333333,64.58333333,52.08333333,50,50,49.16666667,55.72916667 | |
| OpenCLIP,ViT-H-14,laion2b_s32b_b79k,63.33333333,58.75,50.41666667,50,50,49.16666667,83.75,65,51.66666667,50,50,49.16666667,55.9375 | |
| OpenCLIP,ViT-L-14,laion2b_s32b_b82k,58.33333333,57.91666667,49.58333333,50,50,50,82.91666667,61.66666667,52.5,50,50,49.16666667,55.17361111 | |
| OpenCLIP,ViT-B-32,laion2b_s34b_b79k,68.33333333,62.08333333,47.08333333,50,50,50,80.41666667,60.83333333,55,50,50,50,56.14583333 | |
| OpenCLIP,ViT-B-16,laion2b_s34b_b88k,62.5,57.08333333,49.58333333,50,50,49.16666667,72.08333333,65,54.16666667,50,50,49.16666667,54.89583333 | |
| OpenCLIP,ViT-g-14,laion2b_s34b_b88k,65,55.41666667,50.41666667,50,50,49.16666667,78.75,65,51.66666667,50,50,49.16666667,55.38194444 | |
| OpenCLIP,ViT-B-16,openai,64.16666667,51.25,50.41666667,50,50,49.16666667,75.41666667,59.16666667,51.66666667,50,50,49.16666667,54.20138889 | |
| OpenCLIP,ViT-B-32,openai,57.5,54.58333333,48.75,50,50,49.16666667,67.08333333,63.33333333,52.5,50,50,49.16666667,53.50694444 | |
| OpenCLIP,ViT-L-14,openai,57.5,55.41666667,49.58333333,50,50,49.16666667,74.58333333,62.5,51.66666667,50,50,49.16666667,54.13194444 | |
| OpenCLIP,ViT-L-14-336,openai,58.33333333,57.08333333,47.91666667,50,50,49.16666667,75.41666667,66.66666667,50,50,50,49.16666667,54.47916667 | |
| OpenCLIP,ViT-B-16-SigLIP,webli,56.25,54.16666667,50.41666667,50,50,50,67.08333333,56.66666667,51.66666667,50,50,50.83333333,53.09027778 | |
| OpenCLIP,ViT-B-16-SigLIP-384,webli,61.25,54.16666667,50.41666667,50,50,50,70.41666667,59.16666667,51.66666667,50,50,50,53.92361111 | |
| OpenCLIP,ViT-L-16-SigLIP-256,webli,62.91666667,55.83333333,49.58333333,50,50,50,77.91666667,60,50.83333333,50,50,50,54.75694444 | |
| OpenCLIP,ViT-L-16-SigLIP-384,webli,62.91666667,55,49.58333333,50,50,50,75.41666667,58.33333333,50.83333333,50,50,50,54.34027778 | |
| OpenCLIP,ViT-SO400M-14-SigLIP,webli,50,50,50.41666667,50,50,50.41666667,50,50,50,50,50,50,50.06944444 | |
| Recap-CLIP,ViT-L-16-HTxt-Recap-CLIP,recap-datacomp1b,56.66666667,61.25,56.25,73.33333333,50,50.83333333,77.5,67.91666667,55.83333333,69.16666667,49.16666667,50.83333333,59.89583333 | |
| StructuredCLIP,NegCLIP-ViT-B-32,coco-ft,65,54.58333333,50.41666667,50,50,50.83333333,78.75,67.5,52.5,50,50,50,55.79861111 | |
| StructuredCLIP,CE-CLIP-ViT-B-32,coco-ft,65,55.41666667,50.41666667,50,50,50,92.08333333,71.66666667,56.66666667,50,50,50.83333333,57.67361111 | |
| StructuredCLIP,DAC-LLM-ViT-B-32,cc3m-ft,65,55.41666667,49.58333333,50,50,50,89.58333333,69.16666667,55.83333333,50,50,50,57.04861111 | |
| StructuredCLIP,DAC-SAM-ViT-B-32,cc3m-ft,64.16666667,55.41666667,47.91666667,50,50,50,87.91666667,71.66666667,56.66666667,50,50,50,56.97916667 | |