Heedless Backbones

ImageNet-R Dataset

Website

axis

Select an option

Results

Parameters (M)

Images / Second

Publication Date

task

Select an option

---------

Classification

metric

Select an option

----------

Top-1

Top-5

GFLOPs

resolution

Select an option

----------

224x224

384x384

512x512

axis

Select an option

Results

Parameters (M)

Images / Second

GFLOPs

Publication Date

Filters

pretrain dataset

Select an option

---------

JFT-3B

ImageNet-1k

ImageNet-22k

JFT-300M

pretrain method

Select an option

----------

Supervised

FCMAE

MAE

CL

Legend

Legend attribute

Select an option

Family

Pretrain Dataset

Pretrain Method

Classification Resolution

Legend attribute (second)

Select an option

----------

Pretrain Dataset

Pretrain Method

Classification Resolution

family	model	params (m)	pretrain	finetune	GFLOPs	Top-1
CAFormer	CAFormer-M36	56.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	13.2	63.4
CAFormer	CAFormer-M36	56.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	42.0	65.3
TransNeXt	TransNeXt-T	28.2	IN-1k : Sup. : 300	— : — : —	5.7	49.6
CAFormer	CAFormer-B36	99.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	23.2	68.3
CAFormer	CAFormer-B36	99.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	72.2	70.4
ConvNeXt	ConvNeXt-T	29.0	IN-1k : Sup. : 300	— : — : —	4.5	47.2
ConvFormer	ConvFormer-M36	57.0	IN-1k : Sup. : 300	— : — : —	12.8	51.0
ConvFormer	ConvFormer-M36	57.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	37.7	52.2
TransNeXt	TransNeXt-Micro	12.8	IN-1k : Sup. : 300	— : — : —	2.7	45.8
CAFormer	CAFormer-S36	39.0	IN-1k : Sup. : 300	— : — : —	8.0	51.7
CAFormer	CAFormer-S36	39.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	26.0	54.5
CAFormer	CAFormer-M36	56.0	IN-1k : Sup. : 300	— : — : —	13.2	51.7
CAFormer	CAFormer-M36	56.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	42.0	55.0
Swin	Swin-T	29.0	IN-1k : Sup. : 300	— : — : —	4.5	41.3
ConvFormer	ConvFormer-B36	100.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	22.6	65.3
ConvFormer	ConvFormer-B36	100.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	66.5	66.5
CAFormer	CAFormer-S36	39.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	8.0	60.7
CAFormer	CAFormer-S36	39.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	26.0	63.0
CAFormer	CAFormer-B36	99.0	IN-1k : Sup. : 300	— : — : —	23.2	53.9
CAFormer	CAFormer-B36	99.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	72.2	55.0
ConvNeXt	ConvNeXt-XL	350.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	179.0	68.2
ConvFormer	ConvFormer-S18	27.0	IN-1k : Sup. : 300	— : — : —	3.9	48.7
ConvFormer	ConvFormer-S18	27.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	11.6	50.7
ConvNeXt	ConvNeXt-B	89.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	45.1	64.9
ConvNeXt	ConvNeXt-L	198.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	101.0	66.7
ConvFormer	ConvFormer-B36	100.0	IN-1k : Sup. : 300	— : — : —	22.6	51.1
ConvFormer	ConvFormer-B36	100.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	66.5	52.2
ConvNeXt	ConvNeXt-B	89.0	IN-1k : Sup. : 300	— : — : —	15.4	51.3
TransNeXt	TransNeXt-B	89.7	IN-1k : Sup. : 300	— : — : —	18.4	53.9
TransNeXt	TransNeXt-B	89.7	IN-1k : Sup. : 300	IN-1k : 5 : 384	56.3	57.7
ConvFormer	ConvFormer-S36	40.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	7.6	58.9
ConvFormer	ConvFormer-S36	40.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	22.4	59.9
ConvFormer	ConvFormer-S36	40.0	IN-1k : Sup. : 300	— : — : —	7.6	50.8
ConvFormer	ConvFormer-S36	40.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	22.4	51.9
ConvFormer	ConvFormer-S18	27.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	3.9	53.4
ConvFormer	ConvFormer-S18	27.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	11.6	55.0
CAFormer	CAFormer-S18	26.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	4.1	54.1
CAFormer	CAFormer-S18	26.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	13.4	55.9
TransNeXt	TransNeXt-S	49.7	IN-1k : Sup. : 300	— : — : —	10.3	52.5
TransNeXt	TransNeXt-S	49.7	IN-1k : Sup. : 300	IN-1k : 5 : 384	32.1	56.4
CAFormer	CAFormer-S18	26.0	IN-1k : Sup. : 300	— : — : —	4.1	48.7
CAFormer	CAFormer-S18	26.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	13.4	51.3
ConvFormer	ConvFormer-M36	57.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	12.8	60.9
ConvFormer	ConvFormer-M36	57.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	37.7	61.8
Swin	Swin-B	88.0	IN-1k : Sup. : 300	— : — : —	15.4	46.6

family	model	params (m)	pretrain	finetune	gflops	top-1	top-5
TransNeXt	TransNeXt-Micro	12.8	IN-1k : Sup. : 300	— : — : —	2.7	45.8	—
TransNeXt	TransNeXt-T	28.2	IN-1k : Sup. : 300	— : — : —	5.7	49.6	—
TransNeXt	TransNeXt-S	49.7	IN-1k : Sup. : 300	— : — : —	10.3	52.5	—
TransNeXt	TransNeXt-S	49.7	IN-1k : Sup. : 300	IN-1k : 5 : 384	32.1	56.4	—
TransNeXt	TransNeXt-B	89.7	IN-1k : Sup. : 300	— : — : —	18.4	53.9	—
TransNeXt	TransNeXt-B	89.7	IN-1k : Sup. : 300	IN-1k : 5 : 384	56.3	57.7	—
ConvNeXt	ConvNeXt-L	198.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	101.0	66.7	—
ConvNeXt	ConvNeXt-B	89.0	IN-1k : Sup. : 300	— : — : —	15.4	51.3	—
ConvNeXt	ConvNeXt-B	89.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	45.1	64.9	—
ConvNeXt	ConvNeXt-T	29.0	IN-1k : Sup. : 300	— : — : —	4.5	47.2	—
ConvNeXt	ConvNeXt-XL	350.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	179.0	68.2	—
Swin	Swin-T	29.0	IN-1k : Sup. : 300	— : — : —	4.5	41.3	—
Swin	Swin-B	88.0	IN-1k : Sup. : 300	— : — : —	15.4	46.6	—
CAFormer	CAFormer-S18	26.0	IN-1k : Sup. : 300	— : — : —	4.1	48.7	—
CAFormer	CAFormer-S18	26.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	13.4	51.3	—
CAFormer	CAFormer-S18	26.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	4.1	54.1	—
CAFormer	CAFormer-S18	26.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	13.4	55.9	—
CAFormer	CAFormer-S36	39.0	IN-1k : Sup. : 300	— : — : —	8.0	51.7	—
CAFormer	CAFormer-S36	39.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	26.0	54.5	—
CAFormer	CAFormer-S36	39.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	8.0	60.7	—
CAFormer	CAFormer-S36	39.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	26.0	63.0	—
CAFormer	CAFormer-M36	56.0	IN-1k : Sup. : 300	— : — : —	13.2	51.7	—
CAFormer	CAFormer-M36	56.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	42.0	55.0	—
CAFormer	CAFormer-M36	56.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	13.2	63.4	—
CAFormer	CAFormer-M36	56.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	42.0	65.3	—
CAFormer	CAFormer-B36	99.0	IN-1k : Sup. : 300	— : — : —	23.2	53.9	—
CAFormer	CAFormer-B36	99.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	72.2	55.0	—
CAFormer	CAFormer-B36	99.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	23.2	68.3	—
CAFormer	CAFormer-B36	99.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	72.2	70.4	—
ConvFormer	ConvFormer-S18	27.0	IN-1k : Sup. : 300	— : — : —	3.9	48.7	—
ConvFormer	ConvFormer-S18	27.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	11.6	50.7	—
ConvFormer	ConvFormer-S18	27.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	3.9	53.4	—
ConvFormer	ConvFormer-S18	27.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	11.6	55.0	—
ConvFormer	ConvFormer-S36	40.0	IN-1k : Sup. : 300	— : — : —	7.6	50.8	—
ConvFormer	ConvFormer-S36	40.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	22.4	51.9	—
ConvFormer	ConvFormer-S36	40.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	7.6	58.9	—
ConvFormer	ConvFormer-S36	40.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	22.4	59.9	—
ConvFormer	ConvFormer-M36	57.0	IN-1k : Sup. : 300	— : — : —	12.8	51.0	—
ConvFormer	ConvFormer-M36	57.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	37.7	52.2	—
ConvFormer	ConvFormer-M36	57.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	12.8	60.9	—
ConvFormer	ConvFormer-M36	57.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	37.7	61.8	—
ConvFormer	ConvFormer-B36	100.0	IN-1k : Sup. : 300	— : — : —	22.6	51.1	—
ConvFormer	ConvFormer-B36	100.0	IN-1k : Sup. : 300	IN-1k : 30 : 384	66.5	52.2	—
ConvFormer	ConvFormer-B36	100.0	IN-22k : Sup. : 90	IN-1k : 30 : 224	22.6	65.3	—
ConvFormer	ConvFormer-B36	100.0	IN-22k : Sup. : 90	IN-1k : 30 : 384	66.5	66.5	—