CIFAR-100 Leaderboard


Targeted Model Defense→ No Defense FT FP NAD NC ANP AC SS ABL DBD CLP D-BR D-ST DDE i-BAU MBNS
Attack↓ CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%)
PreAct-Resnet18 BadNets 67.23 87.43 10.49 66.61 0.43 63.05 65.17 33.65 46.68 66.26 0.14 63.27 65.6 0.05 65.41 62.98 0.0 61.78 57.26 80.51 15.03 66.42 81.73 15.47 61.21 0.0 61.65 54.06 92.05 6.29 65.4 81.95 15.45 46.98 90.99 5.68 34.1 72.33 17.48 60.39 0.62 59.88 60.37 0.04 58.46 66.77 87.54 10.37
PreAct-Resnet18 Blended 69.28 99.59 0.34 67.85 98.23 1.3 67.12 89.83 4.93 67.77 98.62 1.02 64.99 0.0 33.25 64.15 68.07 10.99 59.23 98.31 1.08 67.5 99.04 0.71 41.37 0.0 24.63 56.49 100.0 0.0 65.22 99.81 0.17 55.05 99.64 0.22 47.02 99.4 0.37 67.1 88.45 6.04 63.75 0.79 23.44 69.0 99.42 0.47
PreAct-Resnet18 LC nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
PreAct-Resnet18 SIG nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
PreAct-Resnet18 LF nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
PreAct-Resnet18 SSBA 69.07 97.22 2.09 67.82 90.01 7.14 66.85 79.41 12.38 67.82 85.34 10.05 63.08 0.13 55.83 62.61 20.1 43.22 58.72 94.2 3.58 66.97 96.12 2.94 54.17 0.0 49.76 57.07 99.93 0.06 65.39 97.52 1.74 53.64 98.01 1.22 46.75 96.94 1.85 66.82 8.81 52.42 63.09 28.91 39.05 69.0 96.83 2.36
PreAct-Resnet18 WaNet 64.05 97.73 1.92 68.7 0.85 64.34 64.76 86.74 8.46 68.27 2.2 63.16 67.34 0.02 59.61 59.1 0.03 56.64 57.48 83.83 10.25 66.43 92.44 5.54 52.17 0.0 55.65 56.66 96.91 2.61 25.9 83.49 11.06 50.88 97.64 1.57 41.35 19.33 36.58 63.07 0.1 58.76 65.31 43.96 37.16 62.8 96.3 2.97
PreAct-Resnet18 InputAware 65.24 98.63 1.18 nan nan nan nan nan nan nan nan nan nan nan nan 59.46 0.02 50.91 59.1 93.77 4.76 66.98 93.82 5.08 nan nan nan nan nan nan 63.33 98.06 1.6 53.63 99.42 0.46 47.52 88.39 7.86 63.94 0.09 59.47 65.21 85.14 12.18 63.8 0.04 56.67
PreAct-Resnet18 Blind 43.91 100.0 0.0 69.64 100.0 0.0 nan nan nan 69.99 100.0 0.0 67.38 0.04 32.6 43.91 100.0 0.0 nan nan nan nan nan nan nan nan nan nan nan nan 37.62 100.0 0.0 nan nan nan nan nan nan nan nan nan 63.78 92.85 5.28 nan nan nan
PreAct-Resnet18 BPP nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
PreAct-Resnet18 LIRA 4.48 98.17 1.74 66.47 0.17 65.6 nan nan nan 66.2 0.15 65.64 65.86 0.18 64.77 13.29 89.1 9.65 nan nan nan nan nan nan nan nan nan nan nan nan 6.79 92.77 5.53 nan nan nan nan nan nan nan nan nan 61.45 0.07 61.19 nan nan nan
PreAct-Resnet18 TrojanNN 69.82 100.0 0.0 68.46 99.99 0.01 -100.0 -100.0 -100.0 67.99 100.0 0.0 67.78 57.11 24.3 63.7 79.37 12.74 59.46 99.99 0.01 65.46 99.93 0.06 37.15 0.0 27.66 nan nan nan 68.22 99.81 0.17 42.19 100.0 0.0 45.17 99.96 0.03 64.71 0.22 47.11 63.74 0.92 30.38 69.38 100.0 0.0
VGG19_BN BadNets 61.27 88.32 9.15 59.76 0.15 46.15 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan -100.0 -100.0 -100.0 nan nan nan -100.0 -100.0 -100.0 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
VGG19_BN Blended 64.24 98.98 0.72 60.62 35.76 16.56 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan -100.0 -100.0 -100.0 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
VGG19_BN LC nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
VGG19_BN SIG nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
VGG19_BN LF 58.09 18.43 57.8 60.46 0.35 60.26 nan nan nan 58.29 0.36 58.13 58.09 18.41 57.8 61.35 0.89 61.29 45.78 17.21 45.46 54.05 12.28 54.59 1.0 100.0 0.0 29.62 41.64 28.89 51.37 21.67 50.98 nan nan nan nan nan nan 54.49 21.99 54.2 55.66 0.37 55.55 56.18 20.52 55.89
VGG19_BN SSBA 62.58 95.66 2.87 60.47 72.52 14.25 nan nan nan 58.32 70.65 14.72 57.81 0.21 41.48 57.73 22.03 39.28 50.54 88.36 5.41 58.15 92.95 3.91 2.42 99.81 0.13 35.03 98.32 1.2 53.81 84.24 8.73 nan nan nan nan nan nan 61.78 16.3 39.96 57.67 82.37 7.89 60.1 94.61 3.16
VGG19_BN WaNet 57.91 96.22 2.82 64.62 10.44 52.75 nan nan nan 64.35 5.31 54.92 64.18 3.24 57.15 54.89 0.01 52.75 48.37 57.65 21.08 56.99 76.92 13.96 8.74 90.17 3.12 34.84 85.48 9.29 58.47 2.34 53.9 nan nan nan nan nan nan -100.0 -100.0 -100.0 61.05 39.59 36.3 nan nan nan
VGG19_BN InputAware 59.45 85.52 9.99 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
VGG19_BN Blind 42.81 99.65 0.23 63.02 99.96 0.01 nan nan nan 64.39 99.99 0.0 62.18 99.21 0.02 42.48 0.0 1.68 nan nan nan nan nan nan nan nan nan nan nan nan 39.38 94.42 2.88 nan nan nan nan nan nan nan nan nan 61.42 96.11 0.3 nan nan nan
VGG19_BN BPP nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
VGG19_BN LIRA 49.39 32.6 47.0 53.9 0.12 53.28 nan nan nan 52.06 0.1 51.33 54.17 0.14 53.62 1.3 99.66 0.33 nan nan nan nan nan nan nan nan nan nan nan nan 1.22 99.76 0.23 nan nan nan nan nan nan nan nan nan 48.46 0.07 48.53 nan nan nan
VGG19_BN TrojanNN 64.89 99.98 0.02 60.53 13.85 29.91 -100.0 -100.0 -100.0 59.21 4.37 28.08 60.5 0.03 22.71 59.66 0.17 37.19 51.26 99.96 0.0 59.57 99.9 0.09 1.0 0.0 1.01 nan nan nan 54.32 40.12 23.86 64.77 99.98 0.02 10.0 84.98 1.65 54.89 0.06 35.14 57.28 0.4 25.25 63.73 77.52 11.33
ConvNext_tiny BadNets 70.59 88.02 9.81 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ConvNext_tiny Blended 72.8 99.34 0.54 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ConvNext_tiny LC nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ConvNext_tiny SIG nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ConvNext_tiny LF 68.69 4.34 68.49 66.49 0.1 66.42 nan nan nan 62.46 0.05 62.35 66.62 0.1 66.51 63.11 0.34 63.29 66.64 5.75 66.42 67.63 6.57 68.31 68.91 8.06 68.69 nan nan nan 68.69 4.34 68.49 nan nan nan nan nan nan 68.3 3.49 68.09 68.38 0.13 68.32 nan nan nan
ConvNext_tiny SSBA 72.19 96.47 2.99 67.25 42.93 38.96 nan nan nan 62.56 45.39 34.69 14.67 0.78 14.73 68.34 85.28 11.26 69.64 95.18 3.74 73.36 96.81 2.64 74.46 89.69 8.08 nan nan nan 72.19 96.47 2.99 nan nan nan nan nan nan 71.15 95.63 3.64 69.37 80.32 14.4 nan nan nan
ConvNext_tiny WaNet 60.13 93.19 5.54 65.71 14.49 56.23 nan nan nan 65.71 25.78 49.8 64.81 8.48 57.52 55.37 11.47 46.77 68.6 80.18 15.74 71.39 90.87 7.34 68.25 0.05 68.18 nan nan nan 60.14 93.19 5.54 nan nan nan nan nan nan 59.26 89.21 8.64 63.09 26.24 47.02 nan nan nan
ConvNext_tiny InputAware 63.42 95.11 3.96 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ConvNext_tiny Blind 73.6 100.0 0.0 69.2 99.9 0.1 nan nan nan 64.19 99.12 0.81 33.7 1.22 20.93 66.91 78.38 15.26 nan nan nan nan nan nan nan nan nan nan nan nan 73.61 100.0 0.0 nan nan nan nan nan nan nan nan nan 69.79 99.97 0.03 nan nan nan
ConvNext_tiny BPP nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ConvNext_tiny LIRA 45.56 5.55 42.29 24.15 0.91 22.45 nan nan nan 26.7 1.41 23.55 23.17 0.65 21.79 27.54 8.9 24.52 nan nan nan nan nan nan nan nan nan nan nan nan 27.54 8.9 24.52 nan nan nan nan nan nan nan nan nan 28.75 1.86 25.31 nan nan nan
ConvNext_tiny TrojanNN 72.95 99.97 0.03 67.47 97.61 1.94 nan nan nan 62.98 96.14 3.29 43.25 0.21 21.51 67.29 30.54 37.55 70.69 100.0 0.0 73.65 100.0 0.0 74.83 100.0 0.0 nan nan nan 72.96 99.97 0.03 50.68 99.99 0.01 20.56 93.46 2.45 71.55 99.65 0.3 70.29 0.1 44.41 72.4 99.97 0.03
ViT_b_16 BadNets 81.93 84.9 13.26 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 Blended 84.35 99.7 0.26 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 LC nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 SIG nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 LF 80.72 3.35 80.57 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 SSBA 83.88 98.4 1.42 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 WaNet 72.31 96.47 2.93 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 InputAware 75.43 91.62 7.42 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 Blind 84.46 100.0 0.0 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 BPP nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 LIRA 1.43 99.83 0.13 nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan nan
ViT_b_16 TrojanNN 84.11 99.97 0.03 17.86 0.53 12.6 nan nan nan nan nan nan 14.4 0.71 8.91 nan nan nan 84.18 99.95 0.05 83.23 99.96 0.04 87.48 100.0 0.0 nan nan nan 84.11 99.97 0.03 nan nan nan nan nan nan 82.02 99.98 0.02 nan nan nan 80.84 99.96 0.04

Targeted Model Defense→ No Defense FT FP NAD NC ANP AC SS ABL DBD CLP D-BR D-ST DDE i-BAU MBNS
Attack↓ CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) ASR(%) RA(%) CA(%) AS