Network Observation count Temporal accuracy IoU IoU left IoU right IoU for all left emissions IoU for all right emissions Mean errors Mean errors for left emissions Mean errors for right emissions
Unet_B3_small 8041 97.39 % 68.76 % 63.89 % 67.50 % 65.35 % 69.45 % 45.21 % 41.65 % 46.31 %
Train: 7682 97.38 % 68.93 % 64.06 % 67.69 % 65.55 % 69.60 % 44.65 % 40.83 % 45.82 %
Test: 359 97.75 % 63.87 % 60.16 % 61.50 % 61.28 % 64.64 % 61.73 % 60.38 % 62.39 %
Unet_resnet50_small 8041 98.29 % 81.02 % 71.99 % 82.31 % 72.11 % 82.82 % 35.82 % 36.98 % 35.32 %
Train: 7682 98.35 % 81.91 % 73.02 % 83.27 % 73.12 % 83.66 % 34.37 % 36.69 % 33.47 %
Test: 359 96.94 % 56.82 % 50.57 % 55.03 % 50.96 % 58.45 % 79.01 % 43.40 % 96.33 %
Unet_resnet18_small 8041 97.68 % 72.66 % 60.39 % 73.94 % 62.32 % 74.81 % 35.26 % 44.89 % 31.87 %
Train: 7682 97.69 % 73.06 % 60.67 % 74.37 % 62.58 % 75.20 % 34.86 % 45.21 % 31.28 %
Test: 359 97.47 % 61.46 % 54.47 % 60.63 % 56.88 % 62.85 % 46.91 % 37.74 % 51.38 %
SwinUnet_small 8041 96.33 % 61.71 % 39.78 % 64.80 % 40.31 % 65.83 % 50.77 % 67.62 % 44.94 %
Train: 7682 96.35 % 62.13 % 39.93 % 65.28 % 40.48 % 66.25 % 50.14 % 67.85 % 44.07 %
Test: 359 95.88 % 50.05 % 36.56 % 50.87 % 36.65 % 53.42 % 69.75 % 62.26 % 73.39 %
FPN_B3_small 8041 95.88 % 60.14 % 51.36 % 58.76 % 54.08 % 61.46 % 83.46 % 108.23 % 74.92 %
Train: 7682 95.84 % 60.18 % 51.27 % 58.82 % 54.02 % 61.51 % 82.92 % 108.02 % 74.38 %
Test: 359 96.85 % 58.86 % 53.33 % 56.59 % 55.35 % 59.99 % 99.38 % 113.21 % 92.66 %