QuAcc/out/rcv1_CCAT_all_mul_vs_atc/rcv1_CCAT_all_mul_vs_atc_f1.md

48 KiB

rcv1_CCAT

train: [0.09996662 0.90003338]
validation: [0.09996662 0.90003338]
evaluate_mul_sld: 80.667s
evaluate_mul_sld_nbvs: 85.070s
evaluate_mul_sld_bcts: 84.600s
evaluate_mul_sld_ts: 83.671s
evaluate_mul_sld_vs: 81.712s
evaluate_mul_cc: 71.627s
reference: 57.055s
atc_mc: 59.720s
atc_ne: 57.966s
tot: 91.101s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0000 0.0001 0.0000 0.0000 0.0000 0.5619 0.4745 0.4745
(0.95, 0.05) 0.1090 0.0567 0.0502 0.0795 0.0629 0.4846 0.4016 0.4016
(0.9, 0.1) 0.1536 0.0562 0.0501 0.0789 0.0592 0.4180 0.3432 0.3432
(0.85, 0.15) 0.1491 0.0508 0.0461 0.0712 0.0518 0.3608 0.2909 0.2909
(0.8, 0.2) 0.1326 0.0422 0.0388 0.0591 0.0419 0.3128 0.2470 0.2470
(0.75, 0.25) 0.1245 0.0413 0.0397 0.0563 0.0400 0.2676 0.2076 0.2076
(0.7, 0.3) 0.1091 0.0346 0.0340 0.0466 0.0329 0.2320 0.1759 0.1759
(0.65, 0.35) 0.0975 0.0312 0.0314 0.0407 0.0286 0.1986 0.1487 0.1487
(0.6, 0.4) 0.0862 0.0276 0.0288 0.0353 0.0251 0.1700 0.1239 0.1239
(0.55, 0.45) 0.0707 0.0216 0.0231 0.0263 0.0191 0.1454 0.1027 0.1027
(0.5, 0.5) 0.0596 0.0185 0.0198 0.0208 0.0161 0.1214 0.0842 0.0842
(0.45, 0.55) 0.0526 0.0180 0.0196 0.0186 0.0153 0.1009 0.0659 0.0659
(0.4, 0.6) 0.0392 0.0128 0.0142 0.0113 0.0106 0.0827 0.0530 0.0530
(0.35, 0.65) 0.0357 0.0144 0.0160 0.0120 0.0117 0.0668 0.0392 0.0392
(0.3, 0.7) 0.0271 0.0122 0.0135 0.0085 0.0099 0.0524 0.0290 0.0290
(0.25, 0.75) 0.0193 0.0093 0.0107 0.0067 0.0074 0.0396 0.0196 0.0196
(0.2, 0.8) 0.0143 0.0089 0.0101 0.0051 0.0069 0.0287 0.0125 0.0125
(0.15, 0.85) 0.0096 0.0078 0.0089 0.0047 0.0061 0.0188 0.0061 0.0061
(0.1, 0.9) 0.0056 0.0065 0.0073 0.0042 0.0051 0.0094 0.0036 0.0036
(0.05, 0.95) 0.0038 0.0061 0.0069 0.0033 0.0048 0.0020 0.0069 0.0069
(0.0, 1.0) 0.0020 0.0061 0.0065 0.0017 0.0052 0.0069 0.0123 0.0123
tot 0.0620 0.0230 0.0227 0.0281 0.0219 0.1753 0.1356 0.1356

plot_delta plot_diagonal plot_shift

train: [0.19993324 0.80006676]
validation: [0.20010013 0.79989987]
evaluate_mul_sld: 83.645s
evaluate_mul_sld_nbvs: 83.775s
evaluate_mul_sld_bcts: 85.033s
evaluate_mul_sld_ts: 82.535s
evaluate_mul_sld_vs: 81.965s
evaluate_mul_cc: 70.455s
reference: 56.854s
atc_mc: 59.091s
atc_ne: 57.585s
tot: 88.539s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0000 0.0006 0.0015 0.0032 0.0000 0.5951 0.5459 0.5459
(0.95, 0.05) 0.0886 0.0391 0.0162 0.0238 0.0681 0.4520 0.3941 0.3941
(0.9, 0.1) 0.0677 0.0290 0.0180 0.0349 0.0511 0.3571 0.2954 0.2954
(0.85, 0.15) 0.0512 0.0200 0.0152 0.0400 0.0406 0.2840 0.2206 0.2206
(0.8, 0.2) 0.0349 0.0150 0.0140 0.0453 0.0283 0.2322 0.1701 0.1701
(0.75, 0.25) 0.0303 0.0148 0.0133 0.0415 0.0261 0.1876 0.1277 0.1277
(0.7, 0.3) 0.0257 0.0131 0.0116 0.0416 0.0209 0.1559 0.0994 0.0994
(0.65, 0.35) 0.0214 0.0128 0.0124 0.0380 0.0181 0.1295 0.0774 0.0774
(0.6, 0.4) 0.0172 0.0105 0.0106 0.0370 0.0145 0.1062 0.0563 0.0563
(0.55, 0.45) 0.0137 0.0097 0.0096 0.0360 0.0116 0.0886 0.0440 0.0440
(0.5, 0.5) 0.0119 0.0086 0.0084 0.0341 0.0088 0.0729 0.0323 0.0323
(0.45, 0.55) 0.0105 0.0076 0.0076 0.0307 0.0088 0.0577 0.0206 0.0206
(0.4, 0.6) 0.0099 0.0073 0.0071 0.0305 0.0068 0.0470 0.0152 0.0152
(0.35, 0.65) 0.0099 0.0067 0.0069 0.0277 0.0069 0.0371 0.0098 0.0098
(0.3, 0.7) 0.0083 0.0063 0.0066 0.0244 0.0059 0.0280 0.0072 0.0072
(0.25, 0.75) 0.0077 0.0057 0.0059 0.0230 0.0055 0.0214 0.0056 0.0056
(0.2, 0.8) 0.0067 0.0051 0.0060 0.0203 0.0052 0.0146 0.0049 0.0049
(0.15, 0.85) 0.0062 0.0047 0.0062 0.0173 0.0051 0.0088 0.0053 0.0053
(0.1, 0.9) 0.0053 0.0042 0.0062 0.0141 0.0049 0.0046 0.0055 0.0055
(0.05, 0.95) 0.0044 0.0040 0.0064 0.0098 0.0044 0.0029 0.0068 0.0068
(0.0, 1.0) 0.0029 0.0058 0.0072 0.0035 0.0026 0.0064 0.0076 0.0076
tot 0.0207 0.0110 0.0094 0.0275 0.0164 0.1376 0.1025 0.1025

plot_delta plot_diagonal plot_shift

train: [0.29989987 0.70010013]
validation: [0.30006676 0.69993324]
evaluate_mul_sld: 84.430s
evaluate_mul_sld_nbvs: 85.444s
evaluate_mul_sld_bcts: 87.873s
evaluate_mul_sld_ts: 85.637s
evaluate_mul_sld_vs: 84.555s
evaluate_mul_cc: 72.330s
reference: 57.756s
atc_mc: 60.572s
atc_ne: 58.677s
tot: 91.275s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0000 0.0002 0.0018 0.0038 0.0000 0.8412 0.5749 0.5749
(0.95, 0.05) 0.0927 0.0888 0.0270 0.0545 0.0676 0.5619 0.3336 0.3336
(0.9, 0.1) 0.0592 0.0748 0.0251 0.0672 0.0573 0.4131 0.2163 0.2163
(0.85, 0.15) 0.0367 0.0577 0.0207 0.0739 0.0464 0.3186 0.1450 0.1450
(0.8, 0.2) 0.0230 0.0454 0.0157 0.0754 0.0345 0.2543 0.1055 0.1055
(0.75, 0.25) 0.0205 0.0418 0.0168 0.0686 0.0342 0.2024 0.0703 0.0703
(0.7, 0.3) 0.0169 0.0337 0.0145 0.0674 0.0286 0.1697 0.0549 0.0549
(0.65, 0.35) 0.0160 0.0318 0.0148 0.0612 0.0262 0.1426 0.0403 0.0403
(0.6, 0.4) 0.0149 0.0267 0.0139 0.0587 0.0233 0.1188 0.0279 0.0279
(0.55, 0.45) 0.0135 0.0221 0.0118 0.0561 0.0186 0.1015 0.0225 0.0225
(0.5, 0.5) 0.0145 0.0202 0.0119 0.0514 0.0174 0.0848 0.0165 0.0165
(0.45, 0.55) 0.0123 0.0178 0.0112 0.0482 0.0157 0.0716 0.0120 0.0120
(0.4, 0.6) 0.0138 0.0135 0.0085 0.0472 0.0110 0.0613 0.0095 0.0095
(0.35, 0.65) 0.0130 0.0132 0.0099 0.0432 0.0120 0.0526 0.0089 0.0089
(0.3, 0.7) 0.0112 0.0113 0.0083 0.0385 0.0097 0.0430 0.0060 0.0060
(0.25, 0.75) 0.0102 0.0108 0.0091 0.0352 0.0091 0.0358 0.0047 0.0047
(0.2, 0.8) 0.0100 0.0096 0.0090 0.0310 0.0084 0.0293 0.0044 0.0044
(0.15, 0.85) 0.0085 0.0083 0.0094 0.0271 0.0077 0.0236 0.0045 0.0045
(0.1, 0.9) 0.0061 0.0073 0.0088 0.0226 0.0062 0.0186 0.0036 0.0036
(0.05, 0.95) 0.0043 0.0067 0.0082 0.0166 0.0051 0.0135 0.0035 0.0035
(0.0, 1.0) 0.0031 0.0087 0.0091 0.0050 0.0056 0.0100 0.0032 0.0032
tot 0.0191 0.0262 0.0127 0.0454 0.0212 0.1699 0.0794 0.0794

plot_delta plot_diagonal plot_shift

train: [0.40003338 0.59996662]
validation: [0.40003338 0.59996662]
evaluate_mul_sld: 83.508s
evaluate_mul_sld_nbvs: 86.755s
evaluate_mul_sld_bcts: 87.560s
evaluate_mul_sld_ts: 86.070s
evaluate_mul_sld_vs: 85.272s
evaluate_mul_cc: 71.809s
reference: 57.819s
atc_mc: 60.630s
atc_ne: 59.231s
tot: 91.426s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0010 0.0042 0.0391 0.0570 0.0048 0.9375 0.5310 0.5310
(0.95, 0.05) 0.0445 0.0370 0.0442 0.1635 0.0434 0.5083 0.2044 0.2044
(0.9, 0.1) 0.0411 0.0293 0.0313 0.1515 0.0333 0.3445 0.1045 0.1045
(0.85, 0.15) 0.0431 0.0295 0.0236 0.1400 0.0287 0.2540 0.0571 0.0571
(0.8, 0.2) 0.0467 0.0305 0.0231 0.1290 0.0214 0.2026 0.0407 0.0407
(0.75, 0.25) 0.0442 0.0282 0.0181 0.1153 0.0219 0.1627 0.0228 0.0228
(0.7, 0.3) 0.0422 0.0278 0.0166 0.1063 0.0203 0.1389 0.0196 0.0196
(0.65, 0.35) 0.0377 0.0257 0.0141 0.0955 0.0184 0.1179 0.0125 0.0125
(0.6, 0.4) 0.0373 0.0271 0.0135 0.0885 0.0155 0.1006 0.0100 0.0100
(0.55, 0.45) 0.0351 0.0274 0.0119 0.0828 0.0139 0.0897 0.0101 0.0101
(0.5, 0.5) 0.0307 0.0247 0.0117 0.0735 0.0151 0.0776 0.0081 0.0081
(0.45, 0.55) 0.0280 0.0239 0.0090 0.0674 0.0121 0.0681 0.0076 0.0076
(0.4, 0.6) 0.0278 0.0264 0.0086 0.0623 0.0105 0.0614 0.0060 0.0060
(0.35, 0.65) 0.0236 0.0252 0.0080 0.0581 0.0095 0.0568 0.0060 0.0060
(0.3, 0.7) 0.0187 0.0224 0.0082 0.0505 0.0111 0.0499 0.0055 0.0055
(0.25, 0.75) 0.0155 0.0212 0.0067 0.0454 0.0098 0.0452 0.0051 0.0051
(0.2, 0.8) 0.0127 0.0212 0.0063 0.0406 0.0086 0.0414 0.0042 0.0042
(0.15, 0.85) 0.0090 0.0180 0.0061 0.0349 0.0086 0.0375 0.0042 0.0042
(0.1, 0.9) 0.0060 0.0128 0.0064 0.0276 0.0093 0.0338 0.0045 0.0045
(0.05, 0.95) 0.0045 0.0089 0.0053 0.0195 0.0071 0.0312 0.0037 0.0037
(0.0, 1.0) 0.0025 0.0032 0.0071 0.0055 0.0076 0.0294 0.0034 0.0034
tot 0.0263 0.0226 0.0152 0.0769 0.0158 0.1614 0.0510 0.0510

plot_delta plot_diagonal plot_shift

train: [0.5 0.5]
validation: [0.5 0.5]
evaluate_mul_sld: 82.271s
evaluate_mul_sld_nbvs: 87.111s
evaluate_mul_sld_bcts: 87.864s
evaluate_mul_sld_ts: 85.152s
evaluate_mul_sld_vs: 84.956s
evaluate_mul_cc: 72.398s
reference: 57.877s
atc_mc: 60.136s
atc_ne: 59.105s
tot: 91.401s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0015 0.0117 0.0147 0.0645 0.0044 0.9781 0.5135 0.5135
(0.95, 0.05) 0.0657 0.1759 0.0444 0.2122 0.0480 0.3985 0.1066 0.1066
(0.9, 0.1) 0.0601 0.1604 0.0289 0.1812 0.0283 0.2602 0.0476 0.0476
(0.85, 0.15) 0.0691 0.1508 0.0288 0.1646 0.0252 0.1925 0.0306 0.0306
(0.8, 0.2) 0.0687 0.1342 0.0250 0.1443 0.0196 0.1589 0.0235 0.0235
(0.75, 0.25) 0.0679 0.1191 0.0234 0.1268 0.0177 0.1307 0.0158 0.0158
(0.7, 0.3) 0.0594 0.1053 0.0216 0.1137 0.0179 0.1160 0.0147 0.0147
(0.65, 0.35) 0.0542 0.0945 0.0204 0.1042 0.0160 0.1047 0.0151 0.0151
(0.6, 0.4) 0.0496 0.0820 0.0185 0.0926 0.0150 0.0927 0.0105 0.0105
(0.55, 0.45) 0.0447 0.0736 0.0166 0.0864 0.0126 0.0864 0.0119 0.0119
(0.5, 0.5) 0.0395 0.0628 0.0146 0.0788 0.0112 0.0788 0.0115 0.0115
(0.45, 0.55) 0.0363 0.0573 0.0132 0.0734 0.0085 0.0738 0.0105 0.0105
(0.4, 0.6) 0.0318 0.0489 0.0133 0.0663 0.0096 0.0688 0.0107 0.0107
(0.35, 0.65) 0.0269 0.0437 0.0124 0.0632 0.0095 0.0679 0.0114 0.0114
(0.3, 0.7) 0.0213 0.0360 0.0105 0.0556 0.0096 0.0636 0.0103 0.0103
(0.25, 0.75) 0.0170 0.0296 0.0091 0.0490 0.0091 0.0602 0.0097 0.0097
(0.2, 0.8) 0.0129 0.0241 0.0076 0.0430 0.0085 0.0579 0.0117 0.0117
(0.15, 0.85) 0.0090 0.0182 0.0059 0.0353 0.0083 0.0555 0.0104 0.0104
(0.1, 0.9) 0.0070 0.0127 0.0055 0.0281 0.0089 0.0539 0.0117 0.0117
(0.05, 0.95) 0.0046 0.0072 0.0039 0.0197 0.0085 0.0522 0.0117 0.0117
(0.0, 1.0) 0.0019 0.0037 0.0053 0.0066 0.0081 0.0515 0.0128 0.0128
tot 0.0357 0.0691 0.0164 0.0862 0.0145 0.1525 0.0434 0.0434

plot_delta plot_diagonal plot_shift

train: [0.59996662 0.40003338]
validation: [0.59996662 0.40003338]
evaluate_mul_sld: 80.470s
evaluate_mul_sld_nbvs: 84.751s
evaluate_mul_sld_bcts: 86.113s
evaluate_mul_sld_ts: 84.612s
evaluate_mul_sld_vs: 83.568s
evaluate_mul_cc: 71.756s
reference: 57.252s
atc_mc: 59.949s
atc_ne: 58.848s
tot: 89.557s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0082 0.1340 0.0146 0.1919 0.0176 0.9369 0.3564 0.3564
(0.95, 0.05) 0.1237 0.1895 0.0489 0.2678 0.0489 0.2651 0.0506 0.0506
(0.9, 0.1) 0.1167 0.1297 0.0329 0.1942 0.0343 0.1781 0.0460 0.0460
(0.85, 0.15) 0.1138 0.0982 0.0358 0.1591 0.0363 0.1429 0.0318 0.0318
(0.8, 0.2) 0.1060 0.0830 0.0358 0.1403 0.0326 0.1276 0.0254 0.0254
(0.75, 0.25) 0.0996 0.0717 0.0375 0.1244 0.0317 0.1119 0.0197 0.0197
(0.7, 0.3) 0.0871 0.0582 0.0326 0.1170 0.0254 0.1057 0.0174 0.0174
(0.65, 0.35) 0.0773 0.0506 0.0312 0.1114 0.0233 0.1028 0.0129 0.0129
(0.6, 0.4) 0.0706 0.0448 0.0301 0.1033 0.0214 0.0965 0.0118 0.0118
(0.55, 0.45) 0.0608 0.0386 0.0263 0.0978 0.0166 0.0925 0.0095 0.0095
(0.5, 0.5) 0.0545 0.0337 0.0253 0.0909 0.0152 0.0889 0.0088 0.0088
(0.45, 0.55) 0.0496 0.0310 0.0244 0.0863 0.0132 0.0875 0.0085 0.0085
(0.4, 0.6) 0.0434 0.0266 0.0228 0.0790 0.0119 0.0842 0.0078 0.0078
(0.35, 0.65) 0.0375 0.0239 0.0211 0.0733 0.0114 0.0853 0.0093 0.0093
(0.3, 0.7) 0.0310 0.0195 0.0187 0.0654 0.0094 0.0831 0.0090 0.0090
(0.25, 0.75) 0.0240 0.0149 0.0151 0.0568 0.0078 0.0811 0.0075 0.0075
(0.2, 0.8) 0.0206 0.0132 0.0146 0.0511 0.0072 0.0800 0.0066 0.0066
(0.15, 0.85) 0.0162 0.0113 0.0129 0.0441 0.0062 0.0796 0.0084 0.0084
(0.1, 0.9) 0.0103 0.0070 0.0093 0.0354 0.0056 0.0779 0.0078 0.0078
(0.05, 0.95) 0.0073 0.0056 0.0077 0.0278 0.0048 0.0777 0.0097 0.0097
(0.0, 1.0) 0.0032 0.0023 0.0035 0.0132 0.0059 0.0777 0.0090 0.0090
tot 0.0553 0.0518 0.0238 0.1015 0.0184 0.1459 0.0321 0.0321

plot_delta plot_diagonal plot_shift

train: [0.69993324 0.30006676]
validation: [0.70010013 0.29989987]
evaluate_mul_sld: 81.533s
evaluate_mul_sld_nbvs: 86.971s
evaluate_mul_sld_bcts: 87.396s
evaluate_mul_sld_ts: 85.778s
evaluate_mul_sld_vs: 84.898s
evaluate_mul_cc: 72.777s
reference: 58.110s
atc_mc: 60.832s
atc_ne: 59.018s
tot: 91.337s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0303 0.4175 0.0193 0.3236 0.0789 0.6971 0.3301 0.3301
(0.95, 0.05) 0.1107 0.0886 0.0612 0.2258 0.0551 0.1240 0.0519 0.0519
(0.9, 0.1) 0.1038 0.0629 0.0341 0.1742 0.0434 0.0989 0.0306 0.0306
(0.85, 0.15) 0.0995 0.0522 0.0287 0.1568 0.0388 0.0974 0.0252 0.0252
(0.8, 0.2) 0.0897 0.0455 0.0275 0.1432 0.0313 0.0964 0.0190 0.0190
(0.75, 0.25) 0.0818 0.0415 0.0269 0.1300 0.0292 0.0941 0.0167 0.0167
(0.7, 0.3) 0.0671 0.0343 0.0232 0.1183 0.0215 0.0955 0.0132 0.0132
(0.65, 0.35) 0.0568 0.0297 0.0224 0.1060 0.0200 0.0947 0.0170 0.0170
(0.6, 0.4) 0.0515 0.0284 0.0228 0.0986 0.0183 0.0953 0.0141 0.0141
(0.55, 0.45) 0.0449 0.0245 0.0210 0.0887 0.0156 0.0947 0.0135 0.0135
(0.5, 0.5) 0.0393 0.0218 0.0200 0.0806 0.0132 0.0936 0.0153 0.0153
(0.45, 0.55) 0.0362 0.0216 0.0204 0.0758 0.0122 0.0942 0.0146 0.0146
(0.4, 0.6) 0.0306 0.0184 0.0183 0.0682 0.0094 0.0914 0.0142 0.0142
(0.35, 0.65) 0.0262 0.0168 0.0175 0.0630 0.0095 0.0943 0.0159 0.0159
(0.3, 0.7) 0.0214 0.0141 0.0156 0.0561 0.0083 0.0940 0.0145 0.0145
(0.25, 0.75) 0.0166 0.0114 0.0134 0.0491 0.0070 0.0934 0.0144 0.0144
(0.2, 0.8) 0.0138 0.0101 0.0124 0.0444 0.0069 0.0934 0.0157 0.0157
(0.15, 0.85) 0.0104 0.0085 0.0109 0.0384 0.0070 0.0938 0.0168 0.0168
(0.1, 0.9) 0.0076 0.0066 0.0086 0.0316 0.0072 0.0931 0.0155 0.0155
(0.05, 0.95) 0.0059 0.0054 0.0070 0.0254 0.0074 0.0929 0.0152 0.0152
(0.0, 1.0) 0.0045 0.0033 0.0040 0.0138 0.0108 0.0938 0.0177 0.0177
tot 0.0452 0.0459 0.0207 0.1006 0.0215 0.1246 0.0334 0.0334

plot_delta plot_diagonal plot_shift

train: [0.79989987 0.20010013]
validation: [0.80006676 0.19993324]
evaluate_mul_sld: 80.936s
evaluate_mul_sld_nbvs: 84.504s
evaluate_mul_sld_bcts: 84.459s
evaluate_mul_sld_ts: 83.197s
evaluate_mul_sld_vs: 82.279s
evaluate_mul_cc: 72.115s
reference: 57.389s
atc_mc: 59.886s
atc_ne: 58.513s
tot: 88.463s

mul_SLD mul_SLD_nbvs mul_SLD_bcts mul_SLD_ts mul_SLD_vs mul_CC atc_mc atc_ne
(1.0, 0.0) 0.1710 0.2772 0.0772 0.5108 0.0782 0.3382 0.1159 0.1159
(0.95, 0.05) 0.1318 0.0512 0.0569 0.2074 0.0579 0.0401 0.1303 0.1303
(0.9, 0.1) 0.0908 0.0358 0.0349 0.1674 0.0331 0.0661 0.0916 0.0916
(0.85, 0.15) 0.0631 0.0242 0.0227 0.1338 0.0258 0.0757 0.0794 0.0794
(0.8, 0.2) 0.0569 0.0260 0.0236 0.1183 0.0226 0.0860 0.0673 0.0673
(0.75, 0.25) 0.0485 0.0238 0.0213 0.1064 0.0192 0.0905 0.0623 0.0623
(0.7, 0.3) 0.0364 0.0213 0.0183 0.0938 0.0159 0.0952 0.0592 0.0592
(0.65, 0.35) 0.0290 0.0184 0.0162 0.0819 0.0133 0.0980 0.0518 0.0518
(0.6, 0.4) 0.0244 0.0194 0.0160 0.0757 0.0123 0.1015 0.0536 0.0536
(0.55, 0.45) 0.0196 0.0161 0.0137 0.0672 0.0125 0.1003 0.0510 0.0510
(0.5, 0.5) 0.0158 0.0153 0.0126 0.0599 0.0114 0.1009 0.0518 0.0518
(0.45, 0.55) 0.0139 0.0165 0.0127 0.0565 0.0106 0.1017 0.0533 0.0533
(0.4, 0.6) 0.0112 0.0141 0.0105 0.0493 0.0112 0.1010 0.0506 0.0506
(0.35, 0.65) 0.0098 0.0139 0.0100 0.0451 0.0123 0.1034 0.0480 0.0480
(0.3, 0.7) 0.0106 0.0134 0.0105 0.0403 0.0119 0.1048 0.0453 0.0453
(0.25, 0.75) 0.0101 0.0124 0.0090 0.0354 0.0144 0.1057 0.0428 0.0428
(0.2, 0.8) 0.0099 0.0113 0.0077 0.0300 0.0152 0.1039 0.0472 0.0472
(0.15, 0.85) 0.0105 0.0102 0.0068 0.0249 0.0181 0.1050 0.0461 0.0461
(0.1, 0.9) 0.0111 0.0100 0.0067 0.0207 0.0199 0.1055 0.0439 0.0439
(0.05, 0.95) 0.0108 0.0098 0.0059 0.0153 0.0221 0.1042 0.0468 0.0468
(0.0, 1.0) 0.0063 0.0137 0.0041 0.0092 0.0243 0.1062 0.0425 0.0425
tot 0.0377 0.0312 0.0189 0.0928 0.0220 0.1064 0.0610 0.0610

plot_delta plot_diagonal plot_shift

train: [0.90003338 0.09996662]
validation: [0.90003338 0.09996662]
evaluate_mul_sld: 64.528s
evaluate_mul_cc: 58.489s
reference: 47.116s
atc_mc: 48.881s
atc_ne: 47.186s
tot: 66.290s

mul_SLD mul_CC atc_mc atc_ne
(1.0, 0.0) 0.0469 0.0156 0.0022 0.0022
(0.95, 0.05) 0.0840 0.0542 0.2253 0.2253
(0.9, 0.1) 0.0459 0.0369 0.1997 0.1997
(0.85, 0.15) 0.0312 0.0300 0.2018 0.2018
(0.8, 0.2) 0.0327 0.0335 0.1936 0.1936
(0.75, 0.25) 0.0329 0.0354 0.1943 0.1943
(0.7, 0.3) 0.0379 0.0355 0.1865 0.1865
(0.65, 0.35) 0.0423 0.0399 0.1849 0.1849
(0.6, 0.4) 0.0495 0.0372 0.1852 0.1852
(0.55, 0.45) 0.0506 0.0364 0.1824 0.1824
(0.5, 0.5) 0.0546 0.0378 0.1836 0.1836
(0.45, 0.55) 0.0541 0.0396 0.1801 0.1801
(0.4, 0.6) 0.0588 0.0337 0.1872 0.1872
(0.35, 0.65) 0.0618 0.0353 0.1871 0.1871
(0.3, 0.7) 0.0616 0.0372 0.1884 0.1884
(0.25, 0.75) 0.0606 0.0375 0.1829 0.1829
(0.2, 0.8) 0.0616 0.0385 0.1840 0.1840
(0.15, 0.85) 0.0617 0.0380 0.1816 0.1816
(0.1, 0.9) 0.0592 0.0389 0.1818 0.1818
(0.05, 0.95) 0.0476 0.0357 0.1848 0.1848
(0.0, 1.0) 0.0231 0.0366 0.1850 0.1850
tot 0.0504 0.0364 0.1801 0.1801

plot_delta plot_diagonal plot_shift