{ "checkpoint": "math_ink_06_candidate.pt", "bytes": 8821850, "seed": 17, "device": "cuda", "training_source_ids": [ "hwrt", "uci-pendigits", "uci-uji-pen-v2" ], "training_independent_source_groups": [ "hwrt-2015", "uci-pendigits-81", "uji-pen-family" ], "source_registry_sha256": "7cb528cfb320067d30ec9c53195a0e2e4586d733f569a50db4b563a8666f1c79", "train_samples": 15829, "source_count": 3, "baseline_validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9566666666666667, "online_top5": 1.0, "raster_top1": 0.45666666666666667, "raster_top5": 0.7766666666666666 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.8, "online_top5": 0.9733333333333334, "raster_top1": 0.48333333333333334, "raster_top5": 0.76 }, "hwrt": { "samples": 261, "online_top1": 0.9003831417624522, "online_top5": 1.0, "raster_top1": 0.7816091954022989, "raster_top5": 0.9770114942528736 } }, "selected_validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9566666666666667, "online_top5": 1.0, "raster_top1": 0.45666666666666667, "raster_top5": 0.7766666666666666 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.8, "online_top5": 0.9733333333333334, "raster_top1": 0.48333333333333334, "raster_top5": 0.76 }, "hwrt": { "samples": 261, "online_top1": 0.9003831417624522, "online_top5": 1.0, "raster_top1": 0.7816091954022989, "raster_top5": 0.9770114942528736 } }, "selected_epoch": 0, "selected_interpolation_alpha": 0.0, "baseline_test": { "uci-pendigits": { "samples": 500, "online_top1": 0.932, "online_top5": 0.994, "raster_top1": 0.428, "raster_top5": 0.726 }, "uci-uji-pen-v2": { "samples": 500, "online_top1": 0.718, "online_top5": 0.938, "raster_top1": 0.41, "raster_top5": 0.724 }, "hwrt": { "samples": 500, "online_top1": 0.84, "online_top5": 0.99, "raster_top1": 0.744, "raster_top5": 0.946 } }, "test": { "uci-pendigits": { "samples": 500, "online_top1": 0.932, "online_top5": 0.994, "raster_top1": 0.428, "raster_top5": 0.726 }, "uci-uji-pen-v2": { "samples": 500, "online_top1": 0.718, "online_top5": 0.938, "raster_top1": 0.41, "raster_top5": 0.724 }, "hwrt": { "samples": 500, "online_top1": 0.84, "online_top5": 0.99, "raster_top1": 0.744, "raster_top5": 0.946 } }, "test_delta": { "uci-pendigits": { "online_top1": 0.0, "online_top5": 0.0, "raster_top1": 0.0, "raster_top5": 0.0 }, "uci-uji-pen-v2": { "online_top1": 0.0, "online_top5": 0.0, "raster_top1": 0.0, "raster_top5": 0.0 }, "hwrt": { "online_top1": 0.0, "online_top5": 0.0, "raster_top1": 0.0, "raster_top5": 0.0 } }, "history": [ { "epoch": 0, "macro_online_top1": 0.885683269476373, "validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9566666666666667, "online_top5": 1.0, "raster_top1": 0.45666666666666667, "raster_top5": 0.7766666666666666 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.8, "online_top5": 0.9733333333333334, "raster_top1": 0.48333333333333334, "raster_top5": 0.76 }, "hwrt": { "samples": 261, "online_top1": 0.9003831417624522, "online_top5": 1.0, "raster_top1": 0.7816091954022989, "raster_top5": 0.9770114942528736 } } }, { "epoch": 1, "loss": 1.8227067461844622, "macro_online_top1": 0.8807407407407407, "hwrt_gate": false, "validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9533333333333334, "online_top5": 1.0, "raster_top1": 0.5033333333333333, "raster_top5": 0.8233333333333334 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.8, "online_top5": 0.9733333333333334, "raster_top1": 0.48, "raster_top5": 0.79 }, "hwrt": { "samples": 261, "online_top1": 0.8888888888888888, "online_top5": 1.0, "raster_top1": 0.7662835249042146, "raster_top5": 0.9731800766283525 } }, "interpolation": [ { "alpha": 0.25, "macro_online_top1": 0.8832950191570882, "hwrt_gate": true, "validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9566666666666667, "online_top5": 1.0, "raster_top1": 0.47, "raster_top5": 0.7933333333333333 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.7966666666666666, "online_top5": 0.9733333333333334, "raster_top1": 0.48, "raster_top5": 0.7666666666666667 }, "hwrt": { "samples": 261, "online_top1": 0.896551724137931, "online_top5": 1.0, "raster_top1": 0.7777777777777778, "raster_top5": 0.9770114942528736 } } }, { "alpha": 0.5, "macro_online_top1": 0.8820178799489145, "hwrt_gate": false, "validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9533333333333334, "online_top5": 1.0, "raster_top1": 0.47333333333333333, "raster_top5": 0.8033333333333333 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.8, "online_top5": 0.9733333333333334, "raster_top1": 0.48, "raster_top5": 0.7733333333333333 }, "hwrt": { "samples": 261, "online_top1": 0.89272030651341, "online_top5": 1.0, "raster_top1": 0.7624521072796935, "raster_top5": 0.9770114942528736 } } }, { "alpha": 0.75, "macro_online_top1": 0.878684546615581, "hwrt_gate": false, "validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.95, "online_top5": 1.0, "raster_top1": 0.48333333333333334, "raster_top5": 0.8133333333333334 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.7933333333333333, "online_top5": 0.9733333333333334, "raster_top1": 0.48333333333333334, "raster_top5": 0.78 }, "hwrt": { "samples": 261, "online_top1": 0.89272030651341, "online_top5": 1.0, "raster_top1": 0.7662835249042146, "raster_top5": 0.9731800766283525 } } }, { "alpha": 1.0, "macro_online_top1": 0.8807407407407407, "hwrt_gate": false, "validation": { "uci-pendigits": { "samples": 300, "online_top1": 0.9533333333333334, "online_top5": 1.0, "raster_top1": 0.5033333333333333, "raster_top5": 0.8233333333333334 }, "uci-uji-pen-v2": { "samples": 300, "online_top1": 0.8, "online_top5": 0.9733333333333334, "raster_top1": 0.48, "raster_top5": 0.79 }, "hwrt": { "samples": 261, "online_top1": 0.8888888888888888, "online_top5": 1.0, "raster_top1": 0.7662835249042146, "raster_top5": 0.9731800766283525 } } } ] } ], "hwrt_official_test_used": false, "product_validation": false }