{ "manifest_sha256": "d3baf5d82fb5084150130ca651720821c9b7f399b8f626c55ee8e57f22c746be", "runs": [ { "loki_version": null, "model": "claude-opus-5-5", "n": 100, "outcomes": { "SD-0001": "NOT_SEALED", "SD-0002": "NOT_SEALED", "SD-0003": "NOT_SEALED", "SD-0004": "NOT_SEALED", "SD-0005": "NOT_SEALED", "SD-0006": "NOT_SEALED", "SD-0007": "NOT_SEALED", "SD-0008": "NOT_SEALED", "SD-0009": "NOT_SEALED", "SD-0010": "NOT_SEALED", "SD-0011": "NOT_SEALED", "SD-0012": "NOT_SEALED", "SD-0013": "NOT_SEALED", "SD-0014": "NOT_SEALED", "SD-0015": "NOT_SEALED", "SD-0016": "NOT_SEALED", "SD-0017": "NOT_SEALED", "SD-0018": "NOT_SEALED", "SD-0019": "NOT_SEALED", "SD-0020": "NOT_SEALED", "SD-0021": "NOT_SEALED", "SD-0022": "NOT_SEALED", "SD-0023": "NOT_SEALED", "SD-0024": "NOT_SEALED", "SD-0025": "NOT_SEALED", "SD-0026": "NOT_SEALED", "SD-0027": "NOT_SEALED", "SD-0028": "NOT_SEALED", "SD-0029": "NOT_SEALED", "SD-0030": "NOT_SEALED", "SD-0031": "NOT_SEALED", "SD-0032": "NOT_SEALED", "SD-0033": "NOT_SEALED", "SD-0034": "NOT_SEALED", "SD-0035": "NOT_SEALED", "SD-0036": "NOT_SEALED", "SD-0037": "NOT_SEALED", "SD-0038": "NOT_SEALED", "SD-0039": "NOT_SEALED", "SD-0040": "NOT_SEALED", "SD-0041": "NOT_SEALED", "SD-0042": "NOT_SEALED", "SD-0043": "NOT_SEALED", "SD-0044": "NOT_SEALED", "SD-0045": "NOT_SEALED", "SD-0046": "NOT_SEALED", "SD-0047": "NOT_SEALED", "SD-0048": "NOT_SEALED", "SD-0049": "NOT_SEALED", "SD-0050": "NOT_SEALED", "SD-0051": "NOT_SEALED", "SD-0052": "NOT_SEALED", "SD-0053": "NOT_SEALED", "SD-0054": "NOT_SEALED", "SD-0055": "NOT_SEALED", "SD-0056": "NOT_SEALED", "SD-0057": "NOT_SEALED", "SD-0058": "NOT_SEALED", "SD-0059": "NOT_SEALED", "SD-0060": "NOT_SEALED", "SD-0061": "NOT_SEALED", "SD-0062": "NOT_SEALED", "SD-0063": "NOT_SEALED", "SD-0064": "NOT_SEALED", "SD-0065": "NOT_SEALED", "SD-0066": "NOT_SEALED", "SD-0067": "NOT_SEALED", "SD-0068": "NOT_SEALED", "SD-0069": "NOT_SEALED", "SD-0070": "NOT_SEALED", "SD-0071": "NOT_SEALED", "SD-0072": "NOT_SEALED", "SD-0073": "NOT_SEALED", "SD-0074": "NOT_SEALED", "SD-0075": "NOT_SEALED", "SD-0076": "NOT_SEALED", "SD-0077": "NOT_SEALED", "SD-0078": "NOT_SEALED", "SD-0079": "NOT_SEALED", "SD-0080": "NOT_SEALED", "SD-0081": "NOT_SEALED", "SD-0082": "NOT_SEALED", "SD-0083": "NOT_SEALED", "SD-0084": "NOT_SEALED", "SD-0085": "NOT_SEALED", "SD-0086": "NOT_SEALED", "SD-0087": "NOT_SEALED", "SD-0088": "NOT_SEALED", "SD-0089": "NOT_SEALED", "SD-0090": "NOT_SEALED", "SD-0091": "NOT_SEALED", "SD-0092": "NOT_SEALED", "SD-0093": "NOT_SEALED", "SD-0094": "NOT_SEALED", "SD-0095": "NOT_SEALED", "SD-0096": "NOT_SEALED", "SD-0097": "NOT_SEALED", "SD-0098": "NOT_SEALED", "SD-0099": "NOT_SEALED", "SD-0100": "NOT_SEALED" }, "route": "custom", "setup": "top", "verifier": "llm-judge", "wrong_pass": 0 }, { "loki_version": null, "model": "claude-haiku-5-5", "n": 100, "outcomes": { "SD-0001": "NOT_SEALED", "SD-0002": "NOT_SEALED", "SD-0003": "NOT_SEALED", "SD-0004": "NOT_SEALED", "SD-0005": "NOT_SEALED", "SD-0006": "NOT_SEALED", "SD-0007": "NOT_SEALED", "SD-0008": "NOT_SEALED", "SD-0009": "NOT_SEALED", "SD-0010": "NOT_SEALED", "SD-0011": "NOT_SEALED", "SD-0012": "NOT_SEALED", "SD-0013": "NOT_SEALED", "SD-0014": "NOT_SEALED", "SD-0015": "NOT_SEALED", "SD-0016": "NOT_SEALED", "SD-0017": "NOT_SEALED", "SD-0018": "NOT_SEALED", "SD-0019": "NOT_SEALED", "SD-0020": "NOT_SEALED", "SD-0021": "NOT_SEALED", "SD-0022": "NOT_SEALED", "SD-0023": "NOT_SEALED", "SD-0024": "NOT_SEALED", "SD-0025": "NOT_SEALED", "SD-0026": "NOT_SEALED", "SD-0027": "NOT_SEALED", "SD-0028": "NOT_SEALED", "SD-0029": "NOT_SEALED", "SD-0030": "NOT_SEALED", "SD-0031": "NOT_SEALED", "SD-0032": "NOT_SEALED", "SD-0033": "NOT_SEALED", "SD-0034": "NOT_SEALED", "SD-0035": "NOT_SEALED", "SD-0036": "NOT_SEALED", "SD-0037": "NOT_SEALED", "SD-0038": "NOT_SEALED", "SD-0039": "NOT_SEALED", "SD-0040": "NOT_SEALED", "SD-0041": "NOT_SEALED", "SD-0042": "NOT_SEALED", "SD-0043": "NOT_SEALED", "SD-0044": "NOT_SEALED", "SD-0045": "NOT_SEALED", "SD-0046": "NOT_SEALED", "SD-0047": "NOT_SEALED", "SD-0048": "NOT_SEALED", "SD-0049": "NOT_SEALED", "SD-0050": "NOT_SEALED", "SD-0051": "NOT_SEALED", "SD-0052": "NOT_SEALED", "SD-0053": "NOT_SEALED", "SD-0054": "NOT_SEALED", "SD-0055": "NOT_SEALED", "SD-0056": "NOT_SEALED", "SD-0057": "NOT_SEALED", "SD-0058": "NOT_SEALED", "SD-0059": "NOT_SEALED", "SD-0060": "NOT_SEALED", "SD-0061": "NOT_SEALED", "SD-0062": "NOT_SEALED", "SD-0063": "NOT_SEALED", "SD-0064": "NOT_SEALED", "SD-0065": "NOT_SEALED", "SD-0066": "NOT_SEALED", "SD-0067": "NOT_SEALED", "SD-0068": "NOT_SEALED", "SD-0069": "NOT_SEALED", "SD-0070": "NOT_SEALED", "SD-0071": "NOT_SEALED", "SD-0072": "NOT_SEALED", "SD-0073": "NOT_SEALED", "SD-0074": "NOT_SEALED", "SD-0075": "NOT_SEALED", "SD-0076": "NOT_SEALED", "SD-0077": "NOT_SEALED", "SD-0078": "NOT_SEALED", "SD-0079": "NOT_SEALED", "SD-0080": "NOT_SEALED", "SD-0081": "NOT_SEALED", "SD-0082": "NOT_SEALED", "SD-0083": "NOT_SEALED", "SD-0084": "NOT_SEALED", "SD-0085": "NOT_SEALED", "SD-0086": "NOT_SEALED", "SD-0087": "NOT_SEALED", "SD-0088": "NOT_SEALED", "SD-0089": "NOT_SEALED", "SD-0090": "NOT_SEALED", "SD-0091": "NOT_SEALED", "SD-0092": "NOT_SEALED", "SD-0093": "NOT_SEALED", "SD-0094": "NOT_SEALED", "SD-0095": "NOT_SEALED", "SD-0096": "NOT_SEALED", "SD-0097": "NOT_SEALED", "SD-0098": "NOT_SEALED", "SD-0099": "NOT_SEALED", "SD-0100": "NOT_SEALED" }, "route": "custom", "setup": "floor", "verifier": "llm-judge", "wrong_pass": 0 } ], "schema": "loki.seeded-defects.results/v2" }