HaofanWen/causal_debugging_agent

1{2  "exact_match": 0.3,3  "bleu": 90.2,4  "ast": 0.9779,5  "per_task_em": {6    "codefix-00001": 0,7    "codefix-00002": 0,8    "codefix-00003": 0,9    "codefix-00004": 0,10    "codefix-00005": 0,11    "codefix-00006": 0,12    "codefix-00007": 0,13    "codefix-00008": 1,14    "codefix-00009": 0,15    "codefix-00010": 0,16    "codefix-00011": 0,17    "codefix-00012": 0,18    "codefix-00013": 0,19    "codefix-00014": 1,20    "codefix-00015": 1,21    "codefix-00016": 1,22    "codefix-00017": 1,23    "codefix-00018": 1,24    "codefix-00019": 0,25    "codefix-00020": 026  },27  "per_task_ast": {28    "codefix-00001": 1.0,29    "codefix-00002": 0.8667,30    "codefix-00003": 1.0,31    "codefix-00004": 1.0,32    "codefix-00005": 1.0,33    "codefix-00006": 1.0,34    "codefix-00007": 1.0,35    "codefix-00008": 1.0,36    "codefix-00009": 1.0,37    "codefix-00010": 0.6923,38    "codefix-00011": 1.0,39    "codefix-00012": 1.0,40    "codefix-00013": 1.0,41    "codefix-00014": 1.0,42    "codefix-00015": 1.0,43    "codefix-00016": 1.0,44    "codefix-00017": 1.0,45    "codefix-00018": 1.0,46    "codefix-00019": 1.0,47    "codefix-00020": 1.048  }49}