[
  {
    "task": "feedback",
    "arm": "decisions",
    "planned": 48,
    "valid": 48,
    "dropped": [],
    "label": "feedback/decisions",
    "n": 48,
    "frontierAccuracy": 0.9583333333333334,
    "m1Diagnostic": true,
    "m2Primary": true,
    "pointSelection": {
      "naive": "qwen3:1.7b",
      "corr": "qwen3:0.6b",
      "oracle": "qwen3:0.6b"
    },
    "descent": {
      "dNaiveToOracle": 0.3035,
      "dCorrToOracle": 0.0475,
      "modeNaive": {
        "value": "qwen3:1.7b",
        "frac": 0.703,
        "dist": {
          "qwen3:0.6b": 581,
          "qwen3:1.7b": 1406,
          "qwen3:4b": 12,
          "frontier": 1
        }
      },
      "modeCorr": {
        "value": "qwen3:0.6b",
        "frac": 0.55,
        "dist": {
          "qwen3:0.6b": 1100,
          "qwen3:1.7b": 900
        }
      },
      "modeOracle": {
        "value": "qwen3:0.6b",
        "frac": 0.5905,
        "dist": {
          "qwen3:0.6b": 1181,
          "qwen3:1.7b": 819
        }
      },
      "nCorrCloser": 519,
      "nNaiveCloser": 7
    },
    "tiers": [
      {
        "tier": "qwen3:0.6b",
        "pNaive": 0.8125,
        "pCorr": 0.837500000000114,
        "pOracle": 0.8541666666666666,
        "pOneParam": 0.8455882352941176,
        "phiErr": -0.08615751684814253,
        "sharedErrorRate": 0,
        "localErrRate": 0.14583333333333334,
        "ciNaive": [
          0.7083333333333334,
          0.9166666666666666
        ],
        "ciCorr": [
          0.719177028095857,
          0.9375
        ],
        "ciOracle": [
          0.75,
          0.9375
        ],
        "ciPhi": [
          -0.15249857033260467,
          0
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 0.016666666666552588
      },
      {
        "tier": "qwen3:1.7b",
        "pNaive": 0.9375,
        "pCorr": 0.9758964417908929,
        "pOracle": 0.9791666666666666,
        "pOneParam": 0.9779411764705882,
        "phiErr": -0.030414953233623677,
        "sharedErrorRate": 0,
        "localErrRate": 0.020833333333333332,
        "ciNaive": [
          0.875,
          1
        ],
        "ciCorr": [
          0.9215311415966365,
          1
        ],
        "ciOracle": [
          0.9375,
          1
        ],
        "ciPhi": [
          -0.06666666666666667,
          0
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 0.003270224875773775
      },
      {
        "tier": "qwen3:4b",
        "pNaive": 0.9583333333333334,
        "pCorr": 0.9999821403692819,
        "pOracle": 1,
        "pOneParam": 1,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0,
        "ciNaive": [
          0.8958333333333334,
          1
        ],
        "ciCorr": [
          0.9999624819534205,
          1
        ],
        "ciOracle": [
          1,
          1
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 0.00001785963071809782
      },
      {
        "tier": "qwen3:8b",
        "pNaive": 0.9583333333333334,
        "pCorr": 0.9999821403692819,
        "pOracle": 1,
        "pOneParam": 1,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0,
        "ciNaive": [
          0.8958333333333334,
          1
        ],
        "ciCorr": [
          0.9999624819534205,
          1
        ],
        "ciOracle": [
          1,
          1
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 0.00001785963071809782
      },
      {
        "tier": "qwen3-coder:30b",
        "pNaive": 0.9375,
        "pCorr": 0.9791666666663565,
        "pOracle": 0.9791666666666666,
        "pOneParam": 0.9779411764705882,
        "phiErr": -0.030414953233623677,
        "sharedErrorRate": 0,
        "localErrRate": 0.020833333333333332,
        "ciNaive": [
          0.8541666666666666,
          1
        ],
        "ciCorr": [
          0.9374999999998918,
          1
        ],
        "ciOracle": [
          0.9375,
          1
        ],
        "ciPhi": [
          -0.06666666666666667,
          0
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 3.100852907778062e-13
      }
    ]
  },
  {
    "task": "feedback",
    "arm": "responses",
    "planned": 48,
    "valid": 48,
    "dropped": [],
    "label": "feedback/responses",
    "n": 48,
    "frontierAccuracy": 1,
    "m1Diagnostic": true,
    "m2Primary": false,
    "pointSelection": {
      "naive": "qwen3:0.6b",
      "corr": "qwen3:0.6b",
      "oracle": "qwen3:0.6b"
    },
    "descent": {
      "dNaiveToOracle": 0,
      "dCorrToOracle": 0.03,
      "modeNaive": {
        "value": "qwen3:0.6b",
        "frac": 0.5905,
        "dist": {
          "qwen3:0.6b": 1181,
          "qwen3:1.7b": 819
        }
      },
      "modeCorr": {
        "value": "qwen3:0.6b",
        "frac": 0.6205,
        "dist": {
          "qwen3:0.6b": 1241,
          "qwen3:1.7b": 759
        }
      },
      "modeOracle": {
        "value": "qwen3:0.6b",
        "frac": 0.5905,
        "dist": {
          "qwen3:0.6b": 1181,
          "qwen3:1.7b": 819
        }
      },
      "nCorrCloser": 0,
      "nNaiveCloser": 60
    },
    "tiers": [
      {
        "tier": "qwen3:0.6b",
        "pNaive": 0.8541666666666666,
        "pCorr": 0.8541666666666666,
        "pOracle": 0.8541666666666666,
        "pOneParam": 0.8541666666666666,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0.14583333333333334,
        "ciNaive": [
          0.75,
          0.9375
        ],
        "ciCorr": [
          0.7499999999999999,
          0.9375
        ],
        "ciOracle": [
          0.75,
          0.9375
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0,
        "biasCorr": 0
      },
      {
        "tier": "qwen3:1.7b",
        "pNaive": 0.9791666666666666,
        "pCorr": 0.9791666666666666,
        "pOracle": 0.9791666666666666,
        "pOneParam": 0.9791666666666666,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0.020833333333333332,
        "ciNaive": [
          0.9375,
          1
        ],
        "ciCorr": [
          0.9374999999999999,
          1
        ],
        "ciOracle": [
          0.9375,
          1
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0,
        "biasCorr": 0
      },
      {
        "tier": "qwen3:4b",
        "pNaive": 1,
        "pCorr": 1,
        "pOracle": 1,
        "pOneParam": 1,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0,
        "ciNaive": [
          1,
          1
        ],
        "ciCorr": [
          0.9999999999999999,
          1
        ],
        "ciOracle": [
          1,
          1
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0,
        "biasCorr": 0
      },
      {
        "tier": "qwen3:8b",
        "pNaive": 1,
        "pCorr": 1,
        "pOracle": 1,
        "pOneParam": 1,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0,
        "ciNaive": [
          1,
          1
        ],
        "ciCorr": [
          0.9999999999999999,
          1
        ],
        "ciOracle": [
          1,
          1
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0,
        "biasCorr": 0
      },
      {
        "tier": "qwen3-coder:30b",
        "pNaive": 0.9791666666666666,
        "pCorr": 0.9791666666666666,
        "pOracle": 0.9791666666666666,
        "pOneParam": 0.9791666666666666,
        "phiErr": 0,
        "sharedErrorRate": 0,
        "localErrRate": 0.020833333333333332,
        "ciNaive": [
          0.9375,
          1
        ],
        "ciCorr": [
          0.9375,
          1
        ],
        "ciOracle": [
          0.9375,
          1
        ],
        "ciPhi": [
          0,
          0
        ],
        "biasNaive": 0,
        "biasCorr": 0
      }
    ]
  },
  {
    "task": "triage",
    "arm": "decisions",
    "planned": 48,
    "valid": 48,
    "dropped": [],
    "label": "triage/decisions",
    "n": 48,
    "frontierAccuracy": 0.9166666666666666,
    "m1Diagnostic": false,
    "m2Primary": true,
    "pointSelection": {
      "naive": "qwen3:8b",
      "corr": "qwen3:8b",
      "oracle": "qwen3:8b"
    },
    "descent": {
      "dNaiveToOracle": 0.29,
      "dCorrToOracle": 0.2375,
      "modeNaive": {
        "value": "qwen3:8b",
        "frac": 0.588,
        "dist": {
          "qwen3:8b": 1176,
          "qwen3-coder:30b": 371,
          "qwen3:4b": 402,
          "frontier": 51
        }
      },
      "modeCorr": {
        "value": "qwen3:8b",
        "frac": 0.623,
        "dist": {
          "qwen3:8b": 1246,
          "qwen3:4b": 634,
          "qwen3-coder:30b": 119,
          "qwen3:1.7b": 1
        }
      },
      "modeOracle": {
        "value": "qwen3:8b",
        "frac": 0.7475,
        "dist": {
          "qwen3:8b": 1495,
          "qwen3:4b": 253,
          "qwen3-coder:30b": 244,
          "frontier": 7,
          "qwen3:1.7b": 1
        }
      },
      "nCorrCloser": 313,
      "nNaiveCloser": 208
    },
    "tiers": [
      {
        "tier": "qwen3:0.6b",
        "pNaive": 0.5,
        "pCorr": 0.5499050134369738,
        "pOracle": 0.5625,
        "pOneParam": 0.53125,
        "phiErr": -0.11396057645963795,
        "sharedErrorRate": 0,
        "localErrRate": 0.4375,
        "ciNaive": [
          0.3541666666666667,
          0.6458333333333334
        ],
        "ciCorr": [
          0.39337566467475577,
          0.688880010325449
        ],
        "ciOracle": [
          0.4166666666666667,
          0.7083333333333334
        ],
        "ciPhi": [
          -0.32006096980144877,
          0.17258978545253828
        ],
        "biasNaive": 0.0625,
        "biasCorr": 0.012594986563026156
      },
      {
        "tier": "qwen3:1.7b",
        "pNaive": 0.6041666666666666,
        "pCorr": 0.5850297708590094,
        "pOracle": 0.5625,
        "pOneParam": 0.6484375,
        "phiErr": 0.18993429409939658,
        "sharedErrorRate": 0.75,
        "localErrRate": 0.4375,
        "ciNaive": [
          0.4583333333333333,
          0.75
        ],
        "ciCorr": [
          0.44037011008677157,
          0.7237999080292606
        ],
        "ciOracle": [
          0.4375,
          0.7083333333333334
        ],
        "ciPhi": [
          -0.11298653657320641,
          0.4212820672321083
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 0.022529770859009424
      },
      {
        "tier": "qwen3:4b",
        "pNaive": 0.7916666666666666,
        "pCorr": 0.8027029802270351,
        "pOracle": 0.7708333333333334,
        "pOneParam": 0.859375,
        "phiErr": 0.3736340620576302,
        "sharedErrorRate": 0.5,
        "localErrRate": 0.22916666666666666,
        "ciNaive": [
          0.6666666666666666,
          0.8958333333333334
        ],
        "ciCorr": [
          0.6853418569127206,
          0.914069772988752
        ],
        "ciOracle": [
          0.6458333333333334,
          0.875
        ],
        "ciPhi": [
          -0.04397994971335425,
          0.6832316548550804
        ],
        "biasNaive": 0.02083333333333326,
        "biasCorr": 0.03186964689370175
      },
      {
        "tier": "qwen3:8b",
        "pNaive": 0.875,
        "pCorr": 0.9047194997956587,
        "pOracle": 0.8958333333333334,
        "pOneParam": 0.953125,
        "phiErr": 0.3906951575475159,
        "sharedErrorRate": 0.25,
        "localErrRate": 0.10416666666666667,
        "ciNaive": [
          0.7708333333333334,
          0.9583333333333334
        ],
        "ciCorr": [
          0.8035297662010998,
          0.9791810624850382
        ],
        "ciOracle": [
          0.7916666666666666,
          0.9791666666666666
        ],
        "ciPhi": [
          -0.07110282504246376,
          0.8075728530872482
        ],
        "biasNaive": 0.02083333333333337,
        "biasCorr": 0.008886166462325318
      },
      {
        "tier": "qwen3-coder:30b",
        "pNaive": 0.9166666666666666,
        "pCorr": 0.9512779878391291,
        "pOracle": 0.9375,
        "pOneParam": 1,
        "phiErr": 0.5449492609130662,
        "sharedErrorRate": 0.25,
        "localErrRate": 0.0625,
        "ciNaive": [
          0.8333333333333334,
          0.9791666666666666
        ],
        "ciCorr": [
          0.8717365001134216,
          0.9999999999990572
        ],
        "ciOracle": [
          0.8541666666666666,
          1
        ],
        "ciPhi": [
          -0.04349080309065994,
          1
        ],
        "biasNaive": 0.02083333333333337,
        "biasCorr": 0.013777987839129091
      }
    ]
  },
  {
    "task": "triage",
    "arm": "responses",
    "planned": 48,
    "valid": 48,
    "dropped": [],
    "label": "triage/responses",
    "n": 48,
    "frontierAccuracy": 0.9583333333333334,
    "m1Diagnostic": false,
    "m2Primary": false,
    "pointSelection": {
      "naive": "qwen3:8b",
      "corr": "qwen3:8b",
      "oracle": "qwen3:8b"
    },
    "descent": {
      "dNaiveToOracle": 0.0055,
      "dCorrToOracle": 0.1825,
      "modeNaive": {
        "value": "qwen3:8b",
        "frac": 0.7475,
        "dist": {
          "qwen3:8b": 1495,
          "qwen3:4b": 253,
          "qwen3-coder:30b": 243,
          "frontier": 8,
          "qwen3:1.7b": 1
        }
      },
      "modeCorr": {
        "value": "qwen3:8b",
        "frac": 0.692,
        "dist": {
          "qwen3:8b": 1384,
          "qwen3:4b": 507,
          "qwen3-coder:30b": 108,
          "qwen3:1.7b": 1
        }
      },
      "modeOracle": {
        "value": "qwen3:8b",
        "frac": 0.7475,
        "dist": {
          "qwen3:8b": 1495,
          "qwen3:4b": 253,
          "qwen3-coder:30b": 244,
          "frontier": 7,
          "qwen3:1.7b": 1
        }
      },
      "nCorrCloser": 4,
      "nNaiveCloser": 358
    },
    "tiers": [
      {
        "tier": "qwen3:0.6b",
        "pNaive": 0.5208333333333334,
        "pCorr": 0.5545634920634712,
        "pOracle": 0.5625,
        "pOneParam": 0.536764705882353,
        "phiErr": -0.18389242812245682,
        "sharedErrorRate": 0,
        "localErrRate": 0.4375,
        "ciNaive": [
          0.375,
          0.6666666666666666
        ],
        "ciCorr": [
          0.4104166666666494,
          0.696741845776667
        ],
        "ciOracle": [
          0.4166666666666667,
          0.7083333333333334
        ],
        "ciPhi": [
          -0.30551578842593463,
          0
        ],
        "biasNaive": 0.04166666666666663,
        "biasCorr": 0.00793650793652878
      },
      {
        "tier": "qwen3:1.7b",
        "pNaive": 0.5833333333333334,
        "pCorr": 0.5669437161288671,
        "pOracle": 0.5625,
        "pOneParam": 0.6029411764705883,
        "phiErr": 0.2364331218717302,
        "sharedErrorRate": 0.5,
        "localErrRate": 0.4375,
        "ciNaive": [
          0.4583333333333333,
          0.7291666666666666
        ],
        "ciCorr": [
          0.4160715186789345,
          0.7119978894606109
        ],
        "ciOracle": [
          0.4375,
          0.7083333333333334
        ],
        "ciPhi": [
          0,
          0.38665444666985027
        ],
        "biasNaive": 0.02083333333333337,
        "biasCorr": 0.00444371612886707
      },
      {
        "tier": "qwen3:4b",
        "pNaive": 0.7708333333333334,
        "pCorr": 0.795562225981333,
        "pOracle": 0.7708333333333334,
        "pOneParam": 0.8014705882352942,
        "phiErr": 0.38242000377665597,
        "sharedErrorRate": 0,
        "localErrRate": 0.22916666666666666,
        "ciNaive": [
          0.6458333333333334,
          0.875
        ],
        "ciCorr": [
          0.6779516280318544,
          0.9018709150241561
        ],
        "ciOracle": [
          0.6458333333333334,
          0.875
        ],
        "ciPhi": [
          0,
          0.6253962802892077
        ],
        "biasNaive": 0,
        "biasCorr": 0.0247288926479996
      },
      {
        "tier": "qwen3:8b",
        "pNaive": 0.8958333333333334,
        "pCorr": 0.914401264428841,
        "pOracle": 0.8958333333333334,
        "pOneParam": 0.9338235294117647,
        "phiErr": 0.6114842953651883,
        "sharedErrorRate": 0,
        "localErrRate": 0.10416666666666667,
        "ciNaive": [
          0.7916666666666666,
          0.9791666666666666
        ],
        "ciCorr": [
          0.8104238319998729,
          0.9791666666666667
        ],
        "ciOracle": [
          0.7916666666666666,
          0.9791666666666666
        ],
        "ciPhi": [
          0,
          1
        ],
        "biasNaive": 0,
        "biasCorr": 0.018567931095507584
      },
      {
        "tier": "qwen3-coder:30b",
        "pNaive": 0.9375,
        "pCorr": 0.9522479803381181,
        "pOracle": 0.9375,
        "pOneParam": 0.9779411764705882,
        "phiErr": 0.3768673314407159,
        "sharedErrorRate": 0.5,
        "localErrRate": 0.0625,
        "ciNaive": [
          0.8541666666666666,
          1
        ],
        "ciCorr": [
          0.8749903840977316,
          0.9999999999999944
        ],
        "ciOracle": [
          0.8541666666666666,
          1
        ],
        "ciPhi": [
          -0.05383819020581655,
          1
        ],
        "biasNaive": 0,
        "biasCorr": 0.014747980338118083
      }
    ]
  }
]