{
  "protocolo": {
    "id": "T10",
    "fecha": "2026-11-16",
    "naturaleza": "Corpuspropiosintético,consultasyrúbricaprevias,ningúnbuscadorThink²/productocomercial",
    "corpus": [
      {
        "id": "D1",
        "texto": "Antes de reintentar un cargo incierto, consulta en el destino si la operación ya ocurrió."
      },
      {
        "id": "D2",
        "texto": "El título ‘evitar cobros repetidos’ identifica un borrador de imagen, no un procedimiento de pagos."
      },
      {
        "id": "D3",
        "texto": "Acceso deshabilitado tras renovar credenciales: revisa si se invalidó la sesión, sin compartir secretos."
      },
      {
        "id": "D4",
        "texto": "Un cambio de contraseña requiere revisar qué sesiones siguen válidas y pedir entrada por el canal autorizado."
      },
      {
        "id": "D5",
        "texto": "Para preparar un informe financiero, separa USD y COP y conserva las celdas vacías como datos faltantes."
      },
      {
        "id": "D6",
        "texto": "El aviso ‘informe de gastos listo’ no contiene importes ni instrucciones para comprobar monedas."
      }
    ],
    "consultas": [
      {
        "id": "Q1",
        "texto": "evitar cobros repetidos",
        "necesidad": "Encontrar procedimiento para impedir duplicar una operación de pago al repetirla"
      },
      {
        "id": "Q2",
        "texto": "no entro después de cambiar la contraseña",
        "necesidad": "Revisar acceso y sesiones tras cambio de credenciales"
      },
      {
        "id": "Q3",
        "texto": "preparar informe con monedas distintas y datos faltantes",
        "necesidad": "Preparar reporte conservando monedas separadas y vacíos"
      }
    ],
    "relevancia_previa": {
      "Q1": [
        "D1"
      ],
      "Q2": [
        "D3",
        "D4"
      ],
      "Q3": [
        "D5"
      ]
    },
    "baseline": "Minúsculas,normalizaciónNFKC,tokenizaciónalfanuméricaunicasegúnregexUnicode. Score=interseccióndetokensconsulta/documento,sinfrecuencias,stopwords,stemmingniIDF. Rankscoredescendente,empateporIDascendente;si score0noresultado. Top2.",
    "salida_significado": "Ayudanteeligehasta2documentosporconsulta,priorizadospornecesidad/alcance,noporcoincidenciapalabras;debesustentarconIDs. Ve corpus yconsultasincluyendonecesidad,NOetiquetasrelevanciaprevia. Una salida0tools,NOembeddings/motorsemánticoprobado.",
    "evaluacion": "Precision@2=IDsrelevantesrecuperados/2siempre(espaciosvacíoscuentannorelevantes),Recall@2=IDsrelevantesrecuperados/totalrelevantesetiquetados. Reporteporconsulta,no promedioglobalrepresentativo. Razonesyrelevanciasonjuiciopropio,nociegoindependiente.",
    "limites": "Seisinsumos/3consultasartificiales,necesidadexpresadadentrodelprompt,mismainformaciónparaambasrutasperobaselinesoloquerytexto. Condicionesnoequivalentes:ayudantevepropósitoexplícito,baselinequerysolo;no comparaciónjustadecoste/capacidad/no ganador. Demuestraevaluarresultadosconrúbrica,no rendimientoempresarial."
  },
  "protocolo_sha256": "61739cd1fadd5951bde9accbd62b433c446434af16237af800fc54f670c06358",
  "prompt_exacto": "Pruebasintéticalocal,no tools/web,norelevanciaexterna. Eligehasta2documentosporconsulta,priorizadospornecesidad/no simplepalabras;noinventar. JSONarrayquery,ids,razon. corpus:D1Antes de reintentar un cargo incierto, consulta en el destino si la operación ya ocurrió. D2El título ‘evitar cobros repetidos’ identifica un borrador de imagen, no un procedimiento de pagos. D3Acceso deshabilitado tras renovar credenciales: revisa si se invalidó la sesión, sin compartir secretos. D4Un cambio de contraseña requiere revisar qué sesiones siguen válidas y pedir entrada por el canal autorizado. D5Para preparar un informe financiero, separa USD y COP y conserva las celdas vacías como datos faltantes. D6El aviso ‘informe de gastos listo’ no contiene importes ni instrucciones para comprobar monedas. Consultas:Q1‘evitar cobros repetidos’necesidadEncontrarprocedimientoimpedirduplicaroperaciónpagoalrepetirla.Q2‘no entro después de cambiar la contraseña’necesidadRevisaraccesoysesionestrascambiocredenciales.Q3‘preparar informe con monedas distintas y datos faltantes’necesidadPrepararreporteconservandomonedasseparadasyvacíos.",
  "observado_literal": [
    {
      "query": "Q1",
      "ids": [
        "D1"
      ],
      "razon": "Indica consultar en el destino si el cargo ya ocurrió antes de reintentar; D2 aclara que el título parecido es solo un borrador de imagen, no un procedimiento."
    },
    {
      "query": "Q2",
      "ids": [
        "D3",
        "D4"
      ],
      "razon": "D3 aborda el acceso deshabilitado tras renovar credenciales y revisar si se invalidó la sesión; D4 trata las sesiones válidas y el canal autorizado tras cambiar la contraseña."
    },
    {
      "query": "Q3",
      "ids": [
        "D5"
      ],
      "razon": "Indica separar USD y COP y conservar las celdas vacías como datos faltantes; D6 no contiene importes ni instrucciones sobre monedas."
    }
  ],
  "resultados": [
    {
      "query": "Q1",
      "lexical_scores": [
        {
          "id": "D2",
          "score": 3
        },
        {
          "id": "D1",
          "score": 0
        },
        {
          "id": "D3",
          "score": 0
        },
        {
          "id": "D4",
          "score": 0
        },
        {
          "id": "D5",
          "score": 0
        },
        {
          "id": "D6",
          "score": 0
        }
      ],
      "lexical": [
        "D2"
      ],
      "assistant": [
        "D1"
      ],
      "relevant": [
        "D1"
      ],
      "lexical_metrics": {
        "hits": 0,
        "precision_at_2": 0.0,
        "precision_denominator": 2,
        "recall_at_2": 0.0,
        "recall_denominator": 1
      },
      "assistant_metrics": {
        "hits": 1,
        "precision_at_2": 0.5,
        "precision_denominator": 2,
        "recall_at_2": 1.0,
        "recall_denominator": 1
      }
    },
    {
      "query": "Q2",
      "lexical_scores": [
        {
          "id": "D1",
          "score": 2
        },
        {
          "id": "D2",
          "score": 2
        },
        {
          "id": "D4",
          "score": 2
        },
        {
          "id": "D6",
          "score": 2
        },
        {
          "id": "D3",
          "score": 1
        },
        {
          "id": "D5",
          "score": 0
        }
      ],
      "lexical": [
        "D1",
        "D2"
      ],
      "assistant": [
        "D3",
        "D4"
      ],
      "relevant": [
        "D3",
        "D4"
      ],
      "lexical_metrics": {
        "hits": 0,
        "precision_at_2": 0.0,
        "precision_denominator": 2,
        "recall_at_2": 0.0,
        "recall_denominator": 2
      },
      "assistant_metrics": {
        "hits": 2,
        "precision_at_2": 1.0,
        "precision_denominator": 2,
        "recall_at_2": 1.0,
        "recall_denominator": 2
      }
    },
    {
      "query": "Q3",
      "lexical_scores": [
        {
          "id": "D5",
          "score": 5
        },
        {
          "id": "D6",
          "score": 2
        },
        {
          "id": "D4",
          "score": 1
        },
        {
          "id": "D1",
          "score": 0
        },
        {
          "id": "D2",
          "score": 0
        },
        {
          "id": "D3",
          "score": 0
        }
      ],
      "lexical": [
        "D5",
        "D6"
      ],
      "assistant": [
        "D5"
      ],
      "relevant": [
        "D5"
      ],
      "lexical_metrics": {
        "hits": 1,
        "precision_at_2": 0.5,
        "precision_denominator": 2,
        "recall_at_2": 1.0,
        "recall_denominator": 1
      },
      "assistant_metrics": {
        "hits": 1,
        "precision_at_2": 0.5,
        "precision_denominator": 2,
        "recall_at_2": 1.0,
        "recall_denominator": 1
      }
    }
  ],
  "limites": "Una salida,0tools,sinreintentos ni embeddings/motor comercial. Baselinelexicalsóloconsulta;ayudanteveademásnecesidadexplícita. Relevanciapropia,nociegoindependiente,nocomparaciónjustaequivalente.",
  "reproduccion": {
    "alcance": "Recompute baseline and metrics from saved assistant response; no new generation, semantic engine or network.",
    "requisitos": "Python3.10+ standard library; review code before use.",
    "script_nombre": "cotejar.py",
    "script": "import json,re,unicodedata,argparse\nfrom pathlib import Path\np=argparse.ArgumentParser(description='Recompute lexical baseline and check saved assistant output; no model calls')\np.add_argument('evidence',type=Path)\na=p.parse_args()\nd=json.loads(a.evidence.read_text(encoding='utf-8'))\nproto=d['protocolo']\ndef tokens(text):\n    return set(re.findall(r'[^\\W_]+',unicodedata.normalize('NFKC',text).lower(),re.UNICODE))\nrows=[]\nassert len(proto['corpus'])==6 and len(proto['consultas'])==3\nassert len({x['id'] for x in proto['corpus']})==6\nobserved=d['observado_literal']\nassert len(observed)==3 and len({x['query'] for x in observed})==3\nall_ids={x['id'] for x in proto['corpus']}\nfor q in proto['consultas']:\n    ranks=sorted([{'id':v['id'],'score':len(tokens(q['texto'])&tokens(v['texto']))} for v in proto['corpus']],key=lambda v:(-v['score'],v['id']))\n    lex=[v['id'] for v in ranks[:2] if v['score']>0]\n    gen=next(v['ids'] for v in observed if v['query']==q['id'])\n    assert len(gen)<=2 and len(gen)==len(set(gen)) and set(gen)<=all_ids\n    rel=set(proto['relevancia_previa'][q['id']])\n    assert rel and rel<=all_ids\n    row={'query':q['id'],'lexical_scores':ranks,'lexical':lex,'assistant':gen,'relevant':sorted(rel)}\n    for label,ids in [('lexical',lex),('assistant',gen)]:\n        found=len(set(ids)&rel)\n        row[label+'_metrics']={'hits':found,'precision_at_2':found/2,'precision_denominator':2,'recall_at_2':found/len(rel),'recall_denominator':len(rel)}\n    rows.append(row)\nassert rows==d['resultados'],'Computed values differ from saved results'\nfor row in rows:\n    print(json.dumps(row,ensure_ascii=False))\nprint('PASS 3 queries; lexical scores and saved-response metrics match. No generation repeated.')\n",
    "pasos": [
      "Save this JSON in a new empty data directory.",
      "In a separate scripts directory, save the embedded script as cotejar.py after reviewing it. Do not run from the data directory.",
      "Run: python3 -I /absolute/scripts/cotejar.py /absolute/data/seo178-t10-prueba-y-muestras-16nov.json",
      "Expect PASS 3 queries. It checks saved output, not another model response."
    ]
  }
}
