> ## Documentation Index > Fetch the complete documentation index at: https://docs.zelto.ai/llms.txt > Use this file to discover all available pages before exploring further. # Iniciar una ejecución > Inicia la ejecución que estimaste: envía los mismos candidatos, repeticiones y versión con su `estimateToken`. Responde 202 con la ejecución en cola. Por encima del límite mensual de gasto (o del umbral por ejecución), la ejecución espera a un propietario y la llamada responde **402 `approval_required`** con `details.approvalId` y `details.runId`. ## OpenAPI ````yaml /es/docs-openapi.json post /v1/benchmarks/{id}/runs openapi: 3.1.0 info: title: API REST de Zelto version: v1 description: >- Acceso programático a tu organización de Zelto. Cada endpoint está limitado a la organización a la que pertenece la clave de API. Crea una clave en Configuración → Integraciones → Integración por API. servers: - url: https://api.zelto.ai description: Producción security: - bearerAuth: [] tags: - name: Monitors description: Exportaciones filtradas y asíncronas de resultados guardados de monitores. - name: Agentes description: >- Agentes de IA de voz y texto normalizados mediante el flujo de ingestión de Zelto. - name: Conversaciones description: >- Conversaciones de voz y texto (llamadas, chats y mensajes de voz), junto con sus transcripciones y grabaciones. - name: Métricas del cliente description: >- Evaluaciones proporcionadas por el cliente y asociadas a una conversación. Requiere que las métricas estén habilitadas. - name: Revisiones description: Estado de revisión humana de las conversaciones. - name: Colas de revisión description: Agrupa y dirige conversaciones para revisarlas por lotes. - name: Empresas description: Clientes o marcas para los que trabajan tus agentes, y sus logos. - name: Hallazgos description: >- Problemas estructurados descubiertos durante el análisis, con conversaciones y comentarios opcionales. - name: Experimentos description: >- Medición prospectiva de dos versiones de prompt enrutadas externamente mediante resultados de monitores independientes. - name: Organizaciones description: >- Aprovisionamiento de organizaciones sin interfaz. Requiere una clave de API de administrador o servicio. - name: Proveedores de IA description: >- Las claves propias de tu organización para proveedores de IA (trae tu propia clave). Los monitores pueden ejecutarse con ellas en lugar de los modelos integrados de Zelto. Solo propietarios o administradores; el secreto es de solo escritura. - name: Benchmarks description: >- Evaluaciones repetibles de prompts, modelos y motores de voz a texto de tus agentes sobre un conjunto fijo de casos, puntuadas por Judges. paths: /v1/benchmarks/{id}/runs: post: tags: - Benchmarks summary: Iniciar una ejecución description: >- Inicia la ejecución que estimaste: envía los mismos candidatos, repeticiones y versión con su `estimateToken`. Responde 202 con la ejecución en cola. Por encima del límite mensual de gasto (o del umbral por ejecución), la ejecución espera a un propietario y la llamada responde **402 `approval_required`** con `details.approvalId` y `details.runId`. operationId: startBenchmarkRun parameters: - name: id in: path required: true description: Id del benchmark. schema: type: string format: uuid - $ref: '#/components/parameters/BenchmarkIdempotencyKey' requestBody: required: true content: application/json: schema: type: object properties: candidates: minItems: 1 maxItems: 10 type: array items: type: object properties: model: type: string minLength: 1 maxLength: 200 description: >- Un `model` de las opciones de candidatos: "openai/gpt-5-mini", "bedrock/…", o para STT "deepgram/nova-3". agentVersionId: description: >- Solo LLM: la versión del prompt del agente a probar. Null = el prompt tal como se grabó en cada caso. anyOf: - type: string format: uuid - type: 'null' aiKeyId: description: >- Ejecutar con esta clave de IA de la organización (clave propia). Omítelo para usar el modelo de la plataforma. anyOf: - type: string format: uuid - type: 'null' label: description: 'Etiqueta visible. Por defecto: modelo + versión.' type: string maxLength: 200 required: - model description: Lo que compara la ejecución, en orden de visualización. repeats: description: Repeticiones por caso (LLM, 1-3). STT siempre 1. type: integer minimum: 1 maximum: 3 versionNumber: description: >- Versión publicada a ejecutar. Por defecto: la versión publicada actual (o el borrador si no hay nada publicado). type: integer minimum: 1 draft: description: >- Ejecutar el borrador sin publicar en lugar de una versión publicada. type: boolean estimateToken: type: string minLength: 1 maxLength: 8192 description: El `estimateToken` de la estimación, sin cambios. required: - candidates - estimateToken responses: '202': description: Respuesta correcta. content: application/json: schema: $ref: '#/components/schemas/BenchmarkRun' headers: Idempotent-Replayed: description: >- `true` cuando esta respuesta repite una solicitud anterior con la misma Idempotency-Key. schema: type: string enum: - 'true' '400': $ref: '#/components/responses/ValidationFailed' '401': $ref: '#/components/responses/Unauthorized' '402': description: >- `approval_required`: Esta ejecución llevaría a la organización por encima de su límite mensual de gasto en benchmarks, así que espera la aprobación de un propietario. content: application/json: schema: $ref: '#/components/schemas/BenchmarkError' '403': description: >- `plan_limit`: Esto superaría un límite de Benchmarks del plan de la organización. `phi_mode_blocked`: La organización está en modo PHI, que solo permite modelos enrutados por Bedrock y AWS Transcribe. content: application/json: schema: $ref: '#/components/schemas/BenchmarkError' '404': $ref: '#/components/responses/NotFound' '409': description: >- `estimate_stale`: El benchmark cambió desde esta estimación. `pointer_moved`: El puntero de prompt de un candidato apunta a una versión distinta de la que tenía al estimar. `conflict`: El recurso no está en un estado que permita esto. `idempotency_key_reused`: Esta Idempotency-Key ya se usó para una solicitud distinta. content: application/json: schema: $ref: '#/components/schemas/BenchmarkError' components: parameters: BenchmarkIdempotencyKey: name: Idempotency-Key in: header required: false description: >- Clave opcional, única por organización (1-255 caracteres ASCII imprimibles, por ejemplo un UUID). Reenviar una solicitud con la misma clave devuelve el resultado original en lugar de crear otro; usarla para una solicitud distinta devuelve 409 `idempotency_key_reused`. schema: type: string minLength: 1 maxLength: 255 schemas: BenchmarkRun: type: object properties: id: type: string benchmarkId: type: string number: type: number status: type: string enum: - awaiting_approval - queued - running - completed - failed - cancelled - rejected description: >- `awaiting_approval`: espera a un propietario (supera el límite de gasto). `rejected`: un propietario la rechazó o la solicitud venció. cancelRequested: type: boolean trigger: type: string enum: - ui - api - mcp versionNumber: type: - number - 'null' isDraftRun: type: boolean publishedAsVersionNumber: description: >- Solo ejecuciones del borrador: la versión publicada después a partir del borrador sobre el que corrió esta ejecución (era el borrador en ese momento). Null mientras ese borrador sigue abierto, y en ejecuciones de una versión publicada. type: - number - 'null' repeats: type: number totalCells: type: number completedCells: type: number passedCells: type: number failedCells: type: number erroredCells: type: number skippedCells: type: number candidates: type: array items: $ref: '#/components/schemas/BenchmarkCandidate' results: type: array items: type: object properties: candidateId: type: string passRate: type: - number - 'null' wer: type: - number - 'null' p50LatencyMs: type: - number - 'null' costUsd: type: - number - 'null' required: - candidateId - passRate - wer - p50LatencyMs - costUsd additionalProperties: {} estimatedCostUsd: type: number description: USD. costCapUsd: anyOf: - type: number description: USD. - type: 'null' actualCostUsd: anyOf: - type: number description: USD. - type: 'null' caseSetHash: type: - string - 'null' failureReason: type: - string - 'null' createdBy: type: string createdByUser: $ref: '#/components/schemas/BenchmarkRunAuthor' createdAt: type: string startedAt: type: - string - 'null' finishedAt: type: - string - 'null' rescoredAt: type: - string - 'null' approval: anyOf: - $ref: '#/components/schemas/BenchmarkRunApproval' - type: 'null' required: - id - benchmarkId - number - status - cancelRequested - trigger - versionNumber - isDraftRun - repeats - totalCells - completedCells - passedCells - failedCells - erroredCells - skippedCells - candidates - results - estimatedCostUsd - costCapUsd - actualCostUsd - caseSetHash - failureReason - createdBy - createdByUser - createdAt - startedAt - finishedAt - rescoredAt - approval additionalProperties: {} description: 'Una ejecución: qué compara, su estado, progreso y costo.' BenchmarkError: type: object required: - error - code - message properties: error: type: string enum: - validation_failed - invalid_parameter - approval_required - plan_limit - phi_mode_blocked - owner_required - not_entitled - forbidden - not_found - payload_too_large - estimate_stale - pointer_moved - no_draft_changes - conflict - idempotency_key_reused - rate_limited - model_unavailable description: Código de error estable (mismo valor que `code`). code: type: string enum: - validation_failed - invalid_parameter - approval_required - plan_limit - phi_mode_blocked - owner_required - not_entitled - forbidden - not_found - payload_too_large - estimate_stale - pointer_moved - no_draft_changes - conflict - idempotency_key_reused - rate_limited - model_unavailable description: Causa estable y legible por máquinas; compara con este campo. message: type: string description: Una frase en lenguaje claro que explica qué está mal. hint: type: string description: El siguiente paso que conviene probar. details: type: object additionalProperties: true description: >- Contexto propio de cada código, por ejemplo `approvalRequestId` con `approval_required` o `cap` con `plan_limit`. BenchmarkCandidate: type: object properties: id: type: string label: type: string model: type: string description: 'LLM: "openrouter/anthropic/claude-…"; STT: "deepgram/nova-3".' agentVersionId: description: Solo LLM. Null = el prompt tal como se grabó en cada caso. type: - string - 'null' agentVersionLabel: type: - string - 'null' isReference: type: boolean required: - id - label - model - agentVersionId - agentVersionLabel description: >- Lo que compara una ejecución: un modelo más una fuente de prompt, o un motor de STT. BenchmarkRunAuthor: type: object properties: id: type: string name: type: string image: type: - string - 'null' required: - id - name - image description: Un miembro de la organización. BenchmarkRunApproval: type: object properties: id: type: string runId: type: string reason: type: string enum: - monthly_cap - threshold status: type: string enum: - pending - approved - rejected - expired estimatedCostUsd: type: number description: USD. monthToDateUsd: anyOf: - type: number description: USD. - type: 'null' capUsd: anyOf: - type: number description: USD. - type: 'null' requestedBy: type: - string - 'null' decidedBy: type: - string - 'null' decisionNote: type: - string - 'null' decidedAt: type: - string - 'null' expiresAt: type: string createdAt: type: string required: - id - runId - reason - status - estimatedCostUsd - monthToDateUsd - capUsd - requestedBy - decidedBy - decisionNote - decidedAt - expiresAt - createdAt additionalProperties: {} description: >- Una solicitud de aprobación de un propietario para una ejecución que supera el límite de gasto o el umbral. Error: type: object required: - error properties: error: type: string description: >- Nombre corto del error: `Unauthorized`, `Validation failed`, `Not found` o un código estable en snake_case que puedes comparar en tu código, como `unknown_query_parameter`, `invalid_parameter`, `payload_too_large` o `not_found`. message: type: string description: Una frase en lenguaje claro que explica qué falla y cómo corregirlo. code: type: string description: >- Causa estable y legible por máquina; compara con este valor y no con `error` ni `message`. En un 401: `missing_credentials`, `malformed_credentials`, `ingest_key_not_allowed` (se usó una clave de ingesta de observabilidad, solo de escritura, en un endpoint que requiere una clave API), `key_expired` o `invalid_credentials`. En otros casos, por ejemplo: `not_found`, `invalid_parameter`, `unknown_query_parameter`, `missing_parameter`, `validation_failed`, `invalid_json`, `payload_too_large`, `conversation_not_found`, `plan_required`. hint: type: string description: >- El siguiente paso a probar: dónde encontrar el id correcto, qué parámetros acepta el endpoint, cómo mejorar el plan o cómo autenticarte. parameter: type: string description: 'Con `invalid_parameter`: el parámetro de consulta rechazado.' unknown: type: array items: type: string description: >- Con `unknown_query_parameter`: los parámetros enviados que este endpoint no acepta. valid: type: array items: type: string description: >- Con `unknown_query_parameter`: los parámetros que acepta este endpoint. details: type: object additionalProperties: true responses: ValidationFailed: description: >- El cuerpo o la cadena de consulta de la solicitud han fallado en la validación. `code` indica el tipo (`validation_failed`, `invalid_json`, `invalid_parameter`, `unknown_query_parameter`, `missing_parameter`) y un filtro con valores fijos lista los permitidos en `valid` (se comprueba cada valor repetido: `?status=open&status=zz` es un 400). Un cuerpo `validation_failed` incluye además `message` (los primeros campos que fallan), `hint` (cómo corregirlo, por ejemplo que la `description` de un hallazgo es un documento JSON de TipTap y no una cadena) y `details` (nombre del campo y mensajes). content: application/json: schema: $ref: '#/components/schemas/Error' Unauthorized: description: >- Clave API faltante o no válida. El cuerpo indica la causa en `code` (por ejemplo `ingest_key_not_allowed` cuando se usa aquí una clave de ingesta, solo de escritura), con un `message` y un `hint`. content: application/json: schema: $ref: '#/components/schemas/Error' NotFound: description: >- Recurso no encontrado en tu organización. También se devuelve cuando un id de la ruta no es un UUID, y `{ "error": "not_found" }` para una ruta que esta API no tiene. El cuerpo conserva `error: "Not found"` y añade `code: "not_found"` y un `hint`. content: application/json: schema: $ref: '#/components/schemas/Error' securitySchemes: bearerAuth: type: http scheme: bearer description: >- Envía `Authorization: Bearer YOUR_API_KEY`. La clave corresponde a una sola organización. ```` This documentation is built and hosted on [Mintlify](https://mintlify.com), a developer documentation platform.