explorar #agentic-regression-tests hallazgo 02 · boletín 2026-08-22

Jwuthri/Tracely

plataforma "trace-native CI/CD" para AI agents: convierte automáticamente fallos de producción en regression tests que bloquean el PR correspondiente, con ClickHouse como store, OpenTelemetry como ingestion y un evaluador LLM-as-judge integrado.

Estrellas

924

Forks

Lenguaje

Python

Licencia

MIT

Issues

—

Estado

—

Cómo funciona

Implementa agentic-regression-tests

Núcleo

Jwuthri/Tracely Python · MIT agent-observabilityci-cdclickhouseevalsllm-as-judgellm-observabilityllm-opsmcp +2

Se cruza con complementa langfuse/langfuse usa clickhouse

Diagrama derivado de madurez_senales (lenguaje, licencia, estado y topics) y de las relaciones que este repo tiene en el grafo de conocimiento. No es una arquitectura del proyecto: es su posición funcional tal como la registran los boletines.

Posición en el ecosistema

Jwuthri/Tracely

implementa

agentic-regression-tests Concepto

Jwuthri/Tracely

complementa

langfuse/langfuse Repositorio

Jwuthri/Tracely

usa

clickhouse Herramienta

Expandir en el grafo 3D →

Relaciones que aportó este boletín

implementsagentic-regression-testsnuevo usesclickhousenuevo complementslangfuse/langfusenuevo

Por qué importa

Tracely cierra el ciclo "fallo en producción → test de regresión en el PR" de forma nativa, sin que tengas que escribir un harness a medida. La pieza que aporta es un evaluador LLM-as-judge integrado sobre trazas OpenTelemetry, con ClickHouse como almacén, de modo que cada incidente real genera automáticamente el caso de prueba que lo habría cazado. Encaja como pieza final del trío que ya cubrimos en el grafo: tracing (langfuse/langfuse) + evals + CI. Buen material para un artículo tipo "regression testing de agentes de extremo a extremo: tracing, eval y CI sin scripts custom".

Alerta

clonar, leer el módulo de CI integration; comparar su LLM-as-judge con agentic-evals y con la skill vercel-labs/fx

Truefoundry/trueforge y Jwuthri/Tracely son proyectos nuevos: tracción social baja, conviene medir antes de apostar el artículo.

Apariciones · 1

2026-08-22 hallazgo principal
primera vez en el boletín

Señales de madurez (texto original)

924★ · 35 forks · Python · creado 2026-06-03 · último push 2026-08-22 · MIT · default_branch master · repo original. Topics: agent-observability, ci-cd, clickhouse, evals, llm-as-judge, llm-observability, llm-ops, mcp, opentelemetry, self-hosted.