Cuando la estrategia ya funciona, las ideas de mejora llegan sin parar y todas parecen subir el retorno. Lo difícil de verdad es impedir que una idea que "parece mejor" arruine en silencio una estrategia que funciona.
Impón una disciplina de prerregistro a las mejoras de la estrategia: cualquier idea de mejora escribe primero sus criterios de decisión y su línea de aprobación, y después corre los datos; si cumple entra a producción y si no, se archiva como informe de resultado negativo. El Agent se encarga de probar cada idea por completo bajo el mismo marco y de reportar con honestidad, incluso vetando la propuesta que él mismo planteó y que más le gustaba.
Prerregistra los criterios de decisión de cada idea y falla según el umbral al terminar; las ideas vetadas también se redactan como informe.
Corre el A/B histórico de cada idea en el mismo marco y produce tablas comparativas de formato único con pruebas de robustez.
Una persona o un Agent propone la mejora y registra primero la motivación, la expectativa y los criterios de decisión.
Antes de correr los datos se fija la línea de aprobación: retorno ajustado por riesgo, drawdown, robustez en el vecindario de parámetros.
@ingenieria corre el A/B en el mismo marco, con subperiodos y sensibilidad a costos.
@CIO falla según los criterios prerregistrados. En una ronda, las trece ideas quedaron por debajo de la línea, incluida la que él mismo tenía mejor clasificada.
Las ideas vetadas se redactan como informes de investigación numerados; ese "registro de vetos" acabó siendo el argumento diferencial en las presentaciones externas.
Motivación, datos y conclusión de cada idea vetada, buscables y revisables.
Las conclusiones clave se revalidan periódicamente con otro benchmark para evitar derivas.
Cuando la estructura del mercado cambia, las ideas viejas se reprueban con el mismo umbral.
Fija la plantilla de prerregistro: motivación, hipótesis de mecanismo, criterios de decisión, línea de aprobación; se llena una tabla antes de correr nada.
Pon barreras a los "cambios de parámetros a ojo": todo cambio de parámetros en producción debe colgar de un informe de evidencia correspondiente.
Haz periódicamente una "retrospectiva de vetos": ver si entre las ideas vetadas hay alguna que merezca reproponerse con otro mecanismo.