Sesgo de supervivencia

Tres sitios por donde entra

• Los datos. Un universo de instrumentos elegido entre lo que cotiza hoy excluye los que fueron retirados, fusionados o colapsaron. En cripto, los exchanges retiran pares con regularidad; un test sobre los pares listados hoy nunca mantiene una moneda a través de su fracaso.
• Las estrategias. Cuando se contrastan muchas ideas y solo se conservan y publican las que funcionaron, el conjunto publicado es una muestra de supervivientes. Esto se solapa con el data snooping: los fracasos son lo que habría corregido la imagen.
• Las personas. Los historiales visibles, las capturas públicas de pagos y las historias de éxito vienen de quienes se quedaron. Los operadores cuyas cuentas fracasaron publican rara vez, así que la muestra visible describe a los ganadores de una lotería tanto como una habilidad.

Una ilustración con monedas

Da a 100 personas una moneda equilibrada y pide a cada una que acierte diez lanzamientos. La probabilidad de acertar al menos siete por puro azar es 176 ÷ 1.024 ≈ 17 %, así que unas diecisiete personas mostrarán un registro del 70 % o mejor. Si solo se entrevista a esas diecisiete, la muestra sugiere un grupo de pronosticadores hábiles; las otras 83 son la parte de la población que hace que el resultado no signifique nada.

Nada en los diecisiete registros es falso. El sesgo está por completo en qué registros llegaron al lector.

En Senzoukria

El backtest automático se ejecuta sobre las barras del contrato que eliges, así que qué instrumentos y qué periodos entran en un estudio es una decisión del investigador, y el riesgo de supervivencia está en esa decisión. El panel Performance guarda en su lista cada sesión de replay terminada y cada backtest automático, con un botón de borrado para cada ejecución; borrar las que fracasaron recrea la supervivencia dentro de tus propios registros. El Gauntlet cuenta cada configuración de un barrido cuando deflacta el ratio de Sharpe, pero no puede contar las ideas que probaste y descartaste en ejecuciones anteriores. Un registro de investigación que liste las ideas rechazadas al lado de las conservadas es la contramedida práctica.

En los gráficos de criptomonedas, el historial se reconstruye desde los archivos diarios públicos del exchange para el par que abres; un día cuyo archivo no está publicado se marca como ausente en lugar de rellenarse desde otra fuente, así que los huecos son visibles en lugar de saltarse en silencio.

Errores habituales

• Construir un universo cripto con los pares de más volumen actuales y contrastarlo durante años.
• Informar de las tres estrategias que funcionaron de veinte probadas, sin las veinte.
• Juzgar un método por los operadores que tuvieron éxito con él públicamente.
• Borrar las ejecuciones de backtest perdedoras para mantener limpia la lista de resultados.