Bucle de crecimiento
El crecimiento es un bucle: adivinar, probar, leer, conservar lo que funcionó. Esta skill mantiene honesto el bucle.
El bucle
- Elige una pregunta de la última auditoría (
sr-audit). - Escribe una hipótesis antes de publicar. "Si la primera línea menciona un número, más personas se quedarán después de tres segundos."
- Cambia una variable. La misma plataforma, mismo formato, misma mezcla de temas en la medida de lo posible. Todo lo demás se queda igual.
- Publica al menos cuatro por variante. Menos de eso no se puede probar, y la herramienta lo dirá.
- Registra cada resultado a medida que avanzas.
- Revisa. Adopta, sigue probando o descarta.
- Guarda la lección en el perfil para que el próximo plan la use.
Ejecútalo
python scripts/sr.py exp new --hypothesis "Un número en la primera línea mejora la retención a 3 segundos" --variable "primera línea" --metric "% retención a 3 segundos" --platform instagram
python scripts/sr.py exp log <id-experimento> A 41 --ref "reel 12 de mayo"
python scripts/sr.py exp log <id-experimento> B 58 --ref "reel 14 de mayo"
python scripts/sr.py exp review <id-experimento>
Como herramientas: experiment_new, experiment_log, experiment_review. Las variantes las nombra la persona (A y B, o "número" y "sin número").
Cómo funciona el veredicto
La revisión clasifica todas las publicaciones registradas juntas y compara las dos variantes con una prueba de permutación de suma de rangos, que no asume nada sobre la distribución de las visualizaciones. En términos simples: pregunta con qué frecuencia mezclar las etiquetas al azar produciría una brecha tan grande como la que observaste. También informa la proporción de las medianas de las variantes.
Hay cuatro resultados:
- "X se ve mejor ... Adóptalo y sigue registrando." El valor p es menor a 0.1 y la mediana de una variante es al menos 1.2 veces la de la otra.
- "No hay suficientes publicaciones." Cualquiera de las variantes tiene menos de cuatro.
- "No hay una diferencia clara ... Ejecútalo más tiempo, o prueba algo más grande." La brecha es pequeña o el valor p es alto.
- "Se necesitan al menos dos variantes." Solo se ha registrado una variante.
Con cuatro publicaciones por variante, solo pueden aparecer brechas grandes. Dilo. Un resultado de "sin diferencia clara" con n pequeño significa "no podemos saberlo", no "no importa". Los umbrales de 0.1 y 1.2 son elección del mantenedor, no un estándar. Las variantes se comparan en orden alfabético de sus nombres, así que nómbralas A y B.
Qué probar primero
Ordénalas según cuánto puede mover un cambio el número: el gancho y el primer fotograma, luego el título o la portada, luego la duración, luego la primera línea del subtítulo, luego el ángulo del tema. La hora de publicación viene al final, y solo con los propios análisis de la persona. Para YouTube, Probar y comparar en Studio puede probar miniaturas y, desde julio de 2025, también títulos (reportado, youtube.test_and_compare; puede que no esté en todos los canales).
Calibrando los puntuadores
Después de 30 o más publicaciones con texto de gancho, ejecuta calibrate_run. Si la puntuación del gancho separa los ganadores de este perfil de los fracasos con un intervalo superior al 50%, write_weights guarda los pesos ajustados en la carpeta local. Si no, confía más en tus propias pruebas que en la puntuación.
Guarda la lección
Cuando se adopta una prueba, añade una línea a la lista lessons del perfil (profile_save), por ejemplo "Los números en la primera línea ayudaron a la retención a 3 segundos en mayo (n=5 cada uno)". Escribe lo que encontraste, con el tamaño de la muestra. Envía la lista completa al guardar, ya que guardar fusiona campos y reemplaza una lista en su totalidad.
Puerta
approve al inicio (hipótesis) y al final (adoptar o descartar).
No hagas
- Cambiar dos cosas a la vez.
- Detener una prueba temprano porque se ve bien.
- Informar "funcionó" sin los números y el tamaño de la muestra.