Ciclo de crescimento
Crescimento é um ciclo: supor, testar, ler, manter o que funcionou. Este skill mantém o ciclo honesto.
O ciclo
- Escolha uma pergunta da última auditoria (
sr-audit). - Escreva uma hipótese antes de publicar. "Se a primeira linha mencionar um número, mais pessoas ficarão além de três segundos."
- Altere uma variável. Mesma plataforma, mesmo formato, mesma mistura de tópicos na medida do possível. Todo o resto permanece igual.
- Publique pelo menos quatro por variante. Menos que isso não pode ser testado, e a ferramenta informará isso.
- Registre cada resultado conforme avança.
- Revise. Adote, continue testando ou descarte.
- Salve a lição no perfil para que o próximo plano a utilize.
Execute
python scripts/sr.py exp new --hypothesis "Um número na primeira linha melhora a retenção de 3 segundos" --variable "primeira linha" --metric "% de retenção de 3 segundos" --platform instagram
python scripts/sr.py exp log <experiment-id> A 41 --ref "reel 12 de maio"
python scripts/sr.py exp log <experiment-id> B 58 --ref "reel 14 de maio"
python scripts/sr.py exp review <experiment-id>
Como ferramentas: experiment_new, experiment_log, experiment_review. As variantes são nomeadas pela pessoa (A e B, ou "número" e "sem número").
Como o veredito funciona
A revisão classifica todas as postagens registradas juntas e compara as duas variantes com um teste de permutação de soma de postos, que não assume nenhuma distribuição para as visualizações. Em termos simples: ele pergunta com que frequência embaralhar os rótulos aleatoriamente produziria uma diferença tão grande quanto a que você observou. Ele também informa a razão das medianas das variantes.
Há quatro resultados:
- "X parece melhor ... Adote e continue registrando." O valor p está abaixo de 0,1 e a mediana de uma variante é pelo menos 1,2 vezes a da outra.
- "Postagens insuficientes." Qualquer variante tem menos de quatro.
- "Nenhuma diferença clara ... Execute por mais tempo ou teste algo maior." A diferença é pequena ou o valor p é alto.
- "Precisa de pelo menos duas variantes." Apenas uma variante foi registrada.
Com quatro postagens por variante, apenas grandes diferenças podem aparecer. Diga isso. Um resultado de "nenhuma diferença clara" com n pequeno significa "não podemos dizer", não "não importa". Os limites de 0,1 e 1,2 são uma escolha do mantenedor, não um padrão. As variantes são comparadas em ordem alfabética de seus nomes, portanto nomeie-as como A e B.
O que testar primeiro
Ordene por quanto uma mudança pode mover o número: o gancho e o primeiro quadro, depois título ou capa, depois duração, depois primeira linha da legenda, depois o ângulo do tópico. O horário de publicação vem por último, e apenas com as próprias análises da pessoa. Para YouTube, Test and compare no Studio pode testar miniaturas e, desde julho de 2025, também títulos (relatado, youtube.test_and_compare; pode não estar disponível em todos os canais).
Calibrando os pontuadores
Após 30 ou mais postagens com texto do gancho, execute calibrate_run. Se a pontuação do gancho separar os sucessos das falhas desta conta com um intervalo acima de 50%, write_weights salva pesos ajustados na pasta local. Caso contrário, confie mais em seus próprios testes do que na pontuação.
Salve a lição
Quando um teste for adotado, adicione uma linha à lista de lessons do perfil (profile_save), por exemplo "Números na primeira linha ajudaram na retenção de 3 segundos em maio (n=5 cada)". Escreva o que você descobriu, com o tamanho da amostra. Envie a lista inteira ao salvar, pois salvar mescla campos e substitui uma lista como um todo.
Aprovação
approve no início (hipótese) e no final (adotar ou descartar).
Não faça
- Mude duas coisas ao mesmo tempo.
- Interrompa um teste cedo porque está parecendo bom.
- Relate "funcionou" sem os números e o tamanho da amostra.