Jukebox: D0 ROAS mais que dobrou em oito semanas

Jukebox AI é um gerador de músicas com IA da TwoWise, com um orçamento mensal de anúncios na casa dos seis dígitos. A conta gastava em 50 campanhas. Na primeira semana, a equipe deles reconstruiu tudo em seis, seguindo o meu plano, e daí em diante passou a rodar a conta com uma lista que eu mandava toda segunda-feira. Na semana 4 eles cortaram o orçamento e, na semana 5, colocaram o plano anual em primeiro lugar no paywall. Depois de oito semanas, o D0 ROAS das campanhas principais estava em 2,4 vezes o ponto de partida.

Jukebox AI app icon
Jukebox AITwoWise · App Store · Google Play

Este é o caso de um fractional Head of UA ao lado de uma equipe que roda as próprias campanhas, e de ler os resultados de anúncios de um app de assinatura junto com o paywall dele. O gráfico mostra o número depois de cada mudança.

O ponto de partida

No mês anterior ao trabalho, a conta gastou em 50 campanhas diferentes fora dos testes de criativos e de web, chegando a 34 numa única semana, com 63 ad sets entre elas. Quase todas eram campanhas mundiais otimizadas para número de compras, com vários idiomas em cada uma. Com o gasto tão pulverizado, nenhum ad set chegou a 50 eventos de compra por semana, a contagem de compras do próprio Meta e o número que ele procura antes de um ad set sair da fase de aprendizado, e o Meta mandou o dinheiro para os países onde uma compra saía mais barata. Dentro de uma dessas campanhas, o quarto de países com melhor resultado devolveu mais de quatro vezes o que devolveu o pior quarto, nos números de 7 dias do Meta.

O D0 ROAS das campanhas principais tinha caído cerca de 30% desde o começo do verão, e o ROAS de compra semanal do Meta tinha caído pela metade desde a primavera. A Jukebox vende planos semanais e anuais mais créditos extras, então o retorno de uma coorte continua crescendo por meses depois da instalação, e todo número de D0 desta página é uma leitura inicial.

Como trabalhamos

A equipe deles cuidava da conta e do produto. Eu trabalhava a partir dos dados deles no Meta e no Adjust e, a partir da semana 3, mandava toda segunda-feira uma lista com os anúncios a desligar e os orçamentos a mover, e na segunda seguinte conferia a lista com o que tinha ido ao ar.

D0 ROAS, passo a passo

D0 ROAS, campanhas principais, Adjust, em índice
O meu plano, montado pela equipe delesJulho, e o corte de orçamento da equipeO paywall da equipe e as minhas listas semanais juntos
O mês anterior ao trabalho vale 100. Cada barra é um período depois de uma mudança. O paywall entrou numa semana e o D0 continuou subindo nas duas semanas seguintes. Perto de metade da subida depois do paywall é o dinheiro dos planos anuais, pagos pelo ano inteiro no primeiro dia.
D0 ROAS das campanhas principais no Adjust, em índice, com o mês anterior ao trabalho em 100
PeríodoÍndiceMudança anterior
O mês anterior, índice 100100Antes do trabalho
Após a reconstrução, semanas 2 e 3124O meu plano, montado pela equipe deles
Após o corte de orçamento, semana 4121A mudança da própria equipe
Paywall, 2 semanas iniciais, semanas 5 e 6224O paywall da equipe e as minhas listas semanais
As 2 semanas seguintes, semanas 7 e 8258As listas semanais, paywall sem mudanças

Os números

Em duas janelas de quatro semanas, a segunda começando no fim do primeiro mês, o Meta registrou 51% a mais de valor de compra com 13% a menos de gasto. O ROAS de compra subiu 73%, o de iOS 65% e o de Android 83%. O número de eventos de compra ficou praticamente igual, então o ganho veio do valor de cada compra.

ROAS, as segundas quatro semanas contra as primeiras
Todas as campanhas Meta+73%
+73%Todas as campanhas, Meta, segundas quatro semanas contra as primeiras
iOS Meta+65%
+65%iOS, Meta, segundas quatro semanas contra as primeiras
Android Meta+83%
+83%Android, Meta, segundas quatro semanas contra as primeiras
D0, campanhas principais Adjust+83%
+83%D0, campanhas principais, Adjust, segundas quatro semanas contra as primeiras
Meta com 13% a menos de gasto nas mesmas duas janelas. A citação do cliente mais abaixo dá os níveis por trás das linhas do Meta e do Adjust.
As segundas quatro semanas contra as primeiras
ROAS de compra do Meta, todas as campanhas+73%
iOS+65%
Android+83%
D0 ROAS, campanhas principais, Adjust+83%

Passo 1: de 50 campanhas para seis

Na primeira semana, a equipe deles montou seis campanhas seguindo o meu plano. iOS e Android rodavam separados, cada um dividido em EUA, mercados Tier 1 e resto do mundo, com os idiomas agrupados dentro. As seis davam lance por valor de compra, entraram no ar no dia seguinte e assumiram quase todo o gasto. Na semana 2, nenhuma campanha principal dava mais lance por número de compras. Em 13 comparações equivalentes do histórico da conta, com o mesmo mercado e a mesma plataforma e lances diferentes, na semana 4 o lance por valor já tinha superado o lance por número de compras, todas as vezes.

Os ad sets diminuíram junto com as campanhas, de 63 para 11 até a semana 4, e o ad set típico passou de cerca de 10 eventos de compra por semana para 60 ou mais, então o Meta passou a ter em cada um dados suficientes para aprender.

O custo por instalação mais ou menos triplicou, porque as instalações baratas vinham de países que raramente pagavam. O D0 ROAS subiu cerca de um quarto antes de qualquer outra coisa mudar na conta, e as duas campanhas que deixamos como estavam caíram nas mesmas semanas.

Ad sets com gasto, fora dos testes de criativos e de web
Uma semana do mês anterior
34 campanhas, 63 ad sets

Nenhum chegou a 50 eventos de compra na semana.

Semana 4
6 campanhas, 11 ad sets
iOS EUA
iOS Tier 1
iOS Resto do mundo
Android EUA
Android Tier 1
Android Resto do mundo

8 chegaram a 50 eventos de compra na semana e levaram cerca de 90% do gasto.

50 ou mais eventos de compra na semanaMenos de 50
Ad sets com gasto fora dos testes de criativos e de web
SemanaCampanhasAd setsAd sets com 50 ou mais eventos de compra
O mês anterior34630
Semana 46118, com cerca de 90% do gasto

Passo 2: o corte de orçamento

Na semana 4, a equipe cortou os orçamentos de cinco campanhas. Eu distribuí o corte campanha por campanha a partir dos dados de coorte, e o D0 ROAS se sustentou. No dia seguinte saíram seis anúncios, cada um deles atrás do resto do seu ad set em todas as semanas completas no Meta e no D0 e no D7 no Adjust. Três dos seis eram o mesmo criativo em três ad sets. Nesta conta, o Meta não tirou esse dinheiro sozinho. Cinco dos sete maiores perdedores do primeiro mês ainda receberam pelo menos metade do gasto na semana seguinte, então os anúncios a desligar entraram à mão na lista de segunda-feira.

Passo 3: o paywall e quatro semanas de listas de segunda-feira

Na semana 5, a equipe deles colocou o plano anual na frente do paywall. Quem compra o plano anual paga o ano inteiro no primeiro dia, então parte do que veio depois é só o momento do pagamento, perto de metade da subida do D0 na curva de coortes mais abaixo.

O paywall foi uma de quatro coisas que entraram nessas semanas. As campanhas reconstruídas terminaram o aprendizado com lance por valor, com 8 dos 11 ad sets acima de 50 eventos de compra por semana na semana 4. Os anúncios perdedores saíam toda segunda-feira. O orçamento se movia pelos retornos de 14 dias em relação à linha de payback em 90 dias, sempre de uma só vez. E os conceitos novos passavam pelo filtro antes de tocar numa campanha principal. O D0 ROAS ficou em 2,2 vezes o nível inicial nas duas primeiras semanas depois do paywall e em 2,6 vezes nas duas semanas seguintes, e o ROAS de compra semanal do Meta subiu três semanas seguidas. O paywall mudou uma vez, numa semana, e o retorno continuou subindo por três semanas depois dele. Era para isso que serviam as listas.

O retorno continua crescendo por meses

Uma coorte continua pagando muito depois da instalação. Nas coortes da primavera anterior ao trabalho, o retorno em 7 dias era cerca do dobro do D0, em 28 dias 2,7 vezes e em 16 semanas 4,3 vezes, ainda subindo quando os dados terminam. O paywall anual mudou o formato da curva. Agora chega mais dinheiro de uma coorte logo no primeiro dia, então as coortes depois dele estavam em 1,5 vezes o D0 aos 14 dias, contra 2,0 antes, e as duas linhas estão no gráfico.

Retorno das coortes por dias desde a instalação, campanhas principais, Adjust
Os primeiros 28 dias, antes e depois do paywall anual, como múltiplo do D0 inicial
Coortes depois do paywall, semanas 5 a 7Coortes antes, semanas 2 a 4
As primeiras 16 semanas, coortes da primavera, como múltiplo do próprio D0
Ponderado pelo custo, cada ponto sobre as coortes com idade suficiente para tê-lo atingido. O paywall puxa para a frente o dinheiro de uma coorte, então a curva depois dele começa mais alta e sobe menos.
Retorno das coortes por dias desde a instalação, coortes da primavera como múltiplo do próprio D0, as outras duas como múltiplos do D0 inicial
DiasCoortes da primaveraCoortes antes do paywallCoortes depois do paywall
01,0x1,2x2,3x
11,1x1,4x2,5x
31,3x1,5x2,6x
71,9x2,2x3,3x
142,2x2,5x3,5x
282,7x3,2x
563,4x
843,8x
1124,3x

O criativo novo passava por um filtro

Entre abril e o começo de setembro, 58 códigos de conceito gastaram dinheiro na conta, e 15 deles chegaram às campanhas principais sem teste. Os anúncios novos iam direto para os ad sets principais e tiravam orçamento dos anúncios que já funcionavam ali.

A partir da semana 5, todo conceito novo passou por um teste de instalação barato e depois por um teste de compra. A partir da semana 6, os que passavam ganhavam um ad set próprio dentro de cada campanha principal antes de se juntar aos anúncios já comprovados. Os anúncios novos que chegavam aos ad sets principais caíram de dezenas por semana para um punhado. As traduções precisaram de uma regra própria. Cerca de dois terços das versões traduzidas lançadas no primeiro mês quase não rodaram, e o resultado de um anúncio em inglês não dizia nada sobre como as traduções dele iriam se sair, então pedi à equipe que só traduzisse um anúncio depois que ele se provasse.

Como um conceito novo chegava às campanhas principais
  1. Teste de instalaçãoUm ad set por conceito, num mercado barato
  2. Teste de compraAvaliado pelos compradores
  3. Ad set próprioDentro de cada campanha principal, a partir da semana 6
  4. Ad sets principaisAo lado dos anúncios comprovados
Anúncios novos nos ad sets principais, nos três meses antes do filtro13 a 71 por semana
A partir da semana 50 a 5 por semana

Duas boas semanas antes de um conceito escalar

O critério para passar veio do histórico da própria conta. Cerca de três em cada quatro anúncios que superaram os pares em mais de 20% numa semana continuaram à frente deles ao longo da vida. Entre os anúncios que fizeram isso em duas semanas separadas, 91% continuaram à frente. A primeira etapa desse tipo de teste está descrita neste site.

Anúncios que superaram os pares em mais de 20% e continuaram à frente ao longo da vida
Numa semana76%
76%de 137 anúncios que fizeram isso uma vez
Em duas semanas separadas91%
91%de 57 anúncios que fizeram isso duas vezes
Do histórico da própria conta, de abril ao começo de setembro. Uma semana contava quando o anúncio gastava o bastante para poder ser lido.

O que os números incluem

O evento de compra do Meta nesta conta também inclui renovações, então o ROAS dele é melhor lido como a pontuação do próprio Meta. As duas janelas estão dentro do período do trabalho, e o gasto menor foi decisão da equipe. A subida a partir da semana 5 veio nas mesmas semanas do paywall deles, do fim do aprendizado das campanhas e das listas semanais, e nenhum teste na conta consegue separar os três.

O que isso mostra

A equipe deles fez todas as mudanças na conta, a partir de uma lista que eu escrevia toda semana com os dados do Meta, do Adjust e do paywall. Essa divisão serve para uma equipe que já tem gente na conta de anúncios e precisa de alguém para tomar as decisões.

Nas palavras do cliente

We were spending a six-figure monthly ad budget on Jukebox and could not clearly see whether the money was coming back. In the two months we worked with Samet the campaigns were rebuilt by market and platform, and for the first time we could see which country and which campaign paid its money back.

In numbers: Meta reported a purchase ROAS of 0.32 in the four weeks before the new structure and 0.55 in the four weeks after, with 13% less spend. In Adjust, day-0 ROAS on the main campaigns went from 0.25 to 0.46. Part of that came from our own product work, we pushed the annual plan harder in the same period. Samet helped us read the two together, so we could tell what came from the campaigns and what came from the paywall.

He is someone I trust. He has always been the first person we call.

İbrahim Güneş · Cofounder, TwoWise (Jukebox AI)

Perguntas frequentes

Quanto do resultado da Jukebox veio das campanhas?

A reconstrução elevou o D0 ROAS em cerca de um quarto antes de qualquer outra coisa mudar, e ele se sustentou durante o corte de orçamento da equipe. A subida para 2,4 vezes o nível inicial veio nas quatro semanas em que o paywall anual da equipe, o fim do aprendizado das campanhas reconstruídas com lance por valor e as listas semanais chegaram todos juntos. Perto de metade da subida do D0 é o dinheiro dos planos anuais pago de uma vez, e o retorno continuou subindo por três semanas depois que o paywall mudou, então as listas fizeram parte do trabalho. Ninguém consegue separar isso com exatidão.

Por que reduzir a Jukebox de 50 campanhas para seis?

O Meta aprende dentro de cada ad set e procura cerca de 50 eventos de compra por semana antes de sair da fase de aprendizado. Espalhado por 63 ad sets, nenhum chegou lá. Na semana 4, 8 dos 11 ad sets chegaram, e eles levavam cerca de 90% do gasto.

Você mesmo rodou as campanhas da Jukebox?

A equipe deles montou e rodou todas as campanhas. Eu escrevi o plano e mandei a lista de mudanças toda segunda-feira.

Por que o custo por instalação subiu na Jukebox?

As instalações baratas vinham de países que raramente pagavam. O lance por valor de compra comprou cerca de um terço das instalações pelo mesmo dinheiro, e uma parte maior delas pagou.