Jukebox: o D0 ROAS mais do que duplicou em oito semanas

Jukebox AI é um gerador de músicas com IA da TwoWise, com um orçamento mensal de anúncios na casa dos seis dígitos. A conta gastava em 50 campanhas. Na primeira semana, a equipa deles reconstruiu-a em seis, segundo o meu plano, e a partir daí passou a geri-la com uma lista que eu enviava todas as segundas-feiras. Na semana 4 cortaram o orçamento e, na semana 5, puseram o plano anual em primeiro lugar no paywall. Ao fim de oito semanas, o D0 ROAS das campanhas principais estava em 2,4 vezes o valor inicial.

Jukebox AI app icon
Jukebox AITwoWise · App Store · Google Play

Este é o caso de um fractional Head of UA ao lado de uma equipa que gere as próprias campanhas, e de ler os resultados de anúncios de uma app de subscrição em conjunto com o seu paywall. O gráfico mostra o número depois de cada mudança.

O ponto de partida

No mês anterior ao trabalho, a conta investiu em 50 campanhas diferentes fora dos testes de criativos e de web, até 34 numa única semana, com 63 ad sets entre elas. Quase todas eram campanhas mundiais otimizadas para número de compras, com vários idiomas em cada uma. Com o investimento tão disperso, nenhum ad set chegou a 50 eventos de compra por semana, a contagem de compras do próprio Meta e o número que ele procura antes de um ad set sair da fase de aprendizagem, e o Meta mandou o dinheiro para os países onde uma compra saía mais barata. Dentro de uma dessas campanhas, o quarto de países com melhor resultado devolveu mais de quatro vezes o que devolveu o pior quarto, nos números a 7 dias do Meta.

O D0 ROAS das campanhas principais tinha caído cerca de 30 por cento desde o início do verão, e o ROAS de compra semanal do Meta tinha caído para metade desde a primavera. A Jukebox vende planos semanais e anuais e créditos adicionais, por isso o retorno de uma coorte continua a crescer durante meses depois da instalação, e todos os números de D0 desta página são uma leitura inicial.

Como trabalhámos

A equipa deles geria a conta e o produto. Eu trabalhava a partir dos dados deles no Meta e no Adjust e, a partir da semana 3, enviava todas as segundas-feiras uma lista com os anúncios a desligar e os orçamentos a mover, e na segunda-feira seguinte verificava-a face ao que tinha entrado no ar.

D0 ROAS, passo a passo

D0 ROAS, campanhas principais, Adjust, em índice
O meu plano, montado pela equipa delesJulho, e o corte de orçamento da equipaO paywall da equipa e as minhas listas semanais em conjunto
O mês anterior ao trabalho vale 100. Cada barra é um período depois de uma mudança. O paywall entrou numa semana e o D0 continuou a subir nas duas semanas seguintes. Perto de metade da subida depois do paywall é o dinheiro dos planos anuais, pagos pelo ano inteiro no primeiro dia.
D0 ROAS das campanhas principais no Adjust, em índice, com o mês anterior ao trabalho em 100
PeríodoÍndiceMudança anterior
O mês anterior, índice 100100Antes do trabalho
Após a reconstrução, semanas 2 e 3124O meu plano, montado pela equipa deles
Após o corte de orçamento, semana 4121A mudança da própria equipa
Paywall, 2 semanas iniciais, semanas 5 e 6224O paywall da equipa e as minhas listas semanais
As 2 semanas seguintes, semanas 7 e 8258As listas semanais, paywall sem mudanças

Os números

Em duas janelas de quatro semanas, a segunda a começar no fim do primeiro mês, o Meta registou mais 51 por cento de valor de compra com menos 13 por cento de investimento. O ROAS de compra subiu 73 por cento, no iOS 65 por cento e no Android 83 por cento. O número de eventos de compra ficou praticamente igual, por isso o ganho veio do valor de cada compra.

ROAS, as segundas quatro semanas face às primeiras
Todas as campanhas Meta+73%
+73%Todas as campanhas, Meta, segundas quatro semanas face às primeiras
iOS Meta+65%
+65%iOS, Meta, segundas quatro semanas face às primeiras
Android Meta+83%
+83%Android, Meta, segundas quatro semanas face às primeiras
D0, campanhas principais Adjust+83%
+83%D0, campanhas principais, Adjust, segundas quatro semanas face às primeiras
Meta com 13 por cento menos de investimento nas mesmas duas janelas. A citação do cliente mais abaixo dá os níveis por trás das linhas do Meta e do Adjust.
As segundas quatro semanas face às primeiras
ROAS de compra do Meta, todas as campanhas+73%
iOS+65%
Android+83%
D0 ROAS, campanhas principais, Adjust+83%

Passo 1: de 50 campanhas para seis

Na primeira semana, a equipa deles montou seis campanhas segundo o meu plano. iOS e Android corriam separados, cada um dividido em EUA, mercados Tier 1 e resto do mundo, com os idiomas agrupados lá dentro. As seis faziam lances por valor de compra, entraram no ar no dia seguinte e ficaram com quase todo o investimento. Na semana 2, nenhuma campanha principal fazia lances por número de compras. Em 13 comparações equivalentes do histórico da conta, com o mesmo mercado e a mesma plataforma e bidding diferente, à semana 4 o bidding por valor já tinha superado o bidding por número de compras, todas as vezes.

Os ad sets desceram com as campanhas, de 63 para 11 até à semana 4, e o ad set típico passou de cerca de 10 eventos de compra por semana para 60 ou mais, por isso o Meta passou a ter em cada um dados suficientes para aprender.

O custo por instalação mais ou menos triplicou, porque as instalações baratas vinham de países que raramente pagavam. O D0 ROAS subiu cerca de um quarto antes de qualquer outra coisa mudar na conta, e as duas campanhas que deixámos como estavam desceram nas mesmas semanas.

Ad sets com investimento, fora dos testes de criativos e de web
Uma semana do mês anterior
34 campanhas, 63 ad sets

Nenhum chegou a 50 eventos de compra na semana.

Semana 4
6 campanhas, 11 ad sets
iOS EUA
iOS Tier 1
iOS Resto do mundo
Android EUA
Android Tier 1
Android Resto do mundo

8 chegaram a 50 eventos de compra na semana e levaram cerca de 90% do investimento.

50 ou mais eventos de compra na semanaMenos de 50
Ad sets com investimento fora dos testes de criativos e de web
SemanaCampanhasAd setsAd sets com 50 ou mais eventos de compra
O mês anterior34630
Semana 46118, com cerca de 90% do investimento

Passo 2: o corte de orçamento

Na semana 4, a equipa cortou os orçamentos de cinco campanhas. Distribuí o corte campanha a campanha, a partir dos dados das coortes, e o D0 ROAS aguentou-se. No dia seguinte saíram seis anúncios, cada um deles atrás do resto do seu ad set em todas as semanas completas no Meta e ao D0 e ao D7 no Adjust. Três dos seis eram o mesmo criativo em três ad sets. Nesta conta, o Meta não retirou esse dinheiro sozinho. Cinco dos sete maiores perdedores do primeiro mês continuaram a receber pelo menos metade do investimento na semana seguinte, por isso os anúncios a desligar entraram à mão na lista de segunda-feira.

Passo 3: o paywall e quatro semanas de listas de segunda-feira

Na semana 5, a equipa deles passou o plano anual para a frente do paywall. Quem compra o plano anual paga o ano inteiro no primeiro dia, por isso parte do que se seguiu é só o momento do pagamento, perto de metade da subida do D0 na curva das coortes mais abaixo.

O paywall foi uma de quatro coisas que chegaram nessas semanas. As campanhas reconstruídas terminaram a aprendizagem com bidding por valor, com 8 dos 11 ad sets acima dos 50 eventos de compra por semana à semana 4. Os anúncios perdedores saíam todas as segundas-feiras. O orçamento movia-se com base nos retornos a 14 dias face à linha de payback em 90 dias, sempre de uma só vez. E os conceitos novos passavam pelo filtro antes de tocarem numa campanha principal. O D0 ROAS esteve em 2,2 vezes o nível inicial nas duas primeiras semanas depois do paywall e em 2,6 vezes nas duas semanas seguintes, e o ROAS de compra semanal do Meta subiu três semanas seguidas. O paywall mudou uma vez, numa semana, e o retorno continuou a subir durante três semanas depois dele. Era para isso que serviam as listas.

O retorno continua a crescer durante meses

Uma coorte continua a pagar muito depois da instalação. Nas coortes da primavera anterior ao trabalho, o retorno aos 7 dias era cerca do dobro do D0, aos 28 dias 2,7 vezes e às 16 semanas 4,3 vezes, ainda a subir quando os dados terminam. O paywall anual mudou a forma da curva. Agora chega mais dinheiro de uma coorte logo no primeiro dia, por isso as coortes depois dele estavam em 1,5 vezes o D0 aos 14 dias, contra 2,0 antes, e as duas linhas estão no gráfico.

Retorno das coortes por dias desde a instalação, campanhas principais, Adjust
Os primeiros 28 dias, antes e depois do paywall anual, como múltiplo do D0 inicial
Coortes depois do paywall, semanas 5 a 7Coortes antes, semanas 2 a 4
As primeiras 16 semanas, coortes da primavera, como múltiplo do seu próprio D0
Ponderado pelo custo, cada ponto sobre as coortes com idade suficiente para o terem atingido. O paywall puxa para a frente o dinheiro de uma coorte, por isso a curva depois dele começa mais alta e sobe menos.
Retorno das coortes por dias desde a instalação, coortes da primavera como múltiplo do seu próprio D0, as outras duas como múltiplos do D0 inicial
DiasCoortes da primaveraCoortes antes do paywallCoortes depois do paywall
01,0x1,2x2,3x
11,1x1,4x2,5x
31,3x1,5x2,6x
71,9x2,2x3,3x
142,2x2,5x3,5x
282,7x3,2x
563,4x
843,8x
1124,3x

O criativo novo passava por um filtro

Entre abril e o início de setembro, 58 códigos de conceito gastaram dinheiro na conta, e 15 deles chegaram às campanhas principais sem teste. Os anúncios novos iam diretamente para os ad sets principais e tiravam orçamento aos anúncios que já funcionavam lá.

A partir da semana 5, cada conceito novo passou por um teste de instalação barato e depois por um teste de compra. A partir da semana 6, os que passavam ganhavam um ad set próprio dentro de cada campanha principal antes de se juntarem aos anúncios já comprovados. Os anúncios novos que chegavam aos ad sets principais passaram de dezenas por semana para meia dúzia. As traduções precisaram de uma regra própria. Cerca de dois terços das versões traduzidas lançadas no primeiro mês quase não correram, e o resultado de um anúncio em inglês não dizia nada sobre como as suas traduções se iam sair, por isso pedi à equipa que só traduzisse um anúncio depois de ele se ter provado.

Como um conceito novo chegava às campanhas principais
  1. Teste de instalaçãoUm ad set por conceito, num mercado barato
  2. Teste de compraAvaliado pelos compradores
  3. Ad set próprioDentro de cada campanha principal, a partir da semana 6
  4. Ad sets principaisAo lado dos anúncios comprovados
Anúncios novos nos ad sets principais, nos três meses antes do filtro13 a 71 por semana
A partir da semana 50 a 5 por semana

Duas boas semanas antes de um conceito escalar

A fasquia para passar veio do histórico da própria conta. Cerca de três em cada quatro anúncios que superaram os pares em mais de 20 por cento numa semana mantiveram-se à frente deles ao longo da vida. Entre os anúncios que o conseguiram em duas semanas separadas, 91 por cento mantiveram-se à frente. A primeira fase deste tipo de teste está escrita neste site.

Anúncios que superaram os pares em mais de 20% e se mantiveram à frente ao longo da vida
Numa semana76%
76%de 137 anúncios que o conseguiram uma vez
Em duas semanas separadas91%
91%de 57 anúncios que o conseguiram duas vezes
Do histórico da própria conta, de abril ao início de setembro. Uma semana contava quando o anúncio gastava o suficiente para poder ser lido.

O que os números incluem

O evento de compra do Meta nesta conta inclui também as renovações, por isso o seu ROAS lê-se melhor como a pontuação do próprio Meta. As duas janelas estão dentro do período de trabalho, e o investimento mais baixo foi uma decisão da equipa. A subida a partir da semana 5 chegou nas mesmas semanas que o paywall deles, o fim da aprendizagem das campanhas e as listas semanais, e nenhum teste na conta consegue separar os três.

O que isto diz

A equipa deles fez todas as alterações na conta, a partir de uma lista que eu escrevia todas as semanas com base nos dados do Meta, do Adjust e do paywall. Essa divisão serve a uma equipa que já tem pessoas na conta de anúncios e precisa de alguém que tome as decisões.

Nas palavras do cliente

We were spending a six-figure monthly ad budget on Jukebox and could not clearly see whether the money was coming back. In the two months we worked with Samet the campaigns were rebuilt by market and platform, and for the first time we could see which country and which campaign paid its money back.

In numbers: Meta reported a purchase ROAS of 0.32 in the four weeks before the new structure and 0.55 in the four weeks after, with 13% less spend. In Adjust, day-0 ROAS on the main campaigns went from 0.25 to 0.46. Part of that came from our own product work, we pushed the annual plan harder in the same period. Samet helped us read the two together, so we could tell what came from the campaigns and what came from the paywall.

He is someone I trust. He has always been the first person we call.

İbrahim Güneş · Cofounder, TwoWise (Jukebox AI)

Perguntas frequentes

Quanto do resultado da Jukebox veio das campanhas?

A reconstrução elevou o D0 ROAS em cerca de um quarto antes de qualquer outra coisa mudar, e ele aguentou-se durante o corte de orçamento da equipa. A subida para 2,4 vezes o nível inicial deu-se nas quatro semanas em que o paywall anual da equipa, o fim da aprendizagem das campanhas reconstruídas com bidding por valor e as listas semanais chegaram todos juntos. Perto de metade da subida do D0 é o dinheiro dos planos anuais pago logo à cabeça, e o retorno continuou a subir durante três semanas depois de o paywall mudar, por isso as listas fizeram parte do trabalho. Ninguém consegue separar isto com exatidão.

Porquê reduzir a Jukebox de 50 campanhas para seis?

O Meta aprende dentro de cada ad set e procura cerca de 50 eventos de compra por semana antes de sair da fase de aprendizagem. Espalhado por 63 ad sets, nenhum lá chegou. À semana 4, 8 dos 11 ad sets chegaram lá, e levavam cerca de 90 por cento do investimento.

Geriu pessoalmente as campanhas da Jukebox?

A equipa deles montou e geriu todas as campanhas. Eu escrevi o plano e enviei a lista de alterações todas as segundas-feiras.

Porque é que o custo por instalação subiu na Jukebox?

As instalações baratas vinham de países que raramente pagavam. O bidding por valor de compra comprou cerca de um terço das instalações pelo mesmo dinheiro, e uma parte maior delas pagou.