Kreatif testinde değişken seçimi, öğrenmek istediğim kararla başlar. İki reklamın tüm unsurlarını değiştirmek bazen yeni bir yaklaşım keşfetmek için yararlıdır. Fakat bu karşılaştırma, sonucun başlıktan mı, görselden mi, tekliften mi kaynaklandığını söylemez. Önce bir konsept seçimi mi, yoksa belirli bir unsurun etkisini anlama işi mi yaptığımı yazarım.
Bu yazı gerçekleşmiş kampanya sonuçları değil, küçük bir ekip için önerdiğim test düzenidir. Örneklerdeki ürün ve mesajlar varsayımsaldır.
Kararı tek cümlede tarif etmek
“Daha iyi reklam bulmak” çok geniş bir hedeftir. “Bu ürünün dayanıklılığını göstermek mi, kullanım kolaylığını göstermek mi satın alma niyetini daha iyi destekliyor?” sorusu daha çalışılabilir bir karşılaştırma kurar. Burada değişen unsur küçük bir başlık değil, mesaj yaklaşımıdır. Sonuç da yaklaşım düzeyinde yorumlanmalıdır.
Başlık testi yapacaksam görsel, ürün, teklif ve açılış sayfasını mümkün olduğunca aynı tutarım. Videonun ilk sahnesini test ediyorsam kalan anlatımın süresi ve çağrısı karşılaştırılabilir olmalıdır. Her reklamın farklı kitleye, farklı tarihte ve farklı bütçeyle gösterilmesi kreatif dışındaki açıklamaları çoğaltır.
Test kartını üretimden önce yazmak
| Alan | Varsayımsal örnek |
|---|---|
| Müşteri engeli | Ürünün temizliğinin zor olabileceği düşüncesi |
| Hipotez | Temizleme adımlarını göstermek belirsizliği azaltabilir |
| Kontrol | Ürünün genel kullanım videosu |
| Yeni yaklaşım | Aynı üründe temizleme gösterimi |
| Sabitler | Teklif, stok, sayfa ve hedeflenen müşteri işi |
| Ana karar | Bu gösterimi sonraki kreatiflere taşımak veya yeniden çalışmak |
| Koruma ölçütü | Yanıltıcı kolaylık iddiası ve artan iade şikâyeti olmaması |
Bu kart, sonradan başarılı görünen metriğe göre amaç değiştirmeyi zorlaştırır. Video izlenmesi artarken uygun ziyaret veya sipariş kalitesi düşüyorsa reklam yalnız dikkat çekmiş olabilir. Ana iş sonucu ile erken sinyalleri ayrı kaydederim.
Aynı anda değişenleri görünür kılmak
Kampanya boyunca fiyat, teslim süresi veya sayfa değişirse tarihi not ederim. Bir varyantta ürün tükenmesi, diğerinde stok bulunması kreatif değerlendirmesini bozar. Sorunlu aralığı sessizce silmek yerine hangi sonuçların karşılaştırılabilir kaldığını açıklarım.
Reklam dağıtımının her varyanta eşit fırsat vermediği sıradan yayın düzeni, kontrollü deneyle aynı değildir. Platformun sunduğu deney mekanizması kullanılıyorsa atama ve raporlama koşulları ayrıca doğrulanmalıdır. Sadece iki reklamı aynı gruba eklemekten nedensel bir sonuç çıkarmam.
Düşük hacimde yorum sınırı
Az sayıda siparişin görüldüğü bir dönemde birkaç işlem sıralamayı değiştirebilir. Böyle bir tabloda “kazanan” etiketi yerine gözlenen farkı, örneklem sınırını ve sonraki araştırma ihtiyacını yazarım. Az trafikte A/B testi kararı hangi soruların nicel deneyden önce görüşme veya kullanılabilirlik incelemesiyle ele alınabileceğini anlatıyor.
Testi sonsuza kadar açık bırakmak da çözüm değildir. Başlangıçta bütçe sınırı, değerlendirme aralığı ve erken durdurmayı gerektiren zarar koşulları belirlerim. Ticari kayıp sınırına ulaşmak, hipotezin bilimsel olarak yanlışlandığı anlamına gelmez; mevcut koşullarda daha fazla kaynak ayırmama kararıdır.
Sonucu yeniden kullanılabilir bilgiye çevirmek
Kayıtta yalnız reklam görseli ve maliyet bulunmamalı. Hangi müşteri engelinin ele alındığı, hangi kanıtın gösterildiği, hangi kitle ve dönemde denendiği de kalmalı. Bir sonraki üretim ekibi böylece “yeşil arka plan iyi çalışıyor” gibi bağlamdan kopuk kurallar yerine anlamlı bir başlangıç noktası edinir.
Son değerlendirmede üç ayrı satır kullanırım: gördüğümüz, henüz açıklayamadığımız ve değiştireceğimiz. Sonuç yeterince belirgin değilse başka bir değişken ekleyerek belirsizliği büyütmem. Önce ölçümü, dağıtımı veya mesajın anlaşılmasını kontrol ederim. Reklamdan sayfaya uzanan tutarlılık için ürün sayfasındaki karar engelleri aynı incelemenin devamıdır.