Öğrenim Arşivi

Açılış sahnesi

Bir çevrim içi dil kursunun yeni reklam sorumlusu işe başladığı ilk hafta heyecanlı bir fikirle geliyor: reklamlarda öğretmenlerin değil, öğrencilerin yüzünü göstermek. Fikri toplantıda anlatıyor, herkes başını sallıyor. Reklamlar çekiliyor, yayına giriyor ve öğretmen yüzlü eski reklamlardan belirgin biçimde kötü sonuç veriyor.

Birkaç hafta sonra, şirketten ayrılmak üzere olan eski bir çalışan koridorda yeni sorumluya yaklaşıyor. İki yıl önce aynı şeyi denediklerini söylüyor. Öğrenci yüzlü reklamlar o zaman da kötü sonuç vermişti; ekip, dil öğrenmek isteyenlerin önce kime güveneceklerine, yani öğretmene bakmak istediğini düşünmüştü.

Bu bilgi hiçbir yerde yazılı değil. Bir sunumun bir sayfasında, bir e-postanın bir satırında, birkaç kişinin hafızasında kalmış; o kişilerin çoğu artık şirkette değil. Şirket, aynı dersi ikinci kez parasını ödeyerek öğrenmiş.

Bu derste ne olacak

Dil kursu deneme yapıyordu ama deneyimini biriktirmiyordu; her sınama bir kez öğretip kayboluyordu. Kurs da, derste adı geçen öbür işletmeler de kurgu. Bir arşivin kaç alanlı olması ya da bir ilkenin kaç sınamayla kurulması gerektiğine dair bir sayı önermiyorum; bunlar ekibin büyüklüğüne ve sınama sıklığına göre değişiyor.

Bu kursun son dersi, önceki derslerde kurulan her şeyi, yani yaratıcı hipotezleri, çeşitliliği, sayfa uyumunu, sürtünme teşhisini ve optimizasyon kararlarını, kalıcı bir bilgiye dönüştürüyor. Bir sınamanın kaydını standart hâle getirmeyi, bir sonucun ne kadar güvenilir olduğunu tartmayı, birkaç sonuçtan genel bir yaratıcı ilke çıkarmayı ve bu ilkelerden bir sonraki dönemin hipotezlerini türetmeyi konuşacağız.

Sıfır noktası

İçerik stratejisinde öğrenme defterini, metin yazarlığında taşınabilir öğrenimi, operasyonel öğrenmede yeniden öğrenilen dersi, pazar araştırmasında bulguyu ve marka kimliğinde söylenebilir ilkeyi tanımlamıştık. Önceki derste de değişiklik günlüğünü kurduk.

Bir değişiklik günlüğü, bir kampanyada ne yapıldığını anlatır; bir öğrenim arşivi, bütün kampanyalardan ne öğrenildiğini anlatır. Günlük satırları zamana göre dizilir ve kampanya bittiğinde kapanır; arşiv ise konuya göre düzenlenir ve yıllarca açık kalır. Ücretli medyanın özelliği, sınamaların sık ve pahalı olmasıdır: her ay onlarca reklam sınanır ve her biri para harcar. Bu sınamaların öğrettiği şey biriktirilmediğinde, ekip her yıl aynı parayı aynı dersler için yeniden öder.

Mekanizma — bir sınamanın standart kaydı

Bir sınamanın sonucu, ancak başka biri onu okuyup anlayabiliyorsa bir öğrenimdir. Bunun için her sınamanın aynı biçimde ve aynı alanlarla kaydedilmesi gerekiyor.

Kart önceden açıldığında, beklenti sonradan değişemiyor.

Kart, sınamanın koşullarını da taşımalı.

Çürütülen hipotez, ayrıntılı bir kart hak ediyor.

Mekanizma — bir sonuç ne kadar güvenilir

Her kart aynı ağırlıkta değil. Bir kez, küçük bir bütçeyle ve tek bir kitlede görülen bir sonuç ile birçok kez, farklı koşullarda tekrarlanan bir sonuç, arşivde aynı biçimde durmamalı.

Tekrar, farklı koşullarda olduğunda daha değerli.

Kanıt gücü, zamanla da azalabiliyor.

Güç ölçütü herkes için aynı olmalı.

Mekanizma — kartlardan ilkeye

Tek tek kartlar, ekibin her yeni reklamda yeniden okuyamayacağı kadar çoğalır. Birbirini destekleyen kartlar, ekibin kolayca hatırlayıp uygulayabileceği birkaç cümleye dönüştürülmeli.

İlkenin sınırı yazılmazsa, yanlış yerde uygulanıyor.

Çelişen kartlar, ilkeyi daraltıyor.

İlke sayısı az tutuluyor.

Usta katmanı — arşivden bir sonraki döneme

Bir arşiv yalnız geçmişi saklarsa bir müzeye dönüşür. Asıl değeri, bir sonraki dönemin neyi sınayacağını göstermesinde.

Boşluk da bir hipotez kaynağı.

Arşiv, briefin ilk adımı oluyor.

Yaygın hatalar

Aklında kalsın

Değişiklik günlüğü bir kampanyada ne yapıldığını anlatır; öğrenim arşivi bütün kampanyalardan ne öğrenildiğini anlatır. Ücretli medyada sınamalar sık ve pahalıdır; biriktirilmeyen öğrenim, her yıl yeniden satın alınır.

Öğrenim kartı, tek bir sınamanın hipotezini, değişkenini, koşullarını, sonucunu, güvenini ve kararını aynı alanlarla kaydeder. Sınama başlamadan açılır; çürütülen hipotezler de kart alır.

Kanıt gücü, bir sonucun ne kadar güvenilir olduğunu gösterir: bant dışına çıkıp çıkmadığı, gecikmenin geçip geçmediği, kaç kez ve kaç farklı koşulda tekrarlandığı. Zamanla azalır ve ortak ölçütlerle belirlenir.

Yaratıcı ilke, birden çok kartın ortak sonucundan çıkan kısa ve söylenebilir cümledir. Dayandığı kartlar, kanıt gücü ve geçerlilik sınırı yanında yazılır; ilke sayısı az tutulur.

Türetilmiş hipotez, bir ilkeden, bir çelişkiden ya da bir boşluktan çıkarılıp bir sonraki dönemin planına giren hipotezdir. Arşivi yalnız saklayan değil, kendini sınayan bir yapıya dönüştürür.

Sonraki derse köprü

Bu kursla yaratıcı işi bir sınama ve öğrenme sistemine dönüştürdük: her reklamı bir hipoteze bağlayıp fikirleri çoğalttık, reklamın vaadini sayfada koruduk, dönüşümün önündeki sürtünmeleri teşhis ettik, müdahalelerin zamanlamasını tarttık ve bütün bunları bir öğrenim arşivinde biriktirdik. Kök Kahve'nin arşivi artık kartları, ilkeleri ve bir sonraki çeyreğin hipotezlerini taşıyor.

Ama arşivdeki her kartın sonucu, bir yerden okunmuş bir sayıya dayanıyor; ve bu sayıların çoğu, reklamı gösteren platformun kendi raporundan geliyor. Bir platform, bir satışı reklamına ne kadar geriye giderek bağladığına, bunu hangi yöntemle yaptığına ve hangi veriyi görebildiğine göre aynı kampanya için farklı bir sayı gösterebiliyor.

Sıradaki kurs medya ölçümü, artımsallık ve ölçeklemeye geçiyor; ilk ders platform raporlarının sınırlarıyla, yani görüntüleme penceresinin, raporlama modelinin ve veri erişiminin sonucu nasıl değiştirdiğiyle başlıyor.