aeoda yapay zekâ görünürlüğünü nasıl ölçer

Skora ne girer

Ölçüm birimi, bir alıcının sorabileceği bir sorudur. Marka adı içermeyen kategori ve sorun soruları üretiriz. Marka adı geçen sorular, skoru şişireceği için ayrı tutulur.

Her soru her motora bir ya da daha fazla kez sorulur. Her motor için markayı anan çalıştırmaların payı kaydedilir. Sorunun değeri, veri döndüren motorların ortalamasıdır.

Formül

Skor = 100 × soru değerlerinin ağırlıklı ortalaması. Canlı web motorları 1, model bilgisi motorları 0,5 ağırlıkla sayılır. Motor skoru aynı formülü tek motorla kullanır.

Diğer metrikler de aynı yaklaşımı izler: pay (SoV), senin anılmaların tüm marka anılmalarına oranıdır; ortalama sıra, bir yanıtta anılan markalar arasındaki yerindir; duygu ise -1 ile +1 arasında değişir.

Güven aralığı

Yapay zekâ yanıtları çalıştırmalar arasında değişir; bu yüzden tek bir ölçüm bir örnektir, kesin bilgi değildir. Sorular arasındaki standart hatayı tahmin ederiz; bu hem soru hem çalıştırma değişkenliğini kapsar. Skorun etrafında %90’lık bir güven aralığı veririz.

Beşten az soruyla sonuç, geniş aralıklı bir ön izleme olarak işaretlenir. Daha çok soru ve çalıştırma aralığı daraltır.

Bir değişim ne zaman sayılır

Artış ya da düşüş, yalnızca iki ölçümün birleşik belirsizliğinden büyükse gösterilir. Aksi halde değişimin gürültü içinde kaldığını yazarız. E-postalar bu kontrol olmadan skorun arttığını ya da azaldığını asla söylemez.

Motor etiketleri

ChatGPT ve Claude canlı web aramasıyla yanıt verir ve canlı web olarak etiketlenir. Gemini canlı arama olmadan ölçülür ve modelin kendi bildiğini yansıttığı için model bilgisi olarak etiketlenir.

Google AI Overviews ölçülmez.

Bilmen gereken sınırlar

Motorlara resmî arayüzleri üzerinden sorarız. Yanıtlar, insanların tüketici uygulamalarında gördüğünden farklı olabilir; bu yüzden sonuçlar API gözlemidir, her kullanıcı konuşmasının sayımı değildir.

Sonuçlar soru setine, pazara ve dile bağlıdır. Yöntemi, değerlendirebilmen için yayımlıyoruz ve ölçtükçe ayarlamaya devam ediyoruz.

Anılmak satış demek değildir. Skor, yapay zekânın bir markayı yanıtlarına katıp katmadığını gösterir; bu yanıtların satışa dönüşüp dönüşmediğini değil.