Geovium AI görünürlüğünü nasıl ölçüyor?
Geovium'un tekil AI yanıtlarını karşılaştırılabilir puanlara nasıl dönüştürdüğünü adım adım anlatıyoruz: hangi sorular soruluyor, yanıtlar nasıl okunup puanlanıyor ve sayılar neyi söyleyemiyor.
AI yanıtları taramadan taramaya, asistandan asistana ve ülkeden ülkeye değişir; bu yüzden tek bir yanıt size pek bir şey söylemez. Bu yazıda Geovium'un çok sayıda tekil yanıtı, zaman içinde takip edebileceğiniz metriklere nasıl dönüştürdüğünü adım adım anlatıyoruz. Buradaki tanımlar ürünün kullandığı tanımların aynısıdır; daha kısa bir özeti metodoloji sayfamızda bulabilirsiniz.
1. Müşterilerinizin sorduğu sorulardan başlayın
Her çalışma alanı, gerçek müşterilerin kategoriniz hakkında bir AI asistanına sorabileceği bir soru setini takip eder: öneriler, karşılaştırmalar, "Y için en iyi X hangisi?" soruları ve yerel aramalar. Sorular konulara ayrılır ve bir önem düzeyi taşır (yüksek, normal veya düşük); böylece işiniz için en önemli sorular daha fazla sayılabilir. Takip edilecek rakipleri ve konum önemliyse soruların ilgili olduğu pazarları (ülke, bölge veya şehir) da siz seçersiniz.
2. Her asistana, düzenli aralıklarla sorun
Geovium takip edilen her soruyu kapsadığı her asistana gönderir: ChatGPT, Gemini, Claude, Perplexity ve Grok. Sorular sağlayıcıların API'leri üzerinden gönderilir; bu nedenle yanıtlar, kişisel geçmişi ve ayarları olan, oturum açmış bir kullanıcının tüketici uygulamasında gördüğünden farklı olabilir. Kontroller seçtiğiniz takvimle, günlük ya da haftalık olarak tekrarlanır; aynı sorular tekrar tekrar sorulduğu için değişimler tek seferlik gözlemler olarak değil, eğilimler olarak görünür.
3. Her yanıtı aynı şekilde okuyun
Her yanıt aynı yapıya dönüştürülür. Markanız için Geovium şunları kaydeder:
- markanızdan bahsedilip bahsedilmediği;
- ilk paragrafta, yani erken bahsedilip bahsedilmediği;
- kendi web sitenizin anılıp anılmadığı ya da bağlantısının verilip verilmediği;
- yanıt bir listeyse sizin sıranız;
- sizin hakkınızda söylenenlerin tonu;
- güvenilir bir seçenek olarak sunulup sunulmadığınız.
Ayrıca takip edilen rakiplerden hangilerinin hangi sırayla anıldığını, yanıtın hangi kaynakları gösterdiğini ve yanıtın soruyla aynı dilde olup olmadığını da kaydeder.
4. Yalnızca eksiksiz yanıtları sayın
Bazı kontroller kullanılabilir bir yanıt üretmez: Sağlayıcı yoğundur ya da erişilemez, yanıt yarıda kesilir, asistan yanıt vermeyi reddeder veya yanıt boş gelir. Bunlar sıfır olarak sayılmaz, puanlamanın dışında bırakılır; böylece bir kesinti hiçbir zaman görünürlükte düşüş gibi görünmez. İki ayrı metrik bu durumları görünür tutar:
- Kapsama: eksiksiz yanıt alınan soruların oranı.
- Hata oranı: bir asistanın yanıt veremediği kontrollerin oranı.
5. Her yanıtı 0 ile 100 arasında puanlayın
Her eksiksiz yanıt, yukarıdaki sinyallerden oluşan bir görünürlük puanı alır:
| Sinyal | Puan |
|---|---|
| Markanızdan bahsediliyor | 40 |
| İlk paragrafta bahsediliyor | 15 |
| Web siteniz anılıyor ya da bağlantısı veriliyor | 15 |
| Listedeki sıra (1. ile 5. arası) | 30, 20, 12, 6, 2 |
| Olumlu ton | 10 |
| Güvenilir olarak sunuluyor | 10 |
Sıra, ton ve güven yalnızca markanızdan gerçekten bahsedildiğinde sayılır ve toplam 100 ile sınırlıdır. Ne markanızın ne de web sitenizin geçtiği bir yanıt 0 puan alır.
Rakipler de aynı formülle (bahsedilme, erken bahsedilme, web sitesi, listedeki sıra) puanlanır; böylece sayılar karşılaştırılabilir. Ton ve güven yalnızca sizin markanız için ölçülür.
6. Yanıtları karşılaştırılabilir puanlarda toplayın
- Asistan puanı: dönem içinde o asistanın eksiksiz yanıtlarının ortalama puanı.
- Genel görünürlük puanı: asistan puanlarının ağırlıklı ortalaması. Ağırlıklar çalışma alanı başına belirlenir ve yalnızca gerçekten eksiksiz yanıt veren asistanlar üzerinden yeniden hesaplanır; tüm kontrolleri başarısız olan bir asistan, puanı sıfıra doğru çekmek yerine hesaba katılmaz.
- Ağırlıklı görünürlük puanı: aynı hesap, sorunun önem düzeyi uygulanarak yapılır: yüksek ×1,3, normal ×1,0, düşük ×0,7.
7. Puanın ötesine bakın
Puan bir özettir. Diğer metrikler arkasında ne olduğunu açıklar:
- Görünürlük: markanızdan bahseden eksiksiz yanıtların oranı.
- Bahsedilme payı: bir yanıt sizden ya da takip edilen bir rakipten bahsettiğinde, bunun ne sıklıkla siz olduğu.
- Bağlantı oranı: sizden bahseden ve web sitenizi de anan ya da bağlantısını veren yanıtların oranı.
- Kaynak bağlantı oranı ve resmî kaynak: yanıtların ne sıklıkla herhangi bir kaynak gösterdiği ve ne sıklıkla resmî web sitenizi kaynak olarak gösterdiği.
- Sıra istikrarı: yanıt listelerindeki yerinizin yanıttan yanıta ne kadar değiştiği.
- Dil uyuşmazlığı: sorudan farklı bir dilde yazılmış yanıtlar.
- Ton: sizden bahseden yanıtların tonu.
8. Aynı koşulları karşılaştırın
Her değişim, aynı filtrelerle, hemen önceki eşit uzunluktaki döneme göre ölçülür. Önceki dönemde eksiksiz yanıt yoksa yanıltıcı bir değişim göstermek yerine hiç değişim gösterilmez. Sonuçlar taramanın bittiği zamana göre gruplanır; hâlâ süren ya da başarısız olan taramalar hiçbir zaman raporlanmaz.
Sınırlamalar
AI yanıtlarının hiçbir ölçümü kusursuz değildir; sayıları neyin etkileyebileceği konusunda açık olmayı tercih ediyoruz:
- Sağlayıcılar modellerini günceller; bu, yanıt örüntülerini bir gecede değiştirebilir.
- Bir sorunun ardındaki niyet zamanla kayabilir.
- Sonuçlar konuma, bilginin güncelliğine ve sorunun tam ifadesine göre değişir.
- Takip edilen sorular, insanların sorduklarından alınmış bir örneklemdir; her gerçek konuşmanın kaydı değildir.
Bu yüzden tek bir taramaya tepki vermek yerine eğilimleri birkaç dönem boyunca okumanızı öneriyoruz.