AI Cevapları Ne Kadar Tutarlı? 3 Kez Sorduk
Google'ın AI'ına aynı soruyu üç kez sor: cite edilen kaynaklar yalnızca %81 oranında tamamen sabit kalıyor — her tekrarda yaklaşık 3.2 kaynak değişiyor.
CiteLens Research · 500 prompt · 2026-06-21"AI markamı anıyor mu?" sorusunun tek bir kontrolüne güvenebilir misin? Üretken motorlar olasılıksal olduğu için dürüst cevap: tam olarak değil. AI önerilerinin ne kadar oynadığını ölçmek için Google'ın AI'ına aynı 493 soruyu üçer kez sorduk ve her çalıştırmada cite ettiği kaynakları karşılaştırdık.
AI Overview'lar oldukça stabil ama deterministik değil çıktı. Üç ardışık tekrarda cite edilen kaynak kümesi yalnızca %81 oranında tamamen aynıydı; birebir aynı ifadeyle bile çalıştırmalar arasında yaklaşık 3.2 cite edilen domain değişti. Ortalama kaynak-kümesi benzerliği %84'ti — net örüntüleri görecek kadar yüksek, tek bir anlık görüntünün seni yanıltabileceği kadar düşük.
Bu yüzden AI görünürlüğünü doğru ölçmek nokta-kontrol değil, örnekleme gerektirir. Bir kez sorup markanı görürsen şanslı bir atış yakalamış olabilirsin; tekrar sor, yerini bir rakip alabilir. Güvenilir yaklaşım, her sorguyu defalarca çalıştırıp güven aralıklı bir oran raporlamaktır — CiteLens'in görünürlüğü tam olarak böyle ölçmesinin sebebi budur. Aşağıda tüm tutarlılık sonuçları var.
Temel bulgular
- 3 ardışık tekrarda, cite edilen domain kümesi yalnızca %81 oranında tamamen sabit.
- Birebir aynı ifadeyle bile tekrarlar arasında ortalama ~3.2 cite edilen domain değişiyor.
- Kaynak kümelerinin ortalama ikili benzerliği %84 — yüksek ama deterministik değil. Tek bir anlık görüntü seni yanıltabilir.
Bu senin için ne demek
Cevaplar sorular arasında değiştiği için, "AI beni anıyor mu?" diye tek bir kontrol gürültüdür. Gerçek görünürlüğünü bilmek için tekrarlı örnekleme gerekir.
CiteLens'in her prompt'u defalarca çalıştırıp güven aralıklı bir oran (tek seferlik evet/hayır değil) raporlamasının sebebi tam olarak budur.
Metodoloji
Her İngilizce prompt üç kez sorgulandı (tekrarlarda önbellek kapalı). Üç çalıştırmada AI-cite edilen domain kümelerini karşılaştırdık: "tamamen sabit", üçünde de bulunan domain oranıdır; benzerlik, çalıştırmalar arası ortalama ikili Jaccard'dır.
Veriyi indir (JSON)Kendi markanı AI cevaplarında ölç
Bu veriyi ürettiğimiz motoru kendi markanda çalıştır — nerede anılıyor, nerede eksiksin, gör.
Sık sorulan sorular
AI her seferinde aynı cevabı mı veriyor?
Tam olarak değil. Testimizde Google AI Overview üç tekrarda yalnızca %81 oranında birebir aynı kaynak kümesini döndürdü; ortalama 3.2 kaynak çalıştırmalar arasında değişti.
AI arama sonuçları markamı takip etmek için güvenilir mi?
Yalnızca tekrar tekrar örneklersen. Tek bir kontrol gürültülüdür çünkü cevaplar değişir; her sorguyu birkaç kez çalıştırıp toplamak, tek seferlik evet/hayır yerine güvenilir bir görünürlük oranı verir.
Aynı soruyu sorduğumda AI cevapları neden değişiyor?
Üretken motorlar olasılıksaldır ve her seferinde kaynakları yeniden çeker; bu yüzden cite edilen domain karışımı çalıştırmadan çalıştırmaya kayar — verimizde ortalama benzerlik %84'ti.
AI görünürlüğümü kaç kez kontrol etmeliyim?
Sinyali gürültüden ayıracak kadar. CiteLens her prompt'u defalarca çalıştırır ve tek, yanıltıcı olabilecek bir görüntü yerine istatistiksel güven aralıklı bir anılma oranı raporlar.
Bu, AI önerilerinin rastgele olduğu anlamına mı geliyor?
Hayır — değişken, rastgele değil. Örüntüler optimize edilebilecek kadar stabil (%84 ortalama benzerlik), ama gerçek resmi görmek için tekrarlı ölçüm gerekir.