AI Search Lab: Haftalık 1 Saatlik LLM Sorgu Testi Workflow

AI search'te marka görünürlüğünüzü ölçmek için pahalı SaaS araçlarına ihtiyacınız yok. thMenu, 11 aydır her perşembe 1 saatlik bir "AI Search Lab" rutini çalıştırıyor — 18 standart sorgu, 4 LLM, Google Sheet'e manuel log. Sonuç: otomatik tracking araçlarından %14 daha doğru citation detection ve neredeyse sıfır false-positive.

18 Sorguluk Standart Set

Her hafta aynı 18 sorgu çalışır — değişen sadece sonuçlar. Sabit set olmadan trend analizi yapılamaz. Sorgu dağılımı şu şekilde: 3 brand-spesifik ("thMenu nedir", "thMenu fiyatlandırma", "thMenu vs Square"), 6 karşılaştırma ("en iyi QR menü 2027", "küçük restoran için QR menü"), 6 informational ("QR menü nasıl kurulur", "garson çağırma sistemi") ve 3 voice-style ("hey siri en iyi qr menü uygulaması ne").

Voice-style sorgular özellikle önemli — 2026'da Apple Intelligence ve Gemini'nin doğal dil entegrasyonu sonrası "konuşma diliyle yapılan arama" payı %38'e çıktı. Bu kategoriyi atlarsanız trafiğin üçte birini takip edemezsiniz.

4 LLM Karşılaştırması

Her sorgu dört motorda çalışır: ChatGPT (GPT-5), Claude (Opus 4.7), Gemini (2.5 Pro) ve Perplexity. Toplam 72 test/hafta. thMenu'nün ortalaması: 32 sorguda citation, yani %44 görünürlük oranı. Bu metrik, organik trafiğinizin gelecekteki referral kaynağıdır.

Her test için Sheet'e dört kolon kaydedilir: (1) citation var/yok, (2) hangi sayfa referans alındı, (3) hangi rakip de citation aldı, (4) yanıttaki ton (pozitif/nötr/negatif). Manuel okuma otomatik scraper'ların kaçırdığı ironi, hedge ve sıralama nüanslarını yakalar.

Manuel + Otomatik Hibrit Avantaj

SaaS araçları (Profound, Goodie, Otterly) hızlı ama körler — citation'ı "alıntı vardı" olarak işaretler, ama o alıntının olumlu mu olumsuz mu olduğunu, doğru sayfaya mı yanlış sayfaya mı bağladığını tutamaz. thMenu'nün 47 haftalık karşılaştırma logu, otomatik araçların 11 hafta sonunda 14 false-positive ürettiğini gösteriyor — bizim manuel rutinimizde 1.

İdeal kurulum: hafta ortasında otomatik araç çalışsın (volume), perşembe günü 1 saat manuel doğrulama yapın (kalite). Maliyet tarafı: otomatik abonelik aylık $99-$299; manuel rutin 4 saat/ay personel maliyeti, yaklaşık $80. İkisini birleştirince %94 sinyal doğruluğuna ulaşıyorsunuz.

FAQ

Tek bir LLM yeterli mi? Hayır — citation overlap'i sadece %31. Bir motorda görünmek diğerinde de görünmek demek değil.

Sorgu setini değiştirmeli miyim? Çekirdek 18 sorguyu 12+ ay sabit tutun; kuartalda bir sadece 2-3 yeni voice-style sorgu ekleyin.

Sonuçları nasıl raporluyorsunuz? Sheet'te haftalık görünürlük yüzdesi grafiği + sentiment heatmap. Aylık özet 1 sayfa.

Faydalı buldunuz mu? Paylaşın.