Yapay zekâ görünürlük kontrolü

Yapay zekâ görünürlüğü ne demek?

ChatGPT, Perplexity, Claude ve Google'ın yapay zekâ özetleri bir soruyu yanıtlarken web sayfalarını okur ve bazılarını kaynak olarak gösterir. Bir sayfanın bu yanıtlarda yer alabilmesi için önce ilgili botun sayfaya erişebilmesi gerekir. Bu araç erişim tarafını ölçer. robots.txt dosyanızın her bot için ne söylediğini, sunucunuzun otomatik isteklere nasıl yanıt verdiğini ve markanızı tanıtan yapısal verinin sayfada olup olmadığını gösterir. Sayfanın yanıtlarda gerçekten kaynak gösterilip gösterilmediğini ölçmez, çünkü bunu dışarıdan güvenilir biçimde ölçmenin yolu yoktur.

Hangi botlar kontrol edilir?

Botları üç gruba ayırıyoruz. Arama ve yanıt botları, yapay zekâ aracı bir soruyu yanıtlarken sayfaları bulup okur. OAI-SearchBot, PerplexityBot ve Claude-SearchBot bu gruptadır. Kullanıcı isteği botları, bir kişi sohbet içinde bağlantı paylaştığında ya da araca bir sayfayı okumasını söylediğinde gelir. ChatGPT-User, Perplexity-User ve Claude-User böyledir. Model eğitimi botları ise içeriği gelecekteki modellerin eğitimi için toplar. GPTBot, ClaudeBot, CCBot, Google-Extended ve Applebot-Extended bu gruptadır. Google-Extended ve Applebot-Extended gerçek birer tarayıcı değil, robots.txt içinde kullanılan kontrol adlarıdır.

• Arama ve yanıt: OAI-SearchBot, PerplexityBot, Claude-SearchBot
• Kullanıcı isteği: ChatGPT-User, Perplexity-User, Claude-User
• Model eğitimi: GPTBot, ClaudeBot, CCBot, Google-Extended, Applebot-Extended

Eğitim botlarını engellemek görünürlüğü düşürür mü?

Eğitim botlarını engellemek meşru bir tercihtir ve araç bunu hata olarak saymaz. İçeriğinizin model eğitiminde kullanılmasını istemiyorsanız GPTBot, ClaudeBot ve CCBot gibi botları engelleyebilirsiniz. Yanıtlarda kaynak gösterilmek için ise arama ve yanıt botlarının açık kalması gerekir. Sık yapılan hata, tüm yapay zekâ botlarını tek bir kuralla kapatmaktır. Böyle bir kural eğitim botlarıyla birlikte yanıt botlarını da durdurur ve sayfa yanıtlarda görünmez olur. Kararı her bot için ayrı vermenizi öneririz.

Cloudflare ve güvenlik katmanları

robots.txt izin verse bile bir güvenlik katmanı botları durdurabilir. Cloudflare panelindeki yapay zekâ botlarını engelleme ayarı, bot koruması ve güvenlik duvarı kuralları otomatik isteklere 403 ya da doğrulama sayfası döndürebilir. Araç sayfanızı kendi botumuzla ister ve böyle bir yanıt gelirse bunu gösterir. Cloudflare'in yönettiği robots.txt bölümünü ve Content-Signal satırlarını da ayrıca listeler. Ancak gerçek yapay zekâ botlarının adreslerinden gelen isteklere nasıl davranıldığını dışarıdan kesin ölçemeyiz. Bu yüzden site Cloudflare arkasındaysa panel ayarlarına ayrıca bakmanızı öneririz.

llms.txt gerekli mi?

llms.txt, yapay zekâ araçlarına sitenizin kısa bir özetini ve önemli sayfalarınızın listesini sunmak için önerilmiş bir dosyadır. Bazı geliştirici araçları ve belge siteleri bu dosyayı kullanır. Büyük arama ve yanıt motorlarının sıralama ya da kaynak seçiminde llms.txt dosyasını kullandığına dair kesin bir açıklama yoktur. Bu yüzden araç llms.txt eksikliğini hata saymaz, yalnız bilgi olarak gösterir. Dosyayı eklemek zararsızdır ve birkaç dakikanızı alır.

Yapısal veri neden önemli?

Organization ya da LocalBusiness yapısal verisi markanızın adını, logosunu, adresini ve iletişim bilgilerini makinelerin okuyacağı biçimde bildirir. sameAs bağlantıları sosyal medya hesaplarınızı ve kayıt sayfalarınızı bu markaya bağlar. Yapay zekâ araçları farklı kaynaklardaki bilgileri birleştirirken bu işaretlerden yararlanabilir. WebSite verisi ise sitenin adını tek yerde tanımlar. Bu üç işaret ana sayfada bulunmalıdır.

İzin şart ama yeterli değil

Tüm botlara izin vermek sayfanızın yapay zekâ yanıtlarında görüneceğini garanti etmez. Bu araçlar hangi kaynağı göstereceğini içeriğin soruyla ilgisine, güncelliğine, açıklığına ve sitenin güvenilirliğine göre seçer. Erişim kontrolü ilk adımdır. Ardından soruları doğrudan yanıtlayan, tarihli, yazarı belli ve kaynak gösteren içerikler üretmek gerekir. Otopilot paneli yapay zekâ yanıtlarındaki görünürlüğünüzü düzenli olarak takip eder.