Claude-User Nedir?
Kısa tanım
Claude-User, Anthropic'in Claude kullanıcılarını desteklemek için kullandığı user-agent'tır: bir kullanıcı Claude'a soru sorduğunda Claude web sitelerine bu adla erişebilir. Anthropic'e göre Claude-User, site sahiplerinin bu kullanıcı tetiklemeli isteklerin hangi sitelere erişebileceğini kontrol etmesini sağlar. Devre dışı bırakılması, içeriğin kullanıcı sorgularına yanıt olarak getirilmesini önler ve kullanıcı yönlendirmeli web aramasındaki görünürlüğü azaltabilir.
Diğer adları: Claude User, Claude-User user agent, Claude-User botu, Anthropic Claude-User
Kullanıcı tetiklemeli ama robots.txt ile yönetilebilir
Büyük yapay zekâ sağlayıcılarının hepsi, kullanıcının sorusu üzerine anlık sayfa getiren ayrı bir user-agent kullanır. Bu getiricilerin robots.txt karşısındaki tutumu ise sağlayıcıya göre değişir ve Claude-User'ı ötekilerden ayıran nokta tam olarak budur:
| Getirici | Sağlayıcının robots.txt hakkındaki ifadesi |
|---|---|
Claude-User (Anthropic) | Site sahiplerinin bu kullanıcı isteklerinin hangi sitelere erişebileceğini kontrol etmesini sağlar; Anthropic, botlarının robots.txt yönergelerine uyduğunu belirtir. |
ChatGPT-User (OpenAI) | Eylemler kullanıcı tarafından başlatıldığı için robots.txt kuralları uygulanmayabilir. |
Perplexity-User (Perplexity) | Getirme kullanıcı tarafından istendiği için genellikle robots.txt kurallarını dikkate almaz. |
Yani Anthropic'in yardım makalesine göre robots.txt'de Claude-User için yazılan bir kural, kullanıcı isteğiyle yapılan getirmeler için de geçerlidir. Aynı kuralı ChatGPT-User ya da Perplexity-User için yazmak, bu sağlayıcıların kendi ifadelerine göre aynı güvenceyi vermez.
Devre dışı bırakmanın sonucu
Anthropic'e göre Claude-User'ı devre dışı bırakmak, sistemin içeriğinizi bir kullanıcı sorgusuna yanıt olarak getirmesini önler ve sitenin kullanıcı yönlendirmeli web aramasındaki görünürlüğünü azaltabilir. Somut bir senaryo: bir kullanıcı ürün sayfanızın bağlantısını Claude'a yapıştırıp "bu ürün hangi işletim sistemlerini destekliyor?" diye soruyor. Claude-User engelliyse Claude sayfayı okuyamaz; cevap başka kaynaklara ya da modelin önceden bildiklerine dayanır ve sayfanızdaki güncel bilgi cevaba yansımayabilir.
Bu karar eğitim tercihinden bağımsızdır. İçeriğinin Anthropic'in model eğitiminde kullanılmasını istemeyen bir site ClaudeBot'u engelleyip Claude-User'a izin verebilir; ters yönde, Claude-User'ı kapatmak da eğitim için bir tercih bildirmez. Her bot, robots.txt'de kendi adıyla ayrı ayrı yönetilir.
Yalnızca bir bölümü kapatmak
Çoğu site için mantıklı yapılandırma her şeyi açmak ya da kapatmak değil, kullanıcıya ait ya da işlem içeren alanları dışarıda bırakmaktır:
User-agent: Claude-User
Allow: /
Disallow: /musteri-paneli/
Disallow: /teklif-formu/
Disallow: /odeme/İki ayrıntıyı unutmayın. Bot kendi adına yazılmış bir grup bulduğunda User-agent: * altındaki kurallar ona artık uygulanmaz; korumak istediğiniz yolları bu grupta da listeleyin. Anthropic ayrıca kuralın, devre dışı bırakılmak istenen her alt alan adının kendi robots.txt dosyasına yazılması gerektiğini belirtir.
Kayıtlarda tanımak
Anthropic'in makalesi Claude-User için tam bir user-agent dizesi vermez; kayıtları filtrelerken Claude-User ifadesini aramak gerekir. Bu ad taklit edilebileceği için isteğin kaynak IP adresi, Anthropic'in yayımladığı https://claude.com/crawling/bots.json listesiyle karşılaştırılabilir. Kullanıcı isteğiyle çalıştığı için Claude-User trafiği düzenli değildir; sayfaların ilgi gördüğü anlarda yoğunlaşır.
robots.txt izin verse bile bir bot koruması doğrulama sayfası gösteriyorsa Claude-User içeriğe ulaşamaz, çünkü Anthropic botlarının CAPTCHA'ları aşmaya çalışmadığını açıkça belirtir. Anthropic'in arama dizini için çalışan botu Claude-SearchBot, eğitim için içerik toplayan botu ise ClaudeBot'tur.