SEO uzmanları ve web yöneticileri için yapay zeka tarayıcılarını yönetmek büyük önem taşır. Yapay zeka botlarının içeriğinize erişmesine izin vermek, gelişmekte olan yapay zeka keşif motorlarında görünürlük için kritik olsa da, kontrolsüz tarama sunucu kaynaklarını hızla tüketebilir, bu da performans sorunlarına ve beklenmedik barındırma maliyetlerine yol açabilir. Yapay zeka kullanıcı aracısı dizeleri için resmi belgeler genellikle eksik veya güncel değildir, bu da etkili yönetimi zorlaştırır.
Bu sorunu ele almak için, gerçek sunucu günlüklerine dayanarak, kullanıcı aracısı dizeleri ve mevcut olduğunda doğrulama için resmi IP listeleriyle birlikte doğrulanmış bir yapay zeka tarayıcıları listesi derledik. Bu kaynak, yeni tarayıcıları ve mevcut olanlardaki değişiklikleri yansıtacak şekilde düzenli olarak güncellenecektir.
Doğrulanmış Kapsamlı AI Tarayıcı Listesi (Aralık 2025)
| Ad | Amaç | SEJ Tarama Hızı (sayfa/saat) | Doğrulanmış IP Listesi | Robots.txt engelleme | Tam Kullanıcı Aracısı |
|---|---|---|---|---|---|
| GPTBot | GPT modelleri (ChatGPT, GPT-4o) için yapay zeka eğitim verisi toplama | 100 | Resmi IP Listesi | User-agent: GPTBot Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.3; +https://openai.com/gptbot) |
| ChatGPT-User | Kullanıcılar ChatGPT ile etkileşim kurduğunda gerçek zamanlı web taraması için yapay zeka aracısı | 2400 | Resmi IP Listesi | User-agent: ChatGPT-User Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/bot |
| OAI-SearchBot | ChatGPT arama özellikleri için yapay zeka arama indeksleme (eğitim için değil) | 150 | Resmi IP Listesi | User-agent: OAI-SearchBot Allow: / Disallow: /private-folder |
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.3; +https://openai.com/searchbot |
| ClaudeBot | Claude modelleri için yapay zeka eğitim verisi toplama | 500 | Resmi IP Listesi | User-agent: ClaudeBot Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; [email protected]) |
| Claude-User | Claude kullanıcıları göz atarken gerçek zamanlı web erişimi için yapay zeka aracısı | <10 | Mevcut değil | User-agent: Claude-User Disallow: /sample-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Claude-User/1.0; [email protected]) |
| Claude-SearchBot | Claude arama yetenekleri için yapay zeka arama indeksleme | <10 | Mevcut değil | User-agent: Claude-SearchBot Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Claude-SearchBot/1.0; +https://www.anthropic.com) |
| Google-CloudVertexBot | Vertex AI Agent Builder için yapay zeka aracısı (yalnızca site sahiplerinin isteği üzerine) | <10 | Resmi IP Listesi | User-agent: Google-CloudVertexBot Allow: / Disallow: /private-folder |
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/141.0.7390.122 Mobile Safari/537.36 (compatible; Google-CloudVertexBot; +https://cloud.google.com/enterprise-search) |
| Google-Extended | Googlebot tarafından taranan içeriğin yapay zeka eğitim kullanımını kontrol eden belirteç. | User-agent: Google-Extended Allow: / Disallow: /private-folder |
|||
| Gemini-Deep-Research | Google Gemini'nin Derin Araştırma özelliği için yapay zeka araştırma aracısı | <10 | Resmi IP Listesi | User-agent: Gemini-Deep-Research Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Gemini-Deep-Research; +https://gemini.google/overview/deep-research/) Chrome/135.0.0.0 Safari/537.36 |
| Bir kullanıcı bir web sayfası açmasını istediğinde Gemini'nin sohbeti | <10 | ||||
| Bingbot | Bing Arama ve Bing Sohbet (Copilot) yapay zeka yanıtlarını destekler | 1300 | Resmi IP Listesi | User-agent: BingBot Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36 |
| Applebot-Extended | Tarama yapmaz ancak Apple'ın Applebot verilerini nasıl kullandığını kontrol eder. | <10 | Resmi IP Listesi | User-agent: Applebot-Extended Allow: / Disallow: /private-folder |
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot) |
| PerplexityBot | Perplexity'nin yanıt motoru için yapay zeka arama indeksleme | 150 | Resmi IP Listesi | User-agent: PerplexityBot Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot) |
| Perplexity-User | Perplexity kullanıcıları bilgi talep ettiğinde gerçek zamanlı tarama için yapay zeka aracısı | <10 | Resmi IP Listesi | User-agent: Perplexity-User Allow: / Disallow: /private-folder |
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user) |
| Meta-ExternalAgent | Meta'nın LLM'leri (Llama vb.) için yapay zeka eğitim verisi toplama | 1100 | Mevcut değil | User-agent: meta-externalagent Allow: / Disallow: /private-folder |
meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler) |
| Meta-WebIndexer | Meta AI aramasını geliştirmek için kullanılır. | <10 | Mevcut değil | User-agent: Meta-WebIndexer Allow: / Disallow: /private-folder |
meta-webindexer/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler) |
| Bytespider | ByteDance'in TikTok gibi ürünleri için LLM'leri için yapay zeka eğitim verisi | <10 | Mevcut değil | User-agent: Bytespider Allow: / |
