Pengecek crawler AI
Masukkan domain Anda. Kami membaca robots.txt Anda dan memberi tahu, bot per bot, apakah mesin pencari AI dan crawler pelatihan AI dapat mengakses situs Anda. Kami juga memeriksa keberadaan file llms.txt.
FAQ
Haruskah saya memblokir crawler pelatihan AI?
Itu keputusan Anda. Memblokir bot pelatihan (GPTBot, CCBot, Google-Extended) menjauhkan konten Anda dari pelatihan model tetapi sedikit berpengaruh pada jawaban pencarian AI. Memblokir bot pencarian (OAI-SearchBot, PerplexityBot, Claude-SearchBot) menghilangkan Anda dari jawaban tersebut.
Apakah Google-Extended memengaruhi Google Search atau AI Overviews?
Tidak. Google-Extended mengontrol penggunaan untuk pelatihan dan grounding Gemini. AI Overviews disajikan dari indeks Googlebot biasa.
Apa itu llms.txt?
File teks biasa yang diusulkan di /llms.txt yang memberi asisten AI peta situs Anda yang singkat dan terkurasi. Ini opsional dan belum menjadi standar yang dibaca semua asisten.
Ingin ini setiap minggu, di ChatGPT, Gemini, dan Perplexity?
PromptRanking melacak brand Anda di setiap platform, menunjukkan kompetitor yang disebut menggantikan Anda, dan menulis konten untuk menutup celahnya.
Mulai gratis