Penguji aturan robots.txt
Portal Alat PraktisPeriksa jaringan saat ini

Penguji aturan robots.txt

Uji grup perayap, aturan Allow/Disallow, dan jalur URL secara lokal

Aturan dan jalur tetap di browser ini. Tidak ada yang diunggah, disimpan, atau diminta dari situs tujuan.

Mencocokkan User-agent, Allow, dan Disallow menurut RFC 9309. Mendukung * dan $ di akhir. Sitemap hanya ditampilkan, tidak diambil.

Gunakan huruf, tanda hubung, atau garis bawah saja dalam token, bukan string User-Agent lengkap. Dari URL hanya jalur dan kueri yang dipakai.

Tempel aturan lalu pilih Uji secara lokal.

Memahami hasil

Hanya pencocokan jalur dari teks tempel yang disimulasikan. robots.txt langsung tidak diambil dan hasil tidak membuktikan perayapan, pengindeksan, atau kerahasiaan. Perayap dapat berbeda.

Maksimal 256 KiB teks, 1000 aturan, dan 200 grup; kelebihan ditolak.

RFC 9309