Robots.txt 2.0
Anda dapat mengunduh dalam 5 detik.
Tentang Robots.txt
Robot.txt adalah editor visual untuk File Pengecualian Robot dan perangkat lunak penganalisis log. Ini memungkinkan pengguna untuk dengan cepat dan mudah membuat robot.txt file yang diperlukan untuk menginstruksikan laba-laba mesin pencari, bagian mana dari situs Web yang tidak dapat diindeks dan dibuat dapat dicari oleh masyarakat Web umum dan kemudian untuk mengidentifikasi laba-laba, yang tidak sesuai dengan instruksi tersebut. Program ini menyediakan cara pengguna untuk masuk ke FTP atau server jaringan lokalnya dan kemudian memilih dokumen dan direktori yang tidak dapat dicari. Melalui program ini Anda akan dapat secara visual menghasilkan robot standar industri.txt file; mengidentifikasi laba-laba berbahaya dan yang tidak diinginkan dan melarangnya dari situs Anda; perayam mesin pencari langsung ke halaman yang sesuai untuk situs multibahasa; gunakan robot.txt file untuk manajemen halaman pintu; jauhkan laba-laba dari area sensitif dan pribadi di situs Web Anda; mengunggah robot yang diformat dengan benar.txt file langsung ke server FTP Anda tidak beralih dari Robot.txt Editor; melacak kunjungan laba-laba; buat laporan kunjungan laba-laba dalam format HTML, Microsoft Excel CSV dan XML, dan lainnya. Pembaruan dan peningkatan program gratis tidak terbatas pada waktunya; jumlah situs Web yang tidak terbatas untuk dikerjakan