Program menurut lionheart

Alat analisis robot.txt ini dapat dengan mudah memverifikasi konten "robot.txt" dari server web sewenang-wenang (file yang menentukan perilaku di server untuk robot mesin pencari dll.) dari online.