De ce este util acest instrument
Folosiți Testerul de căi robots.txt atunci când trebuie să evaluați un grup robots.txt lipit față de un anumit crawler și o anumită cale, folosind regulile de permisiune sau de nepermisiune cu cea mai lungă potrivire. Rezultatul este imediat și ușor de verificat înainte de a-l reutiliza.