Hvorfor dette verktøyet er nyttig
Bruk Robots.txt Path Tester når du trenger å evaluere en innlimt robots.txt-gruppe mot en bestemt crawler og sti ved hjelp av de lengste samsvarende allow- eller disallow-reglene. Resultatet vises umiddelbart og er enkelt å verifisere før du bruker det igjen.