Ispettore di sintassi di Robots.txt

La scrittura delle lime di robots.txt è relativamente diretta. Tuttavia, il relativo alambicco
ragionevolmente comune ottenere una certa piccola parte del torto di sintassi ed allora al ritrovamento
che un robot ha vagato dappertutto il vostro luogo a causa di esso.

Questo ispettore di sintassi di robots.txt controlla il contenuto di un site’s robots.txt
contro quello contenuto in ultima specifica del testo dei robot, con fornire
avvertimenti sull'uso di nuove caratteristiche che ancora ampiamente non sono schierate.