Szczegóły programowe:
Robotto jest wolne robots.txt narzędzie do monitorowania.
Wystarczy założyć konto i dodać domeny, które chcesz śledzić. Za każdym razem, plik robots.txt jest aktualizowana, otrzymasz e-mail ze szczegółami, co się zmieniło.
Robotto ostrzega również o potencjalnych problemach z pliku robots.txt.
Komentarze nie znaleziono