robots.txt: robots.txt to plik w głównym katalogu strony, który informuje roboty wyszukiwarek, których sekcji nie powinny odwiedzać. Nie służy do usuwania stron z indeksu – do tego jest noindex.
robots.txt: robots.txt to plik w głównym katalogu strony, który informuje roboty wyszukiwarek, których sekcji nie powinny odwiedzać. Nie służy do usuwania stron z indeksu – do tego jest noindex.