Jak załadować plik robots.txt

Zawartość pliku robots.txt należy edytować w backendzie Web-systems.pro. Otwórz aplikację "Witryna", przejdź do "Ustawienia www" witryny i znajdź pole "robots.txt".

Kiedy to ustawienie nie działa

• Jeśli plik o nazwie robots.txt istnieje już w katalogu głównym Web-systems.pro na serwerze. W takim przypadku zostanie użyta zawartość tego pliku, a ustawienia w systemie Web-systems.pro zostaną zignorowane. Aby edytować zawartość pliku robots.txt tylko przy użyciu ustawień aplikacji "Witryna", usuń plik robots.txt na serwerze. (Nie można tego zrobić w chmurze)
• Jeśli adres URL witryny zawiera nazwę podkatalogu. W przypadku witryny o adresie w postaci mydomain.com/info/ ustawienie "robots.txt" nie jest używane, ponieważ nie znajduje się ono w katalogu głównym domeny. Dla takiej strony wykorzystywana jest zawartość pliku robots.txt (jeśli serwer posiada taki plik) lub ustawienia "robots.txt" dla adresu mydomain.com (tj. strony w katalogu głównym domeny, jeśli Twój Web-systems.pro posiada taką stronę).