Здравейте,
имам подпапка в сайта, която е разцепена на други подпапки и във всяка има сайт и приложения.
Интересувам се как правилно да забраня индексирането на всичко в тази папка да кажем dev.domain.com
Вътре са ми разни разработки и демо сайтове, които не желая да се индексират по никакъв начин. Дори ако може да се заключат по някакъв начин с код/парола? Дайте предложения.
За момента съм сложил Robots.txt в тази папка и вътре съм сложил да не се индексира.