Joomla! България

Бизнес и Разработки => SEO - Search Engine Optimization => Темата е започната от: guest740 в 15 Февруари, 2015, 10:29:40

Титла: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: guest740 в 15 Февруари, 2015, 10:29:40

Здравейте,

имам подпапка в сайта, която е разцепена на други подпапки и във всяка има сайт и приложения.
Интересувам се как правилно да забраня индексирането на всичко в тази папка да кажем dev.domain.com

Вътре са ми разни разработки и демо сайтове, които не желая да се индексират по никакъв начин. Дори ако може да се заключат по някакъв начин с код/парола? Дайте предложения.

За момента съм сложил Robots.txt в тази папка и вътре съм сложил да не се индексира.

Титла: Re: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: MOn dsoffn в 15 Февруари, 2015, 15:09:03

Прочети тази статия....

http://blog.superhosting.bg/good-vs-bad-bots.html

не спрях да им правя реклама на тия  :o :o :o готини пичове

 (food) (food) (food) (food) (food) (food) (food)

Титла: Re: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: Михаил Михов в 15 Февруари, 2015, 21:13:09

Отвори си файла Robots.txt и допиши на нов ред, по начина който е там, основната папка за не индексация.

Титла: Re: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: Бого в 15 Февруари, 2015, 21:18:35

Става и по брутален начин, като удариш БАН на гугъл за тези папки.

Титла: Re: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: Ваш Рамбо в 16 Февруари, 2015, 10:11:31

Disallow: /папка/

Така ще спреш бай Гошо

Титла: Re: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: MOn dsoffn в 16 Февруари, 2015, 11:46:32

@Рамбо
Първо трябва да се сложи User-agent:, ако добавиш звездичка User-agent: * така се отнася за всички, ако искаме да е за гугъл User-agent: Googlebot и след това пишем това което написа, ако го оставиш така както го написа все едно нищо не си направил.

Титла: Re: Как правилно да забраня индексирането на цяла папка? Robots.txt?!
Публикувано от: Ваш Рамбо в 17 Февруари, 2015, 10:58:45

В robots.txt по default си го има user-agent: *, затова и не съм го споменал.