Добре дошъл/дошла, Гост. Моля, въведи своето потребителско име или се регистрирай.
Изгубил си активационния е-мейл?

Влез с потребителско име, парола и продължителност на сесията

Новини:

Автор Тема: Как правилно да забраня индексирането на цяла папка? Robots.txt?!  (Прочетена 4990 пъти)

guest740

  • Гост
Здравейте,

имам подпапка в сайта, която е разцепена на други подпапки и във всяка има сайт и приложения.
Интересувам се как правилно да забраня индексирането на всичко в тази папка да кажем dev.domain.com

Вътре са ми разни разработки и демо сайтове, които не желая да се индексират по никакъв начин. Дори ако може да се заключат по някакъв начин с код/парола? Дайте предложения.

За момента съм сложил Robots.txt в тази папка и вътре съм сложил да не се индексира.

Отбелязано като най-добър отговор от - 14 Януари, 2022, 00:52:09

Неактивен MOn dsoffn

  • Разбирач
  • *
  • Публикации: 1070
  • Репутация: +22
Прочети тази статия....

http://blog.superhosting.bg/good-vs-bad-bots.html

не спрях да им правя реклама на тия  :o :o :o готини пичове

 (food) (food) (food) (food) (food) (food) (food)

Неактивен Михаил Михов

  • Администратор
  • Мега Гуру
  • *
  • Публикации: 3907
  • @Mihail
  • Репутация: +80
    • MyWeb1
Отвори си файла Robots.txt и допиши на нов ред, по начина който е там, основната папка за не индексация.
myweb1.eu // Български платежни методи за HikaShop


Неактивен Бого

  • Администратор
  • Гуру
  • *
  • Публикации: 2258
  • Mercedes-Benz forever
  • Репутация: +28
Става и по брутален начин, като удариш БАН на гугъл за тези папки.
Joomla, произлиза от думата Jumla (на суахили), която означава `всички заедно`, като потвърждение на open source инициативата!

Неактивен Ваш Рамбо

  • Разбирач
  • *
  • Публикации: 1119
  • Репутация: 0
    • метални врати
Disallow: /папка/

Така ще спреш бай Гошо

Неактивен MOn dsoffn

  • Разбирач
  • *
  • Публикации: 1070
  • Репутация: +22
@Рамбо
Първо трябва да се сложи User-agent:, ако добавиш звездичка User-agent: * така се отнася за всички, ако искаме да е за гугъл User-agent: Googlebot и след това пишем това което написа, ако го оставиш така както го написа все едно нищо не си направил.

Неактивен Ваш Рамбо

  • Разбирач
  • *
  • Публикации: 1119
  • Репутация: 0
    • метални врати
В robots.txt по default си го има user-agent: *, затова и не съм го споменал.