Кой е най-сигурният начин да блокирам Гугъл

ioio

Member
Имам една страница на която правя редиректване и която искам Гугъл и другите да не я виждат и индексират.Как е наи-сигурно това да стане.
дотук съм сложил в самият фаил
META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW"

и направих robots.txt с записи

User-agent: *
Disallow: /prehvurliane.php

това дали е достатъчно а и къде точно трябва да е robots.txt .Аз съм го сложил в главната директория.
Дали да правя накакви записи и в .htaccess ?
 
От: кои е наи сигурният начин да блокирам Гугъл

да не отварям тема това важи ли и за папка
Disallow: /papkata :)
 
От: кои е наи сигурният начин да блокирам Гугъл

За папки трябва да е така:
Disallow: /papkata/
 
От: кои е наи сигурният начин да блокирам Гугъл

robotstxt . org
най - добре виж тук. Ще намериш отговор на всички въпроси.

поздрави, айбиемчо
 
От: Кой е най-сигурният начин да блокирам Гугъл

И аз мисля, че е достатъчно, но все пак аз блокирам Google и другите ботове на търсещите машини по други начини. Единия начин е да го засичаш по IP и/или по User Agent. Алтернативно е да го засечеш (ботът) по това, че не оставя Referer и не изпълнява JavaScript (аз файловете си ги защитавам със защита от ботове, за част от която ползвам JavaScript). Тези номера са удачни за блокиране на ботове особено когато ботовете имат друга цел (т.е. не са търсещи машини). Те надали признават стандартите на search ботовете, защото просто не са такива.
 
От: Кой е най-сигурният начин да блокирам Гугъл

<META NAME="googlebot" CONTENT="NOINDEX,NOFOLLOW" />

така ще блокираш само джугъл. другите търсачки ще си влизат.


забелязвал съм, че с роботс.тхт бот-а индексира урл-то.
 

Горе