Fórum Root.cz
Hlavní témata => Server => Téma založeno: drn 09. 03. 2016, 20:08:40
-
Zajímalo by mě, zda lze zamezit internetovým webarchívům ukládat do jejich databáze moje webovky?
A je možné docílit výmazu již uložených záznamů?
-
crowlery muzes, pokud jsou hodni, omezit pomoci robots.txt
-
Zase jeden nepoucitelny, uz treti v nedavne dobe. Zamezit lze pouze prestrizenim kabelu k serveru. Jinak lze akorat poprosit pomoci robots.txt, jak napsal Ondra Satai Nekola. Docilit vymazu lze leda tak skemranim nebo protekci. Proc by neco mazali, kdyz v dobe, kdy to crawlovali tam nebyl prislusny robots.txt, ktery by je pozadal, aby tak necinili? Pokud robots.txt doplnite, tak pokud jsou slusni, pristi pruchod uz neulozi.
-
"pokud jsou slusni" = prakticky jen google.