Energetikai ahrefsbot-s - blog Dimax - egy

Energetikai AhrefsBot-s

Ha a farm több helyen több tíz vagy akár több százezer dinamikus oldalak, akkor gondoskodni magáról előre egyébként megvédje magát a szolgáltatás felügyeleti linkek ahrefs.com, pontosabban, annak botok rakott nagy oldalak néha olyan gyorsan és kíméletlenül, hogy azonnal küldje el tárhely mély kiütéssel.

Ahhoz, hogy baj van telt el, ez akkor a következőket kell tennie:

1. A webhely robots.txt hozzá:

User-agent: AhrefsBot
Disallow: /

2. A .htaccess a gyökere a helyén hozzá:

RewriteEngine On
RewriteCond% AhrefsBot
RewriteRule ^ * -. [F, L]

Lásd még:

És van olyan dolog, mint egy Updowner.com

Is teszi a botokat tárhely?

Van tárhelyszolgáltatóval ilyen ostobaságot nem Bloch magát?

Néhány tárhelyszolgáltatóknak blochat biztos, de azt hiszem, ez még nem minden. És sokan, akik legalább néhány nagy oldalak, nem tartja őket a virtuális tárhely és VPS vagy dedikált szerver és kezeli saját számlák.

Van egy módja annak, hogy hozzon létre egy szabályt egyetlen ip-t, mondjuk, nem több, mint 200 találatot egy nap?

Vannak persze, de szükség van szerver adminisztráció szakemberek tanulni, nem tudom, hogyan kell ezt csinálni.

Dimax, hatékony az első módszer. mert a második (via .htaccess) a robots.tht szörnyű nem bot eléri - nem apache hozzáférést.

Ha, és az igazság nem gondoltak, hogy

Másrészt, minden bizonnyal tudja, hogy a robots.txt irányelvek csak kéréseket, és a nagy, nem a törvény, akkor a bot lehet hallgatni őket, de talán nem. Ezért erőszakkal így 403 bot hatékonyabb, legalábbis elméletben.

Cikk talált egészen véletlenül. De dyuzhe sürgős. Veda helyszínen autó téma, online áruház, az oldalak nem számítanak tartalom automatikus származó byza részek. Most már tudom, hogyan kell kezelni a csapás!

előző ◈ a következő