Hozzáigazítva joomla 3

Fontolja meg, hogy hozzon létre a Joomla 2.5 / 3.x megfelelő fájlt a keresőmotorok - robots.txt
Ez a fájl szükséges, hogy jelezze, hogy a robotok nem kell indexelni.

Hozzáigazítva joomla 3

Kezdetben robots.txt formában van

Ahhoz, hogy megértsük a lényege ennek a fájlt, vessünk egy kicsit Nézzük, mi van írva itt, és az üzemeltetők (parancsok) támogatja.

User-agent - egy név a robot, amelynek célja utasítást. Az alapértelmezett a * (csillag) Joomla - ez azt jelenti, hogy az utasítás az abszolút minden csúszómászó.
A leggyakoribb nevek robotok:

Használjon külön utasítás mindkét robot a legtöbb esetben nem szükséges. Ha csak mi a konkrét projektek és különleges feladatokra.

Minden robot megérti a legtöbb csapat, és csak a buta, mint például a robot Yandex saját csapata.
Ezért nyugodtan tegye a * (csillag) és írási utasítás mindenki számára. Ha a robot nem poomot valamit, akkor egyszerűen figyelmen kívül hagyja ezt a parancsot, és továbbra is működni fog.

Letiltása - megtiltja index tartalmát a megadott mappába, vagy URL-t.

Hagyjuk - éppen ellenkezőleg, lehetővé teszi, hogy az indexelés a mappát vagy URL-t.

Host - feltüntetése az elsődleges tükör a helyén (a www vagy www nélkül)

És ez Yandex nem veszi figyelembe az ilyen speciális lap, amely meghatározott robots.txt Clean-param irányelv.
Minden ugyanaz a példa a keresés a honlapon:
Clean-param: keresőszó / - irányelv tiltja az index minden URL-paraméter keresőszó?

Crawl-delay - amíg az irányelv csak ismerős Yandex. Ez meghatározza, hogy milyen gyakran az oldal szkennelési intervallum beállítása másodperc.

Ez hasznos lehet, ha sok oldalt, és elég nagy terhelés a szerveren, mivel minden egyes robot fellebbezést az oldalon a webhelyen - a terhelés a szerveren. A robot képes beolvasni néhány oldalt másodpercenként, így letölteni szerverünk.

például:
Crawl-delay: 5 - intervallumot a letöltési oldal - 5 másodperc.

Specifikus iránymutatások Yandex itt látható >>

Minden irányelvek írt egy új sort anélkül, hogy kihagyom.

Kívánok jó és gyors indexelés!

Üdvözlettel, Oleg.

Kapcsolódó cikkek