Ha önnek van egy jól szándékos és jól jobbá tett website -val keyword gazdag elégedett -hoz vonz látogató és kutatás hajtómű ez minden igazán nagy csak te van hiányzó valami ez minden igazi fontos. Ugye tud mi ez minden? Ez minden Robots.txt reszelő.

Robots.txt reszelő birtokol egy halom fontosság mint ez megenged pókok vagy csúszómászó -hoz enged vagy helytelenít -hoz csúszás minden oldalak -ból egy website vagy egy különös hónlap. Néha emberek volna némely bizalmas adat -ra -uk website és mellett használ robots.txt reszelő ők tud korlátoz csúszómászó vagy pók -hoz nem csúszás vagy mutatóujj amit különös oldal tehát senki sem tud nyúl után azon oldal és ebben út bizalmas adat azon oldal lesz biztosít.

Rövid idő haladó csúszás egy website vagy egy hónlap kutatás motor pókok vagy csúszómászó gyakran munkát keres speciális reszelő ez minden hívott Robots.txt reszelő mert átmenő robots.txt reszelő kutatás motor pókok vagy csúszómászó jön -hoz tud körülbelül melyik pókháló oldalak -ból amit website kell csúszás vagy mutatóujj és melyik pókháló oldalak kell nem vesz tudomásul.

Robots.txt reszelő van egy egyszerű szöveg reszelő amit kell lenni elhelyezett -ban gyökérkönyvtár -ból egy website. Például:

Robots.txt reszelő kell lenni szeret mint-

http:/www.abc.com/robots.txt

/

Teremtő Robots.txt Reszelő:

Mint említett fenti, robots.txt reszelő van egy egyszerű szöveg reszelő és tudod teremt ez mellett megüresedett állás egy egyszerű szöveg szerkesztő szeret jegyzék. A adat vagy egy követel említett -ban robots.txt reszelő neveznek mint “ hanglemezek”.

EGY feljegyzés beleértve a információ -ból egy különös kutatás motor és mindegyik feljegyzés volna kettő megfog- Felhasználó ügynök hol vagy említ a robotok vagy pók név és más mező van helytelenít vonalak amit május lenni egy vagy több hol vagy kell említ amit melyik oldalak vagy fájlokat kell lenni nem vesz tudomásul. Például:

User-agent: googlebot
helytelenít cgi- tartó/

-ban fenti példa robots.txt reszelő megenged “googlebot” ez minden a kutatás motor pók -ból őrnagy kutatás motor Google -hoz csúszás mindegyik és mind oldal -ból website kivéve -ból fájlokat -ból “cgi- tartó” címtár. Anyagi eszközök googlebot kell nem vesz tudomásul minden fájlokat -ból “cgi-bindirectory”.

És ha ön belép szeret alul:

User-agent: googlebot
helytelenít támogat

Googlebot akarat nem csúszás akármi reszelő -ból támogat címtár mint robots.txt reszelő birtokol oktatás -hoz googlebot -hoz nem csúszás akármi reszelő -ból támogat címtár.

Abban az esetben ön hagy helytelenít mező üres akkor ez akarat jelez -hoz googlebot -hoz csúszás minden fájlokat -ból website. De bármilyen esetben önnek kell volna egy helytelenít mező részére mind felhasználó ügynök.

A minden fenti példa voltak egyetlen részére googlebot de ha ön akar -hoz ad ugyanaz jogok -hoz minden más kutatás hajtómű’ pókok akkor használ csillagocska (*) helyett googlebot -ban felhasználó ügynök mező. Például:

User-agent: *
helytelenít cgi- tartó/

-ban fenti példa * ábrázol minden kutatás motor pókok és robots.txt reszelő fenti megenged minden kutatás motor pókok -hoz csúszás mindegyik és mind oldal -ból website kivéve -ból fájlokat -ból “cgi- tartó” címtár. Anyagi eszközök minden pókok -ból különböző kutatás hajtómű kell nem vesz tudomásul minden fájlokat -ból “cgi-bindirectory”.

Ha ön akar -hoz tud felhasználó ügynök nevek részére más kutatás hajtómű akkor megtalálhatod ez -ban -a fatörzs fájlokat mellett korlátozás részére kereslet -hoz robots.txt. A leg--bb gyakran, minden kutatás motor pókok legyen meghatározott ugyanaz jogok. abban eset, használ Felhasználó- ügynök: * mint említett fenti.

Webexcel Megoldások (ISO 90012000: Tanúsított) EgySzoftver Fejlődés Társaság és egySEO Társaság


Keyword Tags: , ,

Kapcsolódó póznák


Nem Válasz -hoz “ fontosság -ból Használ Robots.txt Reszelő” 

  1. Nem Magyarázat

Hagy egy Válaszol