Als u hebt mist een goed ontworpen en goed geoptimaliseerde website met sleutelwoord rijke inhoud om bezoekers en onderzoeksmotoren aan te trekken die werkelijk groot is maar u iets die zeer belangrijk is. Weet u wat dat is? Dat is Robots.txt dossier.
Robots.txt het dossier heeft veel belang aangezien het spinnen of kruippakjes toestaat toestaan of verbieden te kruipen alle pagina's van een website of een bepaalde webpage. Soms hebben de mensen sommige vertrouwelijke gegevens over hun website en door robots.txt dossier te gebruiken kunnen zij kruippakjes of spin beperken om niet te kruipen of te indexeren dat de bijzondere pagina zo niemand op die pagina kan bereiken en op deze wijze de vertrouwelijke gegevens over die pagina veilig zullen zijn.
Terwijl het gaan kruipen zoekt een website of een motor van het webpageonderzoek spinnen of kruippakjes vaak een speciaal dossier dat Robots.txt dossier wordt genoemd omdat door robots.txt de motor van het dossieronderzoek de spinnen of de kruippakjes komen het te weten over welk Web de pagina's van die website moeten kruipen of indexeren en welke Web-pagina's moeten negeren.
Robots.txt het dossier is een eenvoudig tekstdossier dat in wortelfolder van een website moet worden geplaatst. Bijvoorbeeld:
Robots.txt het dossier moet als zoals zijn
http://www.abc.com/robots.txt
Het creëren van Robots.txt Dossier:
Zoals hierboven vermeld, robots.txt is het dossier een eenvoudig tekstdossier en u kunt het creëren door een eenvoudige tekstredacteur zoals blocnote te openen. Het gegeven of een bevel dat in robots.txt dossier wordt vermeld worden geroepen zoals verslagen .
Een verslag omvat de informatie van een bepaalde onderzoeksmotor en elk verslag heeft de agent van de twee gebiedenGebruiker waar u de robots of spinnaam vermeldt en ander gebied verbiedt lijnen is die één of meer kunnen zijn waar u dat moet vermelden die de pagina's of de dossiers moeten worden genegeerd. Bijvoorbeeld:
Gebruiker-agent: googlebot
Verbied: /cgi-bin/
In bovengenoemd voorbeeld robots.txt staat het dossier googlebot toe dat de spin van de onderzoeksmotor van belangrijke onderzoeksmotor Google om is te kruipen elke pagina van de website behalve van dossiers van CGI-bak folder. De middelen googlebot moeten alle dossiers van CGI-bak folder negeren.
En als u als onderstaand binnengaat:
Gebruiker-agent: googlebot
Verbied: /support
Googlebot zal niet om het even welk dossier van steunfolder kruipen aangezien robots.txt het dossier instructies aan googlebot niet heeft te kruipen enig dossier van steunfolder.
Voor het geval dat u weggaat verbied gebiedsspatie dan het op aan googlebot om zal wijzen te kruipen alle dossiers van de website. Maar in elk geval moet u hebben gebied voor elke gebruikersagent verbieden.
Allen boven voorbeeld waren slechts voor googlebot maar als u zelfde rechten op al andere spinnen van de onderzoeksmotor wilt geven toen gebruik asterisk (*) in plaats van googlebot op het gebied van de gebruikersagent. Bijvoorbeeld:
Gebruiker-agent: *
Verbied: /cgi-bin/
In bovengenoemd voorbeeld * vertegenwoordigt alle spinnen van de onderzoeksmotor en robots.txt het dossier staat hierboven alle spinnen van de onderzoeksmotor toe om te kruipen elke pagina van de website behalve van dossiers van CGI-bak folder. Betekent alle spinnen van verschillende onderzoeksmotoren alle dossiers van CGI-bak folder moeten negeren.
Als u de namen van de gebruikersagent voor andere onderzoeksmotoren wilt kennen toen kunt u het in uw logboekdossiers door verzoeken te controleren aan robots.txt vinden. Vaakst, zouden alle spinnen van de onderzoeksmotor de zelfde rechten moeten worden gegeven. in dat geval, gebruik gebruiker-Agent: * zoals hierboven vermeld.
De Oplossingen van Webexcel (Verklaarde het 9001:2000 van ISO) Een bedrijf en SEO Company van de Ontwikkeling van de Software
De Markeringen van het sleutelwoord: robots, de Marketing van de Motor van het Onderzoek, SEO
Geen Reacties op Belang om het Dossier van Robots.txt Te gebruiken
Gelieve te wachten
Verlaat een Antwoord