Paljud veebisaitide operaatorid on segaduses. Ilmselt peab teil tingimata olema fail nimega robots.txt. Mis see on?
Windows + Linux / inglise / avatud lähtekoodiga. Kui teil on koduleht, soovite tavaliselt, et teid leitaks. Kui teie leht ei ilmu Google'is, on suur pettumus. Selle põhjuseks võib olla fail robots.txt. Kuid ainult siis, kui see on olemas. See fail saab teha ainult ühte asja: keelata.
Failis robots.txt saate keelata automaatsetel programmidel, mis sirvivad ööpäevaringselt Internetti, teie lehtedele juurde pääseda. Keelu saate välja kuulutada kõigi nende robotite või teatud robotite kohta. Saate oma lehed täielikult või ainult teatud alad blokeerida.
Kui toimikut ei eksisteeri, siis keelde ei ole. Teie lehed on avatud kõigile otsingumootoritele. Kui te ikkagi Google'is ei ilmu, tekib hoopis teine küsimus: kas olete oma lehed juba registreerinud? Parim asi on seda kohe teha. Sisestage lihtsalt aadress siia:
https://www.google.com/webmasters/tools/submit-url
Selleks peate oma Google'i kontole sisse logima.
Selleks, et puuduv fail robots.txt oleks probleem, tuleks ka server valesti konfigureerida. Seejärel võib robot proovida failile juurde pääseda ja ilmuda ebatavalisi veateateid, põhjustades protsessi katkestamise. Kuid see juhtum on väga ebatõenäoline.
Kui soovite luua faili robots.txt, salvestage see oma veebiserveri põhikausta. Kui soovite lubada kõigil teha kõike, kirjutage sinna järgmine:
Kasutaja agent: *
Keela:
Rida "User-Agent" näitab, kellele keeld kehtib. * tähendab: kõigile. Rida "Keela" väljendab keeldu. Kui midagi muud pole, tähendab see, et kõik juurdepääsud on lubatud.
Veel teemal:Kardin üles, siit tuleb teie veebisait: Kuidas luua veebisaiti väikese vaevaga
