Ne, a robotai. txt failas nereikalingas svetainei. Jei robotas atkeliauja į jūsų svetainę ir jo neturi, jis tiesiog aptiks jūsų svetainę ir indeksuos puslapius, kaip įprastai. … txt failas reikalingas tik tuo atveju, jei norite labiau kontroliuoti, kas yra tikrinama.
Kas nutiks, jei neturėsite robotų txt?
robotai. txt yra visiškai neprivalomas. Jei turite, standartus atitinkantys tikrintuvai jį gerbs, jei neturite, viskas, kas nėra draudžiama HTML-META elementuose (Wikipedia), yra tikrinama. Svetainė bus indeksuojama be apribojimų.
Ar galiu ištrinti robotų txt?
Turite pašalinti abi eilutes iš savo robotų. txt failą. Robotų failas yra jūsų žiniatinklio prieglobos aplanko šakniniame kataloge, jį paprastai galima rasti /public_html/ ir jūs turėtumėte turėti galimybę redaguoti arba ištrinti šį failą naudodami: FTP naudodami FTP klientą, pvz., FileZilla arba WinSCP.
Ar robotai txt saugūs?
Robotai. txt failas pats savaime nekelia grėsmės saugumui, o tinkamas jo naudojimas gali būti gera praktika ne su sauga. Neturėtumėte manyti, kad visi žiniatinklio robotai laikysis failo nurodymų.
Kodėl robotai txt blogai?
Tiesiog pridėkite URL sąrašą, skirtą privatiems robotams. txt failas yra vienas iš blogiausių būdų, kaip bandyti paslėpti URL, ir daugeliu atvejų tai sukelia visiškai priešingą rezultatą, nei numatyta..
