Back to Question Center
0

Semalt բոլոր ռոբոտներին robots.txt

1 answers:

Իմ ռոբոտներում. txt ֆայլ Ես ունեմ ռոբոտների ցուցակներ, որոնք չեն թույլատրվում ինդեքսավորվել իմ կայքում, իսկ մնացածը պետք է թույլ տամ բոլոր մյուս ռոբոտներին, բայց ես կցանկանայի իմանալ այդ երկու կանոնների միջեւ իրական տարբերությունը. 4)

     User-agent: *
Թույլ չտալ.    

եւ սա `

     User-agent: *
Թույլատրել / /    

- Umzug in Rüti
February 13, 2018