1. Sayt xaritasini sozlash
Agar sayt qidiruvmateriallari saytingizga mazmun manbai hisoblansa, sayt materiallarini nusxalash muammosi bundan kamroq bo'ladi. Va saytning yangi sahifalarini ushbu indekslashtirish uchun o'g'rilarga nisbatan tezroq bo'lishi kerak.

Sayt xaritasi yaratish uchun maslahatlar:

Lastmod xususiyatlarini ishlatganligiga ishonch hosil qiling. Ular birinchi qidiruvni qaysi sahifalarni izlashini qidirish mexanizmiga ruxsat berishadi.

Qo'shimcha yangiliklar bilan Atomga qo'shimcha sayt xaritasi sifatida foydalaning. So'nggi kun yoki haftadagi yangiliklar bilan atomni yuborish, veb-masters vositalariga qo'shilgan yangi materiallarni skanerlashni tezlashtiradi.

Katta kontentli loyihangiz bo'lsa - sayt xaritasiga linkni robots.txt faylidan olib tashlang, lekin uni webmasters uchun vositalarga qo'shib qo'ying. Bundan tashqari, fayl nomini sayt xaritasiga o'zgartiring. Bu kontentni avtomatik ravishda o'g'irlashni qiyinlashtiradi.