O‘zbekiston respublikasi axborot texnologiyalari va kommunikatsiyalarini rivojlantirish vazirligi muhammad al-xorazmiy nomidagi toshkent axborot texnologiyalari universiteti farg’ona filiali kompyuter injiniringi fakulteti

Google Spiders:

• 
  Googlebot - bu asosiy robot,
  
• 
  Googlebot News - yangiliklarni tekshiradi va indekslaydi,
  
• 
  Google Mobile - mobil qurilmalar uchun saytlarni indekslaydi,
  
• 
  Googlebot Images - rasmlarni qidiradi va indekslaydi,
  
• 
  Googlebot Video - videolarni indekslaydi,
  
• 
  Google AdsBot - ochilish sahifasining sifatini tekshiradi,
  
• 
  Google Mobile Adsense va Google Adsense - Google reklama tarmog'idagi saytlarni indekslaydi.
  

Boshqa qidiruv tizimlari ham ro'yxatdagilarga o'xshash bir nechta turdagi robotlardan foydalanadi.
Qidiruv robotlari bu saytlarni tekshiradigan dasturlar. Ular sizning blogingizdagi barcha xabarlar va sahifalarni ko'rib chiqadilar, ma'lumotlarni to'playdilar, so'ngra ular ishlaydigan qidiruv tizimining bazasiga o'tkazadilar.
Qidiruv robotlarining to‘liq ro‘yxatini bilish shart emas, eng muhimi, Google hozirda “panda” va “pingvin” deb nomlangan ikkita asosiy o‘rgimchakka ega ekanligini bilishdir. Ular past sifatli kontent va keraksiz havolalar bilan kurashadilar va siz ularning hujumlaridan qanday himoyalanishni bilishingiz kerak.
Google qidiruv roboti "panda" qidiruvda faqat yuqori sifatli materialni targ'ib qilish maqsadida yaratilgan. Past sifatli kontentga ega bo'lgan barcha saytlar qidiruv natijalarida pasaytirilgan.
Birinchi marta bu o'rgimchak 2011 yilda paydo bo'lgan. Uning paydo bo'lishidan oldin, har qanday saytni maqolalarda katta hajmdagi matnlarni nashr qilish va katta hajmdan foydalanish orqali targ'ib qilish mumkin edi. kalit so'zlar... Birgalikda bu ikki usul yuqori sifatli kontentni qidiruv natijalarining yuqori qismiga olib chiqmadi, ammo yaxshi saytlar qidiruv natijalarida tushib ketdi.
"Panda" barcha saytlarni tekshirib, darhol narsalarni tartibga soladi va hammani o'z joylariga qo'yadi. U past sifatli kontentga qarshi kurashayotgan bo'lsa-da, endi yuqori sifatli maqolalar bilan kichik saytlarni ham targ'ib qilish mumkin. Ilgari bunday saytlarni targ'ib qilish foydasiz bo'lsa-da, ular katta hajmdagi kontentga ega gigantlar bilan raqobatlasha olmadilar.
Google qidiruv roboti ushbu qidiruv tizimida abituriyentlar uchun faqat yuqori sifatli materiallarni taqdim etishga intiladi. Agar sizda ozgina ma'lumotga ega bo'lgan maqolalaringiz bo'lsa va ular tashqi ko'rinishida jozibali bo'lmasa, "panda" sizga etib bormasligi uchun ushbu matnlarni zudlik bilan qayta yozing.
Yuqori sifatli kontent ham katta, ham kichik bo'lishi mumkin, ammo agar o'rgimchak juda ko'p ma'lumotga ega bo'lgan uzun maqolani ko'rsa, u o'quvchiga ko'proq foyda keltiradi.
Keyin takrorlash yoki boshqacha qilib aytganda, plagiatni ta'kidlash kerak. Agar siz o'z blogingizda boshqa odamlarning maqolalarini qayta yozaman deb o'ylasangiz, darhol saytingizga chek qo'yishingiz mumkin. Nusxa ko'chirish filtr qo'yish bilan qattiq jazolanadi va plagiat tekshiriladi juda oson, men mavzu bo'yicha maqola yozdim matnlarning o'ziga xosligini qanday tekshirish mumkin.
E'tibor berish kerak bo'lgan keyingi narsa - bu kalit so'zlarning haddan tashqari yuklanishi. Kim faqat kalitlardan maqola yozadi va qidiruv natijalarida birinchi o'rinni egallaydi deb o'ylasa, juda adashadi. Menda sahifalarni tegishliligini tekshirish haqida maqola bor, uni o'qing.
Sizga "panda" ni jalb qiladigan yana bir narsa - axloqiy jihatdan eskirgan va saytga trafik keltirmaydigan eski maqolalar. Ular yangilanishi kerak. Google qidiruv roboti "pingvin" ham mavjud. Ushbu o'rgimchak veb-saytingizdagi spam va keraksiz havolalar bilan kurashadi. Shuningdek, u boshqa manbalardan sotib olingan havolalarni hisoblab chiqadi. Shuning uchun, ushbu qidiruv robotidan qo'rqmaslik uchun siz havolalarni sotib olish bilan shug'ullanmasligingiz kerak, balki odamlarning o'zlari sizga bog'lanishi uchun yuqori sifatli tarkibni nashr qilishingiz kerak.
Endi sayt qidiruv robotining ko'zi bilan mukammal ko'rinishi uchun nima qilish kerakligini aniqlaymiz:

• 
  Sifatli kontent yaratish uchun maqola yozishdan oldin tadqiqotingizni qiling. Keyin odamlar bu mavzuga haqiqatan ham qiziqishlarini tushunishingiz kerak.
  

• 
  Foydalanish aniq misollar va rasmlar, bu maqolani jonli va qiziqarli qiladi. O'qishni osonlashtirish uchun matnni kichik paragraflarga ajrating, masalan, gazetada hazillar yozilgan sahifani ochsangiz, qaysi birini birinchi bo'lib o'qiysiz? Tabiiyki, har bir kishi birinchi navbatda qisqa matnlarni o'qiydi, keyin uzunroq va oxirgi, lekin eng muhimi, uzun oyoq kiyimlarini o'qiydi.
  

• 
  Pandaning sevimli gapi eskirgan ma'lumotni o'z ichiga olgan maqolaning dolzarbligi emas. Yangilanishlarni kuzatib boring va matnlarni o'zgartiring.
  

• 
  Kalit so'zlarning zichligini kuzatib boring, men yuqorida yozgan bu zichlikni qanday aniqlash mumkin, men sizga aytgan xizmatda siz aniq kerakli miqdordagi kalitlarni olasiz.
  

• 
  Plagiat qilmang, hamma biladi, siz boshqa odamlarning narsalarini yoki matnlarini o'g'irlay olmaysiz - bu xuddi shu narsa. Siz filtr ostiga tushib, o'g'irlik uchun javobgar bo'lasiz.
  

• 
  Kamida ikki ming so'zdan iborat matnlarni yozing, keyin bunday maqola qidiruv robotlari ko'zlari bilan ma'lumotli ko'rinadi.
  

• 
  Blogingiz mavzusining yuqori qismida qoling. Agar siz Internetda pul ishlash bo'yicha blog yuritsangiz, pnevmatik qurollar haqida maqolalar chop etishingiz shart emas. Bu sizning resursingiz reytingini pasaytirishi mumkin.
  

• 
  Maqolalarni chiroyli tarzda tuzing, ularni paragraflarga bo'ling va rasmlarni qo'shing, bu o'qishni yoqimli va saytni tezda tark etishni xohlamasin.
  

• 
  Havolalar sotib olayotganda, ularni odamlar haqiqatda o'qiydigan eng qiziqarli va foydali maqolalarga aylantiring.
  

Xo'sh, endi siz qidiruv tizimi robotlari qanday ish qilishini bilasiz va ular bilan do'st bo'lishingiz mumkin. Va eng muhimi, Google qidiruv roboti va "panda" va "pingvin" siz tomonidan batafsil o'rganilgan.
U qidiruv tizimining ajralmas qismi bo'lib, qidiruv tizimining ma'lumotlar bazasiga ular haqidagi ma'lumotlarni kiritish uchun Internet sahifalari orqali qidirish uchun mo'ljallangan. Aslida, o'rgimchak oddiy brauzerga o'xshaydi. U sahifa mazmunini tahlil qiladi, uni o'zi tegishli bo'lgan qidiruv tizimining serverida qandaydir maxsus shaklda saqlaydi va keyingi sahifalarga havolalar orqali yuboriladi. Qidiruv tizimi egalari ko'pincha o'rgimchakning saytga kirish chuqurligini cheklaydi va maksimal hajmi skanerlangan matn, shuning uchun haddan tashqari katta saytlar qidiruv tizimi tomonidan to'liq indekslanmasligi mumkin. Oddiy o'rgimchaklardan tashqari, " o'rmonchilar"- indekslangan saytning mavjudligini aniqlash uchun "bosgan robotlar.
Sahifalarni skanerlash tartibi, tashriflar chastotasi, aylanishdan himoya qilish, shuningdek, muhim ma'lumotlarni ajratib ko'rsatish mezonlari ma'lumotlarni qidirish algoritmlari bilan belgilanadi. Ko'pgina hollarda, bir sahifadan ikkinchisiga o'tish birinchi va keyingi sahifalarda joylashgan havolalar orqali amalga oshiriladi.
Shuningdek, ko'plab qidiruv tizimlari foydalanuvchiga saytni indekslash navbatiga mustaqil ravishda qo'shish imkoniyatini beradi. Odatda, bu saytni indekslashni sezilarli darajada tezlashtiradi va tashqi havolalar saytga olib kelmasa, umuman olganda, bu uning mavjudligini ko'rsatishning yagona usuli bo'lib chiqadi. Saytni tez indekslashning yana bir usuli - saytga qidiruv xizmatlariga tegishli veb -tahlil tizimlarini qo'shish. Masalan, Google Analytics, Yandex.Metrica va Google, Yandex va Mail.Ru dan [e-mail] kabi. Siz robots.txt fayli yordamida saytingizni indekslashni cheklashingiz mumkin. Indekslashdan to'liq himoya boshqa mexanizmlar yordamida ta'minlanishi mumkin, masalan, sahifaga parol o'rnatish yoki tarkibga kirishdan oldin ro'yxatdan o'tish shaklini to'ldirishni talab qilish.