SEO qoidalari qayta yozilmoqda: Cloudflare, OpenAI va Google bir vaqtda harakatga keldi

Qidiruv marketingi sohasida bir vaqtning o'zida bir nechta muhim o'zgarish ro'y bermoqda — ular saytlarni kimlar skanerlashi (crawl), sun'iy intellekt indeksi sahifalar haqida nimani saqlab qolishi va Google kampaniyalaringizni qanday taqqoslashi bilan bog'liq. Search Engine Journal'ning so'nggi umumlashtiruvchi sharhida ushbu o'zgarishlar batafsil yoritilgan.

15-sentyabrdan boshlab Cloudflare Google va Bing botlarini ham "qidiruv uchun indekslash hamda sun'iy intellektni o'qitish uchun ma'lumot yig'ish" toifasiga kiritadi. Sun'iy intellekt uchun o'qitish ma'lumotlarini bloklash sozlamasi o'rnatilgan istalgan sayt endi shu botlarni ham avtomatik bloklaydi — bunga eski "AI botlarni bloklash" tugmasi ham kiradi. Sayt egalari sentyabrgacha bu sozlamadan voz kechishlari mumkin; allaqachon bir nechta sayt egasi Googlebot bloklanganini payqagan, biroq buning aniq sababi hali tasdiqlanmagan.

Fransuz konsalting kompaniyasi Resoneo o'tkazgan tadqiqotga ko'ra, OpenAI bilan kontent bo'yicha shartnomasi bo'lmagan saytlar ham ChatGPT'ning o'z ichki qidiruv indeksida litsenziyalangan hamkorlar bilan bir xil tarzda namoyish etilgan. Boshqacha aytganda, kontent shartnomasi sahifangiz ChatGPT javoblarida ko'rinishi uchun shart emas — bepul hisob egalariga ko'rsatiladigan javoblarning aksariyati aynan shu ichki indeksdan olinadi, u esa har bir sahifadan faqat sarlavha va boshidan taxminan 200 ta belgini saqlaydi.

Google esa Google Analytics'da "Ask Advisor" nomli sun'iy intellekt agentini joriy qilmoqda — u kampaniya natijalaringizni sohangizdagi shunga o'xshash kompaniyalarning anonimlashtirilgan o'rtacha ko'rsatkichlari bilan solishtirib beradi. Analytics allaqachon saytingizni tarmoq va signallar asosida "tengdoshlar guruhi"ga joylashtiradi va bu guruhni o'zgartirish mumkin, biroq Google Ask Advisor aynan shu guruhdan foydalanadimi yoki alohida guruh yaratadimi — hali noma'lum.

Shu bilan birga, Google SerpApi'ga qarshi DMCA (mualliflik huquqini raqamli muhitda himoya qilish to'g'risidagi AQSh qonuni) asosidagi da'vosini kontent litsenziyalash shartnomalaridagi bandlar bilan to'ldirib, qayta taqdim etdi — bundan oldin federal sudya Google o'zining nusxa ko'chirishga qarshi tizimini mualliflik huquqi egalari roziligisiz joriy etganini isbotlay olmagani sababli ikkala da'voni ham rad etgan edi. Bu ish, aslida, Google qidiruv natijalarini kim va qanday miqyosda yig'ib olishi mumkinligini belgilab beradi — reyting kuzatuvchilari, SERP monitoring xizmatlari va sun'iy intellekt ko'rinuvchanligi vositalarining barchasi aynan shu ma'lumotlarga tayanadi.

Bu to'rt voqea bir-biriga bog'liq: Cloudflare endi qaysi botlar sahifalaringizga kira olishini nazorat qiladi, OpenAI sahifangizning qaysi qismi indeksda saqlanishini belgilaydi, sud esa Google natijalarini kim yig'ishi mumkinligini hal qiladi. Ilgari bularning barchasi robots.txt fayli yoki oddiy shartnoma orqali hal qilinardi — endi esa bu qoidalar qaytadan ko'rib chiqilmoqda.