Google 26 жовтня оновила рекомендації щодо захисту сайтів від спаму. Компанія радить власникам платформ закривати від індексації сторінки, які люди створюють для обміну інформацією за посиланням, а також регулярно перевіряти підозрілу активність через Google Search Console.
Оновлення стосується сервісів, які дозволяють створювати спільні сторінки, генерувати контент за допомогою ШІ або публікувати інтерактивні інструменти. За словами Google, зловмисники можуть використовувати такі можливості для масового створення сторінок зі спамом, які порушують правила пошукової системи.
Google рекомендує визначати, чи призначена сторінка для відкритого пошуку, чи її мають переглядати лише люди з прямим посиланням. Якщо сторінка потрібна для спільної роботи, обміну матеріалами або використання певного інструмента, компанія радить за замовчуванням обмежувати її появу в результатах пошуку.
Для цього Google пропонує використовувати правило noindex через метатег robots або HTTP-заголовок X-Robots-Tag. Також компанія згадує можливість блокування сканування через файл robots.txt.
Також Google рекомендує перевіряти звіти про індексацію та ефективність пошуку. Особливу увагу варто приділяти різкому зростанню кількості проіндексованих сторінок, показів і пошукових запитів, які не відповідають тематиці платформи.
Власникам сервісів також радять відстежувати кількість нових публічних сторінок і налаштовувати сповіщення про нетипову активність. Зокрема, коли невелика група людей створює значну частину всіх сторінок, доступних для індексації.
Google пояснює, що оновила документацію, щоб допомогти платформам раніше виявляти спам і не допускати до пошукового індексу контент, який не призначений для відкритого пошуку.
Водночас Google уточнює у технічній документації, що robots.txt не гарантує виключення сторінки з пошукових результатів. Якщо на неї посилаються інші сайти, Google може показувати її адресу в пошуку. Щоб запобігти цьому, компанія рекомендує використовувати noindex і залишати сторінку доступною для сканування.
Оновлення рекомендацій саме по собі не означає запровадження нових санкцій. Google поки не повідомляла про додаткові заходи проти платформ, які поширюють такий контент.
Джерело: Search Engine Land