Обережно, рефспам . Песимізація за накрутку ПФ, якої не було

Яндекс давно бореться з накруткою ПФ. Спочатку сайти, які " бавилися " імітацією переходів з результатів пошуку , знижувалися у видачі вручну .

Зараз антіфрод - фільтр автоматизований і бореться не тільки з накруткою ПФ з результатів видачі, але і з так званим " посиленням посилального " ??- кліками по купленим посиланнях з метою посилити передачу посилального ваги. Чергова хвиля пессимізації за накрутку ПФ пройшла 1 грудня , і безліч сайтів, що експериментували з " посиленням " , втратили трафік з Яндекса. Але як і будь автоматичний алгоритм , антіфрод - фільтр далеко не ідеальний і має свій відсоток похибки. Це означає, що навіть якщо ви не накручували поведінкові , ваш сайт може бути знижений антіфродом помилково . Наприклад, за рефспам .

Що таке рефспам

Рефспам - це автоматичне звернення до сайту з підстановкою потрібного рефферера .Таким чином , у записі в лог- файлах сервера з'являється запис про відвідувача , якого на сайті ніколи не було. А в даних Я.Метрікі або GA з'являються перегляди сторінок з доменів , які не мають відношення до сайту , або заходження з " лівих" сайтів зі 100% відмовами . Робиться це з метою безкоштовної реклами . Якщо у вашій статистиці раптом з'явиться нове джерело регулярних переходів , то рано чи пізно ви зайдете на цей сайт, щоб подивитися, що він із себе представляє і знайти там посилання на себе. Природно, ніякого посилання ви там не знайдете. Такі " псевдопосетіелі " можуть сильно спотворювати дані про поведінкових характеристиках сайтах і привертати увагу антіфрод - фільтра.

Офіційна позиція Яндекса

Ми та інші вебмастера неодноразово писали в техпідтримку Яндекса про цю проблему. Тема рефспама неодноразово піднімалася на серч ( раз , два , три ) . "Індивідуальний " відповідь Платона на наш запит: "Якщо Ваш сайт розвивається в інтересах користувачів , не використовуючи будь-яких технік, спрямованих на обман пошукових систем, то Вам не про що хвилюватися, так як при розробці наших алгоритмів ми , звичайно ж, враховували можливість зловмисників вплинути на позиції того чи іншого сайту і мінімізували її . " Іншими словами, згідно позиції Яндекса, накрутка ПФ може стати каталізатором санкцій, але не може бути їх єдиною причиною .Якщо з внутрішньою оптимізацією вашого сайту все гаразд і інших приводів для накладення санкцій немає , то накрутки ПФ можна не боятися . Ті не менше я неодноразово переконувалася , що практично у будь-якого сайту можна знайти ознаки внутрішнього спаму, було б бажання. Так що привертати увагу антіфрод - алгоритму все- таки не хотілося б. Також десь зустрічала згадка, що Яндекс нібито працює над тим, щоб не враховувати такі переходи в статистиці. Але у відповідях на наші запити це, на жаль , не згадувалося. UPD:Вчора отримали нову відповідь : "Наші фахівці вже займаються вирішенням даного питання . У сформованій ситуації ми можемо Вам порадити налаштувати фільтри . Налаштування фільтру необхідно задати наступним чином: "Залишити тільки трафік " " URL сторінки " " сайт і дзеркала" . Після налаштування даного фільтра подібні переходи більш не потраплятимуть в статистику Вашого лічильника. " Офіційна позиція Яндекса з приводу рефспама викладена тут .

Діагностика рефспама

Ліві домени в статистиці Зайдіть в Я.Метріку , виберіть період не менше місяця , подивіться статистику по популярних сторінкам - там мають бути лише сторінки вашого домену , на якому встановлений лічильник ( або декількох доменів, якщо ви використовуєте для них один лічильник ) . Якщо ж там є ліві сторінки, які не мають ніякого відношення до ваших сайтів , це рефспам : Такі ж сторінки іноді можна випадково помітити і при перегляді даних Вебвізор : Переходи з лівих сайтів Подивіться в Я.Метріке статистику по переходах з сайтів за період один місяць або більше . Зверніть особливу увагу на джерела, відсоток відмов з яких значно перевищує ваш середньостатистичний показник - це може бути рефспам : Ось далеко неповний список сайтів, безумовно розсилають рефспам :
iskalko.ru
ilovevitaly.com + піддомени
ilovevitaly.ru + піддомени
o-o-8-o-o.ru
o-o-6-o-o.ru
buttons-for-website.com
semalt.semalt.com
cenoval.ru
priceg.com
cenokos.ru Майже у половини наших пацієнтів серед джерел переходів був виявлений хоча б один з цих сайтів .

Як боротися з рефспамом

Фільтри в Я.Метріке 1 . Налаштування фільтру по домену
Налаштувати фільтри можна на сторінці редагування лічильника. Докладніше про те, як це зробити, описано тут : На жаль, метод виключає тільки підмішування чужий статистики в лічильник (популярні сторінки і Вебвізор ), але не сайти- джерела . 2 . Жорстка фільтрація ботів На тій же сторінці можна включити жорстку фільтрацію ботів ( за замовчуванням стоїть середня) :
Цей спосіб теж має похибку, оскільки не всі рефспамери ідентифікуються Яндексом як боти . Нам , наприклад, цей спосіб не дуже допоміг. 2 . Відсікання ботів за допомогою .htaccess Виключення доступу по реффереру :
RewriteEngine on
RewriteCond % { HTTP_REFERER } cenoval .ru [ NC, OR ]
RewriteCond % { HTTP_REFERER } cenokos .ru [ NC, OR ]
RewriteCond % { HTTP_REFERER } ilovevitaly .ru
RewriteRule ^ . * $ - [ F] Заборона доступу за IP :
Order allow , deny
Allow from all
Deny from 78.110.60.230
Deny from 217.23 . На жаль , не існує універсального методу, який би захистив сайт від усіх рефспамеров відразу. Якщо сьогодні ви позбавитеся від одного спамера , завтра замість нього може з'явитися ще два нових. Тому раджу регулярно перевіряти статистику і оновлювати свій чорний список . Якщо ваш сайт вже пессімізірован за накрутку ПФ ( тобто у відповіді Платона згадується емуляція дій користувачів пошукової системи ), і ви виявили у статистиці рефспам , обов'язково напишіть про це в Яндекс. Ймовірність зняття санкцій в такому випадку не велика, але все таки є.

Опубліковано: 03/12/14 @ 12:09
Розділ Безпека

Рекомендуємо:

29 листопада, Київ - Курс «IT рекрутинг »
Як девелоперу підвищити свою зарплату
5 причин працювати в стартапі
Бесіда з Катериною Чуксин , Head of Social Media Marketing & PR Department в ZennaApps
Як ми відкривали школу програмування. Хроніка , частина 3