Поисковые антиспам

Поисковый антиспамСтанислав Ставский

Поисковый антиспамСтанислав Ставский

www.imba.ru2012 г.

Просто релевантных результатов не достаточно

Отсутствие не релевантных результатов

Отсутствие порно по многозначным запросам

Приоритет более удобным сайтам

Задачи поиска – счастье пользователя

1

2

3

Если бы не было антиспама…

По некоммерческим запросам в выдаче были бы дорвеи

По коммерческим запросам те кто больше заплатил за SEO или сильнее заспамил вебмастеров с предложениями об обмене ссылками

1

2

Сложно ли бороться со спамом?

Пример:

Робот (скачивание документов)

База (хранилище)

Факторы (присваиваются каждому документу или хосту)

Запрос пользователя

Жизненый цикл документа в поиске

Формула ранжирования, сортировка по релевантности

1

2

3

4

5

Твики на этапе отображения результатов поиска6

Ответ на запрос пользователя7

Индексация

Скрытый индекс

Ранжирование

Фильтры

Борьба с поисковым спамом. Этапы.1

2

3

4

Особо провинившиеся домены

Запрет на индексацию

1

2

Технический спам

Документ не интересен пользователям

Скрытый индекс

1

2

Документ не является ценным для поиска

Мусорный контент23

Другие факторы

Ранжирование – отрицательный вес факторов

1

2

Ссылки низкого качества

Минус к релевантности

Пост-фильтры

1

2

Минус к позициям

Махровый (абсолютно черные техники)

Серая зона

Виртуальный

Какой бывает спам

1

2

3

Задача - показать роботу не то что пользователю, привлечь трафик

- Клоакинг

- Редирект

Махровый спам

- Скрытый текст: - скрытый слой - несколько экранов прокрутки вниз

Задача – прямая монетизация

- MFA

- Ссылки

Серая зона

- Партнерки

Задача – повысить рейтинг

- Накрутка посещаемости

- Накрутка ПФ

Виртуальный спам

Отдельный документ или группа документов

Отдельный сайт

Группа сайтов - кластер

Какой бывает спам

1

2

3

Переоптимизированный контент

Мусорный контент

Отдельный документ или группа документов1

2

- Keyword stuffing - Список поисковых запросов - Спам в урлах и названии доменов

- Немодерируемый каталог - Результаты поиска - Форум со спамом

Сателлит – создан с целью:

Аффилированный сайт

Отдельный сайт

1

2

- Продажа рекламы - Продажа ссылок - Партнерская программа

Ссылочная поддержка основного сайта

Массовая продажа рекламы или ссылок

Группа сайтов

1

2

Взломаные сайты – привлечение трафика засчет авторитетности взломанного домена

3

Списки запросов

Ссылочный обмен

Спам на коммерческих сайтах

1

2

Переоптимизация3

Накрутка цитируемости4

Накрутка ПФ5

Ты последний

Минус в релевантность или позиции

Санкции

1

2

Обнуление входящих ссылок3

Обнуление исходящих ссылок (в том числе внутренних)4

Ограничение на количество проиндексированных страниц5

Прикинуться пользователем

Кластеризация (netcomber.com)

Методика выявления спама

1

2

Машинное обучение (АГС)3

Лингвистический анализ4

Анализ структуры сайта5

www.imba.ru2012 г.

Спасибо за внимание,ждем вас снова!

Спасибо за внимание,ждем вас снова!