Фильтры Яндекса, что угрожает вашему сайту? [Севальнев,...

SEO Практика [2014]

Фильтры Яндекса, что угрожает вашему сайту?

3 2014июля«Пиксель Плюс»

Сайт семинара: www.semkursy.ru

Запись на бесплатный семинар 10 июля 2014

• +7 (967) 219-78-82• seminar@semkursy.ru• www.semkursy.ru

По ссылке: www.pixelplus.ru/samostoyatelno/

План доклада4

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Этапы ранжирования, типы фильтров5

Постфильтры(после определения релевантности документа)

Предфильтры(на этапе попадания в базовый поиск)

Типы санкций: коммерческий сайт6

Ручные и автоматические Причины санкций

Бан: исключение из базы

Неучёт исходящих ссылок

Неучёт входящих ссылок

АГС: частичное исключение сайта из базы поисковой системы и/или обнуление показателя тИЦ

Ограничение в поиске: Adult, избыточная реклама

Пост-штрафы

Накрутка поведенческих факторов

Текстовое содержание

Ссылки

Реклама

Искусственные накрутки

Группы аффилированных сайтов

План доклада7

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Аффилированность: факторы8

Как избежать санкций (склейки сайтов в группу)?

1. Избегайте пересекающихся контактных данных.

2. Избегайте дублирования каталога, услуг и цен на продукцию (массового).

3. Структура каталога товаров (если интернет-магазин) должна быть уникальной.

4. Разносите сайты по хостингам и аккаунтам (Директ, Вебмастер).

5. Избегайте схожести доменных имён и названий компании.

6. Данные регистрации доменов?

7. HTML-вёрстка? CMS сайта?

8. Жалобы в Яндекс и «контрольные» звонки?

Аффилированность: проверка9

1.

2.

Аффилированность: проверка10

Последовательность действий

1. Проверяем позиции двух сайтов по всем запросам.

2. Если хотя бы по одному запросу оба сайта в ТОП-40 одновременно, то аффилированности нет.

3. Если подобных фраз нет, то берем запросы и проверяем исключением одного сайта из выдачи: анализируемый_поисковый_запрос ~~ site:pixelplus.ru

4. Смотрим как меняется позиция в выдаче у второго сайта.

Имеется старая база аффилиатовСтарая база по Яндексу: http://tools.promosite.ru/old/clones.php

Аффилированность = смерть?11

Трудности в выдаче у аффилированных сайтов

1. Аффилированность ≠ смерь сайта.

2. Всегда выдается только один сайт в выдаче по каждому заданному запросу (в видимой части выдачи, ТОП-50). Второй сайт скрывается (склеивается).

3. По разным запросам и в разных регионах, наиболее релевантными могут быть разные сайты.

4. Нельзя «забить» 2 и большее число мест в выдаче по запросу.

Всё остальное — без изменений!

Снятие аффилированности12

Автоматические санкции РучныеУстраняем все причины:

• Перепроверяем контакты• Телефоны в панели Вебмастера• Телефоны на сайте• Перекрестные ссылки• Хостинг• Общие аккаунты в Директе• Упоминания адреса компании с

одного сайта на другом сайте• Перенаправление трафика с

одного сайта на другой• Большое число общих внешних

ссылокЖдём. Снимается автоматом.

Де-факто:

• То же самое.

Но, можно не ждать, само не снимется!

Письма в техподдержку, сканы свидетельств о регистрации, договоров аренды…

План доклада13

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Текстовые фильтры14

«Переспам» (портяночный, -20)

Сведения:— внедрен с февраля 2010 года— официально не анонсировался

Проявление:— резкое проседание одного запроса— документ нормально ранжируется по другим запросам— сайт резко растет в выдаче при модификации запроса

Как бороться:— разбавка чистых вхождений— уменьшение объема текста— разбавление «сухого» текста: картинки— проверка входящих ссылок и увеличение числа безанкорных

Сведения:— внедрен с сентября 2011 года— официальный анонс в блоге на ya.ru

Проявление:— резкое проседание всего документа— документ теряет большую часть поискового трафика с Яндекса— документ плохо ранжируется даже по длинным запросам (4-5 слов)

Как бороться:— полная переписка (рерайт) текста— текст = польза для читателя— исправление ошибок (согласований)— удаление избыточных акцентов (<b>, <h1>-<h6> и др.)

«Переоптимизация»

Примеры пострадавших текстов10

Обнаружение фильтра «Переспам»16

Выполняем следующую последовательность1. Задаем исходный запрос в Яндекс, для примера: [строительство кирпичного дома]

2. Изучаем выдачу: 26 место по запросу (prime-group.ru)

Обнаружение фильтра «Переспам»17

Выполняем следующую последовательность3. Задаем в Яндекс модифицированный запрос: [строительство кирпичного дома] ⇒ [строительство дома кирпичного]

4. Ищем резкий рост сайта по модифицированному запросу (prime-group.ru) — на 10 пунктов и более

Обнаружение фильтра «Переспам»18

Данное поведение сайта

1. С большой долей вероятности свидетельствует о наложении запросозависимого текстового фильтра на документ.

2. Наблюдение за динамикой и анализ анкоров входящих ссылок — дает точный ответ на этот вопрос.

3. (!) Меняются и кликовые поведенческие факторы: это надо учитывать (сравнение относительных колебаний соседний сайтов по запросу).

4. (!) Меняется ряд текстовых факторов учитывающих порядок слов в документе.

Снятие фильтра «переспам»19

Действия по документу

1. Удаление 1 чистого вхождения.

2. Скрытие 20% текста в <noindex> (лучше удалять, так как <noindex> учитывает только Яндекс).

3. Снятие чистых вхождений и добавление безанкорных ссылок (сказывается медленно от 1 месяца).

Снятие портяночного фильтра20

Продвигаемый запрос [программа 1с]

Даты наложения фильтра

Даты снятия фильтра

Дожимаем сайт до ТОП-10!

Даты: с 03.07.2013 по 19.11.2013

Снятие переоптимизации21

В одну дату проседают сразу все запросы на страницу, проседание от ≈ 10 до ≈ 25 позиций

Снятие переоптимизации22

Действия по документу

1. Полное переформатирование контента.

2. Уменьшение текста на 20%.

3. Вычитка текста:• Исправление окончаний

и согласований• удаление избыточных

вхождений и тегов

Группа запросов

План доклада23

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Неуникальный контент24

Важно учитывать

1. Процент уникальных текстов на сайте (уникальных шинглов) относительно общего количества текстов.

2. Кто первоисточник текста для поисковой системы.

3. Контент ≠ текст!

Даже на карточках товара в интернет-магазине

• Можно получить/написать уникальные отзывы и комментарии.

• Уникальный обзор модели.

Дублирование контента на сайте25

Оптимально

1. Анонсы статей/новостей и начало текста на детальной странице — разные материалы.

2. Отсутствие в коде больших (более 150 символов) дублирующийся фрагментов текста.

3. Отсутствие дублирования текста на документах постраничной навигации.

4. Отсутствие дублирования текста на страницах сортировок, фильтров, тегах, страницах поиска.

Примеры появления дублирования26

Стандартная ситуация: дублирование текста (наверху и внизу каталога) на страницах навигации

Поиск дублей контента на сайте27

Найдено более 1000 документов на сайте с данным фрагментом текста. Это только в индексе поисковой системы.

Решение проблемы28

1. Атрибут rel="canonical" тега <link>

2. Meta-тег <meta name="robots" content="noindex, follow"/>

3. Ограничения к индексации через файл robots.txt

Общие решения: от лучшего к простому

Важно понимать29

1. Почему меню ≠ дублирование контента?

2. Дублирование внутри сайта, это тоже дублирование контента.

3. При ранжировании карточек товара, такой фактор как уникальность текста, может не играть сильной роли (хотя в Google играет), но общая уникальность информации на сайте будет важна для нормального ранжирования.

4. Уникальность текстов один из факторов для отдела антиспама.

5. Могут играть роль мономы (комбинации факторов), скажем (объем_текста)/(время_пользователя_на_странице).

Перерыв на 5-7 минут30

Перерыв

У нас впереди много интересного!

Для самостоятельного изучения: www.pixelplus.ru/samostoyatelno/

План доклада31

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Одинаковые сниппеты: проверка32

Суть: проверка позиций сайта по общему запросу и с параметром &rd=0 и сравнение результатов

Снятие фильтра на сниппеты33

Для снятия фильтра на одинаковые сниппеты

1. Полное переписывание фрагментов текста из которых берется текст для сниппета.

2. Изменение шаблона Title для карточек товара и разделов.

3. Шаблонный meta-description (иногда используется в качестве сниппета, не спамим и не дублируем Title!).

4. Текст для сниппета: выше по странице. Короткие и ёмкие предложения. Нежелательные фрагменты можно заключить в тег <!-- noindex --> (не злоупотребляем).

План доклада34

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

АГС-4035

Факты об АГС-40

1. Впервые замечен: 1 ноября 2013.

2. Официально анонсирован: 6 ноября 2013. В блоге компании «Яндекс»: http://webmaster.ya.ru/16272

3. Было несколько «волн» наложения санкций.

4. Регулярное обновление базы и выход ряда сайтов из-под санкций и попадание под санкций новых.

5. Ссылочными биржами даны различные оценки: от 1% до 20% от всей ссылочной базы.

АГС-40: исследование36

Данные на входе (полная база биржи ссылок)

1. База: 17 744 сайта, при проверке «живых»: 16 442 сайта

2. В каких TLD?

Попали под АГС: всего37

Итого попали под АГС-40Типичная ситуация

Сейчас: обнуляется тИЦ (!) и сайт может оставаться в индексе Яндекса

Сайты под АГС: YACA38

• Среди сайтов под АГС в YACA — 10% • Среди сайтов без АГС в YACA — 25%

YACA снижает вероятность в 2.5 раза

Сайты под АГС: DMOZ39

• Среди сайтов под АГС в DMOZ — 3,5% • Среди сайтов без АГС в DMOZ — 19%

DMOZ снижает вероятность в 5.4 раз

Сайты под АГС: YACA + DMOZ40

• Среди сайтов под АГС в YACA+DMOZ — менее 0,25% • Среди сайтов без АГС в YACA+DMOZ — 10%

YACA+DMOZ снижают вероятность в 40 раз!

Сайты под АГС: торговали ссылками41

• Явной зависимости от торговли временными / арендными ссылками — НЕТ!

Сайты под АГС: Яндекс.Директ42

Влияние блоков Яндекс.Директ на АГС:• Наличие Яндекс.Директ — отличный знак!• Попали под АГС порядка 4% сайтов с Яндекс.Директ.

Сайты под АГС: возраст домена43

Есть ли влияние возраста домена на АГС?• Всего исследовалось 8 299 сайта. Доли сайтов разного

возраста под АГС

Сайты под АГС: тИЦ44

Есть ли влияние показатель тИЦ на АГС?• Всего исследовалось 16 402 сайта.• Зависимость есть, причём почти линейная!

Сайты под АГС: посещаемость45

Есть ли влияние посещаемости сайта на АГС?• Всего исследовалось 6 986 сайтов.• Резкое падение доли сайтов под АГС после 150

посетителей и после 300 посетителей в сутки.

Физический смысл факторов46

1. Наличие трафика: говорит о пользе сайта, интересе к нему пользователей (желателен непоисковый трафик).

2. YACA + DMOZ: ручная модерация сайта, возможно исключение сайта из каталогов после перепроверки.

3. Яндекс.Директ: ручная проверка + наличие трафика (примерно от 300 пользователей в сутки).

4. тИЦ: при расчете Яндекс фильтрует входящие ссылки, наличие естественных ссылок также свидетельствует об интересе пользователей к сайту.

Полная версия исследования по ссылке: slideshare.net/kakbactam/2014-fuc40

Объясняем зависимость от SEO-показателей

Снятие фильтра АГС-4047

Замечены, также следующие негативно сказывающие факторы на коммерческом сайте:

1. Отсутствие контактов и реквизитов компании.

2. Наличие большого числа бессмысленных («переоптимизированных») или неуникальных статей.

3. Плохое оформление контента (сканы, копипаст и т.д.).

4. Отсутствие обновления сайта длительное время.

5. Плохое окружение (IP-адрес хостинга).

Действия для снятия санкций48

1. Контакты + время работы + схема проезда + реквизиты.

2. Удаление статей + написание 2-3 полезных материалов.

3. Полная техническая оптимизация.

4. Смена хостинга (фактор: цена).

5. Привлечение непоискового трафика на сайт (около 150 человек в сутки).

6. «Красивое» оформление материалов, орфография.

7. Письмо с техподдержку после индексации.

Срок вывода: 1,5 месяца работы.

План доклада49

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Поиск дублей50

Два основных инструмента оптимизатора

1. Полное ручное сканирование сайта: PageWeight2. Панель Вебмастера Google

Поиск дублей: Google Webmaster51

Ошибки оптимизации

1. Дублирование Title2. Дублирование meta-description

Данные страницы

1. Являются потенциальными полными дублями (не только Title, но и текст).

2. Не привлекают полноценный поисковый трафик.

Поиск дублей: PageWeight52

После сканирования сайта1. Выгружаем данные в Excel.2. Подсвечиваем одинаковые теги Title в файле.

План доклада53

1. Введение: типы фильтров, автоматические и ручные санкции.

2. Определение групп аффилированных сайтов и снятие санкций.

3. Текстовые фильтры: переспам и переоптимизация. Причины, диагностика и снятие пост-штрафов.

4. Неуникальный и дублирующийся контент. Основные правила работы с текстом на сайте.

5. Фильтр на одинаковые сниппеты: обнаружение и действия для снятия фильтра для карточек товаров.

6. АГС: корреляция с SEO-метриками и кейс снятия санкций.

7. Находим и устраняем дубли документов на сайте.

8. Работа с карточками товара в интернет-магазине.

Работа с карточками товара54

Чтобы получились «правильные» карточки

1. Уникальный контент в широком смысле слова.

2. User-generated content (UGC): отзывы, мнения (сказываются и на конверсии)!

3. Текст «про то».

4. Шаблонная оптимизация: Title, description, мини-описания.

5. Контроль фильтра на сниппеты.

6. Кликабельный сниппет на выдаче.

7. ЧПУ.

Идеи для текстов55

Хорошие идеи

1. Писать про то, о чём пользователи оставляют отзывы — задание проблематики копирайтеру.

2. Больше деталей:

• технические характеристики• состав

3. Уникальность в контенте!

Пример Title на карточке56

Небольшой бонус для активных57

1. Посещение раздела http://www.pixelplus.ru/samostoyatelno/

2. «Лайк» в любой социальной сети на выбор.

3. Скидываем информацию на почту: seo@pixelplus.ru

4. Получаем ответным письмом: полную памятку по фильтрам на ОДНОМ слайде.

Полезные ссылки58

1. http://www.pixelplus.ru/samostoyatelno/: экспертная помощь по SEO для самостоятельного продвижения сайто.

2. http://www.pixelplus.ru/samostoyatelno/stati/tekstovaya-optimizatsiya/tekstovie-filtry-v-yandex.html: текстовые фильтры Яндекса.

3. http://www.slideshare.net/kakbactam/: презентации по SEO.

4. http://www.youtube.com/user/pixelplusru/videos: бесплатные SEO-видео на YouTube.

5. http://www.semkursy.ru/: бесплатный семинар по интернет-маркетингу в Москве (10 июля 2014 года). Регистрация обязательна для участия!

Вопросы по докладу59

Вопросы?

По ссылке: www.pixelplus.ru/samostoyatelno/

SEO Практика [2014]

Фильтры Яндекса, что угрожает вашему сайту?

3 2014июля«Пиксель Плюс»