Что такое близкие запросы, как их найти и использоватьПавел БраславскийЛия КареповаМаксим КоролевСветлана Шорина

ЧТО ТАКОЕ «БЛИЗКИЕ ЗАПРОСЫ»?

2

михаил булгаковмастер и маргарита мастер и маргарита фильм владимир бортко тарас бульба фильм

3

богдан ступка михаил боярский д'артаньянтри мушкетераалександр дюма

Подробнее1. Уточнение:

золотое кольцо золотое кольцо с бриллиантом 2. Снятие неоднозначности:

ягуар ягуар животное3. Расширение:

золотое кольцо ювелирные украшения4. Синоним:

японская вишня сакура4

Еще подробнее 5. Другой запрос на ту же тему:

мерседес ауди 6. Смена поисковой цели:

купить санки детский мир7. Перевод:

коралловый клуб coral club

5

Близкие, но «про другое»• Опечатки: курсовая робота – курсовая работа• Транслитерация: золото – zoloto• Раскладка: lbvf ,bkfy – дима билан• Реникса: otbeptka – отвертка

6

ХОРОШИЙ ЗАПРОС – ЭТО НЕПРОСТО

7

Назовите глагол из вопроса, помещенного на борту транспортного средства

подопечных Фатиха Терима на первенстве континента?

IX Кубок Яндекса по поиску (2008)

8

Работа мысли• Фатих Терим • сборная турции на борту самолета • сборная турции "на борту" самолета • сборная турции надпись "на борту" самолета • сборная турции надпись "на борту" автобуса • сборная турции надпись на автобусе • футбол "сборная турции" надпись на автобусе • чемпионат европы футбол "сборная турции" надпись на автобусе

9

Ответ

Вместит ли автобус всю страсть Турции?

10

ПОМОЧЬ ПОЛЬЗОВАТЕЛЮ

11

12

13

14

15

16

17

ГДЕ ИСКАТЬ, КАК ИЗВЛЕЧЬ?

18

Источники данных• Лог запросов• Текст ссылок • Корпус текстов

ford ford focus, ford fusion, ford mondeoкарта карта памяти, карта городамашина стиральная машина, швейная машина

19

Близость запросов

20

q2 q3 q4q1

слова/буквы сессии

клики

Требования1. Семантическая близость запросов2. Без ошибок, опечаток, обрезанных словосочетаний3. Без смысловых дублей (шарон стоун, шерон стоун) 4. Недопустимо – порно, мат, оскорбительная лексика5. Плохо: гео-зависимые запросы в чужом регионе,

неактуальные запросы (о прошедших событиях)

21

1. выделение сессий (по времени)

2. выделение пар (в.ч. транзитивно)

0. чистка лога (порно, Яндекс, «подсказки», язык запросов, опечатки)

запрос=<timeStamp, userId, queryText, ckicks>

22

23

3. нормализация запросов (стоп-слова, капитализация, лемматизация, сортировка слов + выбор лучшего обратного преобразования)

4. борьба со флешмобами и «событийными» ассоциациями

5. матрица частоты переходов «запрос-запрос» (пороги для пользователя, ограничение на абсолютную частоту)

24

6. weight(q1 q2)= f(freqq1, freqq2, freqq1q2)*f(freqq2q1)

7. ранжирование, отсечение по порогу

8. индекс: q q1, q2, q3… (оригинальные запросы)

Оценка• «оценка глазами»• «классы объектов»• кластеры запросов Яндекс.Директа • кликабельность

25

РЕЗУЛЬТАТ

26

27

Выбор пользователейдругой запрос на ту же тему

уточнение

расширение понятия

синоним

перевод

смена цели

снятие неоднозначности

28

Спрос/предложение

другой запрос на ту же тему

уточнение расширение понятия

синоним смена цели перевод снятие неоднозначнос

ти

0%

10%

20%

30%

40%

50%

60%

клики показы

29

Где еще можно использовать?• Реклама• Качество поиска

30

СПАСИБО ЗА ВНИМАНИЕ!

31

32

Павел Браславскийpb@yandex-team.ruЛия КареповаМаксим КоролевСветлана Шорина