Download - классификация товаров егор азанов
Классификация товаровЯндекс.Маркета
АзановЕгорРуководительгруппыразработкиkrondix@yandex‐team.ru
www.rit2007.ru
Яндекс.Маркет
• 1500магазинов• 2.5миллионапредложений• 1300категорийтоваров
www.rit2007.ru
Все плохо
• КатегориимагазинавручнуюотображаютсянакатегорииМаркета
• Унекоторыхмагазиновстоитпоучитьсяправильнойклассификациитоваров
• АунекоторыхLCD‐мониторылежатвкатегории“Садовыестулья”
www.rit2007.ru
Цель
• Автоматическаяклассификациянаосноветекстатоварногопредложения
• Удобныйпроцессдляконтроляинастройкиполучившегося“черногоящика”
www.rit2007.ru
Проблемы
• Существующиеалгоритмыклассификациимедленноинекачественноработают,если
‐ категориймного‐ категориисильноразличаютсяпоразмеру‐ укатегорийнеплоскаяструктура
• Обучающаявыборканизкогокачества,многоошибокинеточностей
www.rit2007.ru
Классификация
www.rit2007.ru
Классификация
www.rit2007.ru
Классификация
?
?
?
www.rit2007.ru
Классификация
?
?
?
www.rit2007.ru
Классификация
www.rit2007.ru
Классификация
www.rit2007.ru
Классификация
www.rit2007.ru
Multiword Features
• Многиекатегориисостоятиз,практически,одногоитогоженабораслов,напримерсотовыетелефоныиаксессуарыкним
• Спасение:“длясотовых”,“длятелефонов”
• Вычислятьвсевозможныепарысловвовсехпредложенияхнеобязательно
www.rit2007.ru
Обучение
• Какулучшитькачествообучающейвыборки?
• Кластеризациясмежныхкатегорий
• Поискпредложенийвызвавшихошибку
www.rit2007.ru
Контроль
• Какисправлятьошибки?Какнаходитьихпричины?
• Длякаждогопредложенияможнонайтипохожиенанего
‐ изтекущегоиндекса⇒ошибки
‐ изобучающейвыборки⇒причины
www.rit2007.ru
Итого
• Предложенияклассифицируются• Качествообучающейвыборкиповышается• Качествоклассификацииповышается
www.rit2007.ru
Куда дальше
• “Правильное”деревокатегорий• Автоматическоевыявлениеродственныхсвязеймеждукатегориямиииспользованиеэтойинформации