(발제) no clicks, no problem: using cursor movements to understand and improve search +chi2011...

21
# " # %"#" &$# $ "#$ !"& " % 이남민 ' %$%

Upload: snuuxlab

Post on 28-Jan-2015

104 views

Category:

Technology


0 download

DESCRIPTION

 

TRANSCRIPT

Page 1: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

이남민

Page 2: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search

CHI2011

Jeff Huang, Ryen W.White, Susan Dumais

ę3 

������������

Page 3: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

�à Ɔłĕ ƕÁØūCR ğíÅ ík ¿naę �à öŁ� interactƌCĿC �ĉ ĺĆƏ.

ħŹĦĚ ù�aĔ,- ď �à öŁaĔ ħŹĦē{ Ŧ�0 Ū�W ��a� ·ÆƒĂ� ę� �ē{C ƍ�� ğH.- Õ ïĕ Ð ğC Ū�aĕ �âÅ śīƌC ¦¬Ĕ,Ū�ē{ ęíĿĿ äC ƔUaę0, Ķ�ĦĚ B/aĕ ŠŔƌCRC ÚžƓH. - �� ù�C gaze tracking�Ĕ ¦¬aĕ ¿ĈƓĿ� small scaleõÅ� đĈƍ Ě¿ęźaĕ ïí8H.- šÅĘ Čŀĝę AĘ ØÇ� +Ĕ ��� ²ĚHC �ĕ ¥Ʀ(S ƓH.

ę >�õÅC, - ík ũ ÖţěõÅ Ď�ē{ ïíł Ð ğC mouse movement� ƔUĘ richer patternĕ ęƒƌCR ßě Ð ğCĿ �xƍH.

- ď �à ƔUõÅ cursor activities� ęƒƌCR ŃĺƓH.

INTRODUCTION

������������

Page 4: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

Ū� Ręų, šÅ Ręų� �ÃĠĘ ĘS� _s0 ƍH.

šÅ Ręų{ Ū�Ręų� ²ā:1) Ū� ꮟ� źoŬ ƌC�Ĕ, Ū�ę ěí0Ŀ äĔ�/ěí1 �ē{ ŽIƒêƌĿ�, šÅ ꮟC O Ƈ¶ƍ ·Æ��� Ĭ�ƍH.

2) ‘'īĦĚ ĺI’: �ıƎ �ƍ ��� �ģ Ĭ�Ɠĕ g Ū�ę ƋĆƌĿ äĕ Ð ğē�{, Ū�Ę ¶ıę ƑÁ �ÃĘ Úž{ ƒÆVíÅC ãWH. #s�{ šÅ Ręų� ¿Ĉƌ�, ĴĔ ƃ(/Łń ƃ(õ Nƒ �±Ǝ Ð ğ ƍH.

#oÅ %ƍ!

1) �Ã��ƀęĿ/�Ã��ƀęĿ� âF �aõÅ íBīSĘ gaze� cursor behavior��ğC�?2) cursor behavior� �ÃöŁ ¿ĈĠaĘ �� Ƃ� ħqĕ ík ²÷Ķ0? #�� ę�ę ík (IJĘ �Ã�� Ū�, eye-tracking ù�a� ��ğC�?3) ũ ÖţěĘ šÅRęų� ęĈƍ đĈƍ (Dĕ ĬãƎ Ð ğĕ,?

-> ę ł�aĔ ĉ�� ũ !�õÅĘ šÅ źoŬĘ đĈÉõ Nƒ åâ6CR SČę X �ę�, �à ØÖŸ cĠĚ, �à �ƖĘ ƕÁõ đĈƎ �ęH.

INTRODUCTION

������������

Page 5: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

1) cursor movement, clicks, gaze..- cursor travel timeĔ web pageĘ �zÉĕ ŘīƎ Ð ğC 'īĦĚ indicator- pageõÅ Ū�ę �ę ěí4H� ƒÅ ¢_Ø �zÉğH� Ǝ Ð óH.- web pageĘ íi ûøę ƥ�{ċĿ å ƒķH.- mouse movementĘ ºĒę ƀęĿĘ ŧ�żõ Nƍ indicator� X Ð ğH.

2) �Ã- informational / navigational queries ¿ęĘ šÅ ęU ��Ę ʼnę� ¥Ɨ7- Ū�ĕ ¿ĈƌC �²H šÅĘ �¹�ź� ęĈƒÅ Ŧ� ŭĞĕ �±ƒ6C O īƛƌH.- cursor movement, hovers, scrollingę �à ĘSĀ �� ƀęĿõ Nƍ ƥ�� ²÷ķH.- gaze trackingĕ ęĈ, ďƀęĿõÅĘ salient regionĕ üśƌCR ¿Ĉ

3) relationship between eye gaze and cursor positions- gaze / cursor �Ę ��� �ĉ ŅçH. - cursor behaviorĘ žŴĕ åâ8H.

RELATED WORK

������������

Page 6: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

4) ŗ$ ù�- �à ƝUõ ğíÅ gazeĀ cursorĘ ��õ Ńĺ: �ĉ +Ĕ ��� ğĖĕ åâ7.- šÅĀ gazeĘ ��C xřõÅ O )�, ě¢Ħē{ �à ��õ šÅ� ÿm� ğĕ g O ŅH.- mouse behaviorĘ < �Ŀ 1) šÅ� Ĝ(Ę S�{ ¿ĈƎg, (�{, Ê{)2) Ĥ�ğC ��� �Ũƌ( Đƒ šÅ� à g3) Ĝ(Đƒ šÅ� ¦ŜƎ g- gazeĀ cursor� �ƌ ��ğĖ 77% īƛS{.

ĉ� >�õÅC ęt ęħ ù�aĕ ƛģƍH.1) cursor-gaze relationship ·ÆĘ �ĉ, ęħ ù�a²H O �Ĕ �à task� ƃƏƓ�, �Ã��ƀęĿĀ �Ã�� ęơ ƀęĿõ NƒÅS º�ƓH.2) ĠùÖsċ ÁƞõÅ ÚĬ ¿ĈĠĘ ƔUĕ ·ÆƎ Ð ğ ƌC šÅRęų� ŠŔƌ(Đƍ scalableƍ Ī$¦¬ĕ �¤Ɠ�, ę lƍ (IJ ù�õ ºƒ ƣá ũ !�{ ŁƔVôH.3) Z�Ę ţęÖ Öųc� Źƒ, Z�Ę �à �z �ĬõÅ, šÅ Ręų� ík Ū� Ręų� ²āƌCĿ ²÷ķH.

(IJĘ ��aĕ ij O ũ ù�� Źƒ ƛĚƍH.

RELATED WORK

������������

Page 7: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

Z� ¿ęĘ ��õ ğíÅ (IJ ù�� ³Ĭƌ� ƛģƓē�, (IJ ù�a²H O �Ĕ �à ŰÖŨĀ ÚƖĠ� ƃƏƌ�, šÅĀ ęĻĘ ��� SERP / non-SERPƀęĿõÅ śīƍH.

DATATobii x50 âęźoš ¿Ĉ, šÅĀ ØÇĘ ĵƄ ÐŃ: 38�(F 21, M 17, 26~60Ê, ŀò� §� Hì)ę �Ãĕ ÐƔƌ� ïôH.- � Ō�ĠC �Ĕ �à öŁõÅ, �Ĕ vęâčĘ �à �� ƀęĿ{ 32�Ę �à ŭÖŨ ÐƔ- ŰÖŨĘ ¢Ĕ <º ęÌ:(Żīƍ ďƀęĿ� Ŏâê� ƌC) , ¢Ĕ informational(ī² Ġœ� Ŏâê� ƌC)- ØÇ� šÅĘ ĐŜC �Z vŤe VôH.- 1210�Ę �à ŰÖŨ ÐƔ, 1336647�Ę ØÇ ĐŜ, 87227�Ę šÅ ĐŜ ïĖ.

- ØÇĘ ĐŜC 20ms�H (|Vô�, šÅC 100ms�H (|.- šÅĀ ØÇ ę®źC ƑÁ Uěƍ ŭĝÖŲƈ� ňĿ äç( g�õ ØÇĘ ĐŜC �` šÅ ĐŜõ Nƍ �ē{ ²īVôH.- ²�Ĕ �ģ �,ċ ØÇĵƄ, šÅ ĐŜĘ ħ ơ ĵƄõ Ęƒ �ĺW ØÇxĀ y ĵƄ� �ÀƒÅ ÐƔVôH.(ü�aí, ²īW ØÇĘ xĵƄC âoĀ �ę �ÀWH. : ²�¬ ęĈƒÅ üś.=ęĻ� ĸę( Đƒ, šÅ ĐŜC ØÇ ĐŜ ¿ęõ ěí2 g� ŠŔƓH.(max 100msʼnę)

STUDY 1: GAZE-CURSOR RELATIONSHIP

������������

Page 8: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

FINDINGSšÅĀ ØÇĘ �� / ꮟ »S, �à �� ƀęĿ/ �Ã�� ęơ ¦�ƍ ƀęĿ

- šÅĀ ØÇĘ ĐŜC �Ę º×ƍ ìÁĕ ²ĚH.(0õ �,Č)- šÅC ØÇĘ ĐŜĘ ¡{ âo ğĕ �ĉ� �H.- xĀ y�Ę ʼnę� H��, ʼnęC xõÅ O Ũ 0ŭ0CR, (·ƃS) : ��� � O �H.- šÅ� ØÇĘ ý�ņę0 ąņõ ZCR, âo{ ƁŔĮğC #aę Ĝ�ğC ŶÖź� �� ƌC�ĕ ¦Ŀƌ( ĐƏęH.- ÖŨ�Ĕ ²Ź ;�, šÅ� ęUƎ Ð ğC O ÐƂĦĚ ��ę O �ę Ĭ�WH.

-> ¿ĈĠĘ �Ûõ Nƒ µ Ð ğC O ĴĔ ¦¬ę�,�Ã�� ƀęĿõÅ šÅĘ ƔUĕ �Eų�ƌC�Ĕ íi ��0 (Dõ ¿ĈĠ� �Ûĕ ²ęCĿ,# îĬĚĿ å ƍH.

STUDY 1: GAZE-CURSOR RELATIONSHIP

������������

Page 9: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

¼ �à öŁĘ �Ã��ƀęĿõ cursor tracker� ÈŜƓ� �ęŨ{Îƈź 6¶õÅ ÚƖ. ũ !�õÅĘ šÅ źoŬ ØÖŸĔ �ĉ Ù�à �çCR: šÅ ŠŔ ÖŨ�ź{ Ěƍ ��ƀęĿ {_ Ø� dvęS ƒ�ƒê Ɠ�,�ĉ ũ Ręų� Ď�ē{ vŤ_ƒê ƌC �ĬS ğôH.

METHOD- ęħĘ šÅ źoŬ ù�õÅC, Żī Ěų«ĕ Ķ� � Ø��H {*ƓĿ�, ęt ũ !�õÅC ñŒ1 Ręų �Ɯę ěí0�{ �Ŀ äH.Nãē{Þ, íi ƔUę ěí2 g� ꮟ� vŤ_ƌC ¦¬ę ğH. ƌĿ� ÛĿí ƍ ªĘ �ĉÖ movement ꮟ� ñŒ �Ĕ ìĘ l H� �ĉÖ movement ꮟaĕ ¤ÄØū( g�õ �Ĭ� ğH.

#oÅ Â{ċ ¦¬ĕ ōãƓH.: �ĉÖ movement� ĿùW ŀơĘ šÅ ĐŜ� (|ƌC ¦¬ęH.ÚƖĕ Źƒ 40msĘ dvę ęơ šÅ ĐŜ� (|ƌC �ę, RęųĘ ì� (|W ę®źĘ ī�Ə [H� �ıØūC Ɛ�ĦĚ ÐŜmC ¤�ƓH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 10: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

ę ¦¬ē{ ÐŃW ñŒ1 ìĘ RęųC ĉ�{ƌ÷% ¿ĈĠaĔ �Ã��ƀęĿõÅ šÅ� ík ¿Ĉƌ� ğCĿõ Nƍ Hìƍ ś�ĕ İ¿Ǝ Ð ğ ƓH.- ę �Ħē{ ĉ�C ƌ0Ę Ŧ�Ā ęĀ �zW �` Ū�� šÅ Čŀĝē{ �ÉW Ŧ� v¯Ę Ręų� ¿ĈƓH.

- RęųC MicrosoftĘ ŀĎę ÁòĦĚ ď �à öŁē{ �Ãƍ �a ĺ �ġĐ Ƅ´õÅ řĦW �ęH. (2010 5/12 ~ 2010 6/6,Ŀ)- 7500429 šÅ ꮟ� 366473 Ŧ�a{¶ų, 21936�Ę ĺ³VĿ äĔ ťūa{¶ų �aíŁ : ÚĬ đĥC ę�²H ij O ġ�H. ÷s�Ę ťū� ƍ ¿ĈĠõ ÏƎ Ð ğ( g�õ.

- º| ę İŀĘ �ÉĎaę íi ś�õÅC ě¢ĦĚ ď �ÃĠaĘ NƄm� µ Ð óHC å� ğĿ�(9� (ÒĦęm`Ŀ)ĉ�C #aĘ ÁƙġĈ žŴę �Ã��ƀęĿ� İ¿ƌCR ğíÅ đĈƍ Ě¿ęź� Ĭ�Ǝ Ð ğH� Ä�ƍH.

ě¢ĦĚ šÅ éżºż(�à �� examine žŴĘ ľ�ę�Å Ū�� šÅ hover éżºż ¿ęĘ ��) õ Nƍ ��� ĆëƎ �ę�,ęơ ũ !�õÅĘ šÅ Ręų� ÐŃĕ ėĈƍ Z �Ŀ� ĬØƎ �ęH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 11: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

GENERAL CURSOR ACTIVITY- Ń�W Uěƍ �Ãíõ Nƍ Ū�, šÅ ęU ƝUõ Nƍ heatmap- ĉ� RęųõÅ 25ªĘ �ŋVô�, 22�Ę H� ¿ĈĠ{¶ų 0þ �Ãíõ Nƒ- Ū�Ĕ šÅ� ěí1 �õ ƃƏY. ƌĿ� ƥ�{ċ ��Ę ʼnęĩę ğCR, 1. Ū�Ĕ ãƓCR ÁLƍ šÅ ƝUę ěí3 2. šÅ Ʀź�Ĕ Řő �Ãí(ąņ) õÅS ��Ŀ ƝUaĕ ²÷ķH. 3. ��(ý�ņ)õÅS Ū�ę ěí0ĿC äĿ� šÅ ƝUę ²ĚH.- šÅ ĐŜC Ū�²H �à ��ƀęĿõÅ ƣá ; ·ƃVíÅ 0ŭ1H.:šÅ ČŀĝĔ �à ��ƀęĿĘ � ĆÎa�Ę ĚųwÍõ Nƍ āħƍ #�ĕ ²÷Ĺ.ęsƍ ī²C �ÃöŁ cĠę9{ƌ÷% ŢŷŚ0 ƊŔ� �Ã��ƀęĿõ ²÷ĸ �ĚĿ �īƌCR đĈƌ ßě Ð ğH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 12: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

SEARCH RESULT EXAMINATIONSERPõÅ ě¢ĦĚ šÅĘ Čŀĝĕ �Eų�ƌC� ĄõS,ĉ�C ík ¿naę �à ��� Ƃ�ƌCĿ� ²÷ĶC šÅĘ ČŀĝS ĆëƎ Ð ğôH.ĉ�C ¿ĈĠaę �Ã��� �SCR ²6C Ø�ę ranked listõÅĘ ĐŜĀ �zVíğCĿ ÷¶õ �Ûę ğôH.- =ęĻ� ĸę( Đƒ, 100ms ��Uã ��� hoverꮟC Ĭ�ƓH.

- � �à �� Ĭ�ĕ hoveringƌCR ²6C Ƃ" Ø�/ ÑĐ �|õÅ �� Ĭ�õ MCR,Ŀ �C Ƃ" Ø�ļ, �Ã�� �Öź� ŇĊ Ƣē� � âęŸõ ��CR �C Ƃ" Ø� / SŊƌCR,Ŀ �C Ø� èĘ�Ĕ ĩʼn ĸía�, ]Ę �Ĕ pŨõ fm ĩʼn ľ�ƍH.- ę ��C èÇ gaze tracking ù�Ę ��Ā �ĉ º×. ƌĿ� cursor hover timeĔ gaze duration time²H Q &�ƌ jíŁH.ę ʼnęC 5Ĕ pŨõÅ ½� Ƣ� Ŀ0�C UġĘ ě¶� @ŕ( g�ęH. ĉ�C IĿ �ĉÖ �¹�ź� 40msUã dvęVíê� vŤ_ƌ�, hover eventC 100ms ęÁęíê� vŤ_ƌ( g�õ.

- üÁƓPN{, 5Ĕ ÑĐĘ ��C 0ĺõ aí�į� ęđC ħƘĦĚ ĐõÅ âo{Ę ÖşG ƔU g�ęH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 13: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

- result� Ū�ƌ( ħ, Ŧ� ĤĞy ħ, Ŧ� Ĭãę0 ��� Ū�ƌ( ħõ íi result� hoveredVCĿ õ NƒÅS İ¿ƓH.ę�Ĕ ¿ĈĠ� �Ã��� Ƃ�ƌC Sĺõ šÅ� ík ¿ĈƌCĿõ Nƍ O �Ĕ ī²� Ĭ�ƒķH.#�� ĉ�Ę Öųc1Ę âęźoŬ ù���� üħ ù�a� º�Ǝ Ð ğ ƒķH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 14: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

- ¿ĈĠ� ��� Ū�ƌ( ħõ hoverW �à ��aĘ Ƃ" ÓĠ - �à �� ƌIõ ğC âęŸaĕ Çűƌ X gC ^ ¶· ²HC è ¶·ĕ O �ę Ō�ƍH.??- �à ��� Ū�ƌ( ħõ, Ķ° �à ��aS �xƌC �ĕ µ Ð ğH.ü�aí 1ĕ Ū�ƌ( ħõ 2, 3ªĕ ´HPĿ.- lƍ �à ��ƀęĿĘ H� (DaõS �Ûĕ T�HC �ĕ µ Ð ğH.: ĠùÖsċ Ɯ�õÅ, ¿ĈĠC Ŧ� Řőę0 Ŧ�ĤĞyĕ Źƒ H� Ŧ�� Ğyƌ(õ èÅ ýŀ top-rankedW ��� �xƍH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 15: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

COMPARING CLICK AND HOVER DISTRIBUTIONSšÅhover ę®źĘ ·ƃĀ ƒLƌC Ū� ꮟ ·ƃĀĘ º�- šÅ hoverĀ Ū� ꮟ »SÐĀ ſËŵęĿ, � search result rankõÅ.- �à �� O ů-pŨW ��Ā O �Ĕ ÁƙġĈĕ ƍH. Ôċ Ī$ ĐŜõ ğē� ě¢Ħē{ �zÉę ğ( g�õ.- hoverꮟ� Ū�²H ú�Ę ��aõÅ ij O "bƌ ·ƃVíğHC �ĕ ¤�.- �` pŨõÅ 1ª ��� ĬĄƌ�C ƙ© ę®źĘ ºĒę O ?H.- 1ª ��õ NƒÅ� Ū� ꮟ� O �ę ěí4H.: 5Ĕ pŨĘ ��õÅ ²H Ū�� hoverĘ ù�Éę O ?H.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 16: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

UNCLICKED HOVERSƙ© ꮟ� �ę ěí4Ŀ� �Ť Ū�VĿ äĔ �ĉ� ²� ¿ĈĠĘ ƥ�Sõ Nƍ đĈƍ ÙƙěĿS ��H.- uncliked hover � : šÅ� link� �TçĿ� ƀęĿÁõÅĘ H� ĐŜ{ ęUƌ( ħõ # �Ũ� Ū�ƌĿ äC �

- �à ��õÅ uncliced hoverĘ �ÐĀ, �Ĕ ¿ĈĠ{Ěƒ ęơ Ū�W ƟÐĘ ºĒ: unclicked hover� �ę ěí4ĕ Ð| �� ÇűVC ºĒę ?âįH : 0�ěgĀ 1~2�ěg ñŒ ľ�: �Ûĕ�įHC ľ�- �� ƀęĿõÅĘ unclicked hoversĘ �ÐC �� Ū�ƎĿ ÷¶0 ��Ę ù�Éĕ üśƌC R SČĕ ĸ �ęH.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 17: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

- �� ÑĐC unclicked hover ƔUõ ũ ûƕĕ �ŝH. unclicked hover]õ �� Ū�W �� ÑĐĘ ºĒ- 5Ĕ ÑĐĘ ��� ě¢Ħē{ 5Ĕ Ū��ĕ �ŁH� Ä�Ǝ g, 5Ĕ ÑĐĘ ��õ unclicked hover� �ę 0ŭ1H� # ��C ù�Éę ?Ĕ ��mC æØĦĚ Ɗ_¨ęm� µ Ð ğH.- ÑĐõ fm unclicked hover� clickĕ đ¤ƌCĿ ÷¶� JmŁH: 1õÅĀ 0�Ŀ 5Ĕ pŨõÅ� H�.

STUDY2 : LARGE-SCALE CURSOR TRACKING STUDY

������������

Page 18: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

APPLICATIONS OF CURSOR DATAESTIMATION SEARCH RESULT RELEVANCE- cursor movement- �ÃöŁĘ pŬ å��Ľĕ �ľƌCR ßě Ð ğC Ř�ĦĚ Ręų Ĭ�.- human relevance judgments for query-URL pairs, -> šÅ ęU� human relevance judgment¿ęĘ ��É ÚƖ

- human relevance judgmentsRęųC ŁƔĺĚ �ÃöŁ Ɔł Ƃ� ĺõ ïô�- trained judgesC 5ĩ ŐSĘ relevance{ ��įH.(� Ŧ� �ĨźõNƍ ů pŨ ƅ)- judgmentRęųĀ šÅRęų� Ə- ¾â8H.- 1290�Ę query-URL Ýē{¶ų.(ĥĿ�źĀ šÅRęų� �Z �Ł)- � Ýõ Nƒ âoĀ �Ĕ ·Æĕ ƓH.

1. click through rate: URLę Ū�W ºĒ fraction of the times2. hover rate: URLę hoverW ºĒ3. number of unchecked hovers: hover VôĿ� Ū�VĿ äĔ �Ę Ƃ"�.4. maximum hover time: ��ƀęĿĘ ĚÖŴÖaõ �ĉÖ� ÿx@� ð�0 ğôCĿ .user interests

> hover � click²H ěŜS� ?çĖ.> ÛĿí Ū�ę ěí0Ŀ äçOmS ��Éę ? 0ŭ3> unclicked hovers / hover time: ��� ĐõÅ ����C �Ĕ ��Éę ?HC �ĕ ¢ľƌC �.

������������

Page 19: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

APPLICATIONS OF CURSOR DATA

DIFFERING BETWEEN GOOD and BAD ABANDONMENT- bad abandonment : �ıƌĿ �ƍŏ{ ��ƀęĿ� h0C �.- good abandonment : ��ƀęĿõÅ ¡{ ĎƌC ��� Ŏâ �ıÖu h0C �.- ĉ�Ę {#{¶ų ÇűW ��Ŀ Ŧ�: (ŅĔ �ģƘ Ŧ�)- ę Ŧ�õ Nƒ ĬN{ ØÖŸę KƓCĿ �īƌ( Đƒ: đĥõ ²÷Ł �Ã��ƀęĿ� �¸ƓH.: Kę ¡{ 0ŭ4CĿ ÷¶� ŽI.

- ŗÎ 100ms hoverW ��õ Nƒ judgment� 6xįĖ: �ÛğôĿ� Ū�ƌĿC äĔ.- 859 Ŧ�õ Nƒ �ľVô�, # ĺ 184(21%)� Ŧ�õ NƒÅC ��ƀęĿõ ¡{ Kę 0ŭ4H. (good) / 0�Ŀ 675 Ŧ�C bad abandonment

- cursor� ��ƀęĿõÅ ík ßęCĿ .1. cursor trail length : ƒL ��ƀęĿõÅ ęUƍ Ŗ ��2. cursor movement time, : šÅ� ČŀĚ ħœ Ø�3. cursor speed : Ƃ" ÏS

goodě g, trail length, movement time, speed�Z ġ 0ŭ3.->ę (¢ē{ üś¬õ Nƍ �Ĕ further study{ 3�\.

������������

Page 20: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

FUTURE WORKS- ��ĚĘ íi ʼnę� ũ !�Ę cursor behaviorõÅS 0ŭ2,?õ Nƍ ù� - ƀęĿ vęâčĔ .ĝóę °ƚƌ�, Ŧ�a ¿ęõÅ Jmł Ð ğH.- SERP� ��, Řő�Ãí, İ�ƈ�ĭŵęÍ b (Dę ík šÅ ƔUõ ûƕĕ ĶCĿ +ę O ęƒƌ� ÜH.- H� ÖŨ}�Ę ¦¬aĘ Ơ�õ Nƍ ù�(ÖŨ}¡, �ĉÖ Ƥ..)- H� �ÃöŁ� Ą¶ ¿ĈĠaĕ Đƍ ØÖŸē{ ƛģ

- šÅ źoŬ RęųĘ NĈr RęųĘ đĈÉõ Nƒ ²÷ĶôH.- šÅ (Daę H� �à �zƍ ġòaõ ¿ĈX Ð ğH� Ä�: �Ãí ·~, �à ÑĐ, (ŭ ď (¢ íƉ�ţęÍa..

- šÅ RęųC łĦę(S ƌH.- �ĉÖ ČŀĝĘ Ń� ·Æĕ Đƒ Ʀź�Ĕ H� SERP(Daę0 Ŧ�aõÅ ĚųwÍę ícÅ ěí4CĿ ²÷Ĺ.- Ʀź�Ĕ ½� ÷s Ŧ� ÊÍę0 Ŧ�aõ Nƍ ŖœĦĚ ƔUĕ µ Ð ğ ƍH.

- ÉD� Ręų ì ¿ęĘ İīĕ Đƍ ƠĒĦĚ ¦¬ĕ ŮÃƌC �S ĺĆƍ HĖ I�ęH.

DISCUSSION AND IMPLICATIONS

������������

Page 21: (발제) No Clicks, No Problem: Using Cursor Movements to Understand and Improve Search +CHI2011 -Jeff Huang /이남민 x2011 autum

l ƍª SEARCH BEHAVIOR

(IJĘ ù�aę ă Ę�� ëƍĿõ Nƒ ĬN{ È�ę VíğĿ äĖ.(6 Ä�ö Ę�ğC 6Ĉaõ Nƍ ù�� �ģƦ �Ĕ � �ĔR)

(IJõ ƓP ù� ��aĕ ^£Şƒĸ Ð ğC ƛģW-ÚƖĕ ƌC �Ę Ę�

9� ÷s�Ŀ� ²x� ƓP � �âÅ ī�� Ģ ãVC (·.- 9� �Ĕ �ĕ ƌxE ƌ0ƌ0Ę +ęC ij jíĿC � �H.- ·Æ 6Ĉę �H: ƍ�Ę #oƈ� �Ŀ�S ÷s Ę�aĕ Ŏĕ Ð ğĕ � �ĔR.

ėĈ ÚƖaĘ �� ·Æę ij ëƌH.ćÛ¶�� �â..

#oS Öź ƀęſ!

3 Ä�

������������