Online Behavioral CyLab Advertising User Studies y & c S a - - PowerPoint PPT Presentation

▶
online behavioral
SMART_READER_LITE
LIVE PREVIEW

Online Behavioral CyLab Advertising User Studies y & c S a - - PowerPoint PPT Presentation

Jan 04, 2023 105 likes •363 views

Online Behavioral CyLab Advertising User Studies y & c S a e v c i u r P r i t e y l b L Pedr Pedro Giovanni Leon and o Giovanni Leon and Blase Blase Ur Ur a a s b U o b r a a t W3C DNT and Beyond

slide-1
SLIDE 1

C y L a b U s a b l e P r i v a c y & S e c u r i t y L a b

  • r

a t

  • r

y H T T P : / / C U P S . C S . C M U . E D U

CyLab

Online Behavioral Advertising User Studies

Pedr Pedro Giovanni Leon and

  • Giovanni Leon and Blase

Blase Ur Ur W3C DNT and Beyond W W3C DNT and Beyond Workshop

  • rkshop

November 27, 2012 November 27, 2012

slide-2
SLIDE 2

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡2 ¡

OBA User Studies

Smart, Useful, Scary Smart, Useful, Scary, Cr , Creepy: eepy: Per Perceptions of Behavioral Advertising ceptions of Behavioral Advertising Why Johnny Can't Opt Out: Why Johnny Can't Opt Out: A Usability Evaluation of T A Usability Evaluation of Tools to Limit Online

  • ols to Limit Online

Behavioral Advertising Behavioral Advertising What Do Online Behavioral Advertising Privacy What Do Online Behavioral Advertising Privacy Disclosur Disclosures Communicate to Users? es Communicate to Users?

slide-3
SLIDE 3

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡3 ¡

OBA User Studies

Smart, Useful, Scary Smart, Useful, Scary, Cr , Creepy: eepy: Per Perceptions of Behavioral Advertising ceptions of Behavioral Advertising Why Johnny Can't Opt Out: Why Johnny Can't Opt Out: A Usability Evaluation of T A Usability Evaluation of Tools to Limit Online

  • ols to Limit Online

Behavioral Advertising Behavioral Advertising What Do Online Behavioral Advertising Privacy What Do Online Behavioral Advertising Privacy Disclosur Disclosures Communicate to Users? es Communicate to Users?

slide-4
SLIDE 4

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡4 ¡

OBA User Studies

Smart, Useful, Scary Smart, Useful, Scary, Cr , Creepy: eepy: Per Perceptions of Behavioral Advertising ceptions of Behavioral Advertising Why Johnny Can't Opt Out: Why Johnny Can't Opt Out: A Usability Evaluation of T A Usability Evaluation of Tools to Limit Online

  • ols to Limit Online

Behavioral Advertising Behavioral Advertising What Do Online Behavioral Advertising Privacy What Do Online Behavioral Advertising Privacy Disclosur Disclosures Communicate to Users? es Communicate to Users?

slide-5
SLIDE 5

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡5 ¡

Study Overview

§ 48 interviews

§ Non-technical users § Perceptions of advertising § Understanding of OBA § Balancing pros and cons

slide-6
SLIDE 6

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡6 ¡

Limited Knowledge about OBA

slide-7
SLIDE 7

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡7 ¡

Limited Knowledge about OBA

§ Don’t know how it works § Based on searches, Facebook, Amazon § Don’t know who is involved § Haven’t heard of most companies § Don’t associate major companies with ads

slide-8
SLIDE 8

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡8 ¡

Limited Knowledge about OBA

§ Unaware of privacy mechanisms § Deleting cookies can limit OBA § Unfamiliar with opt-outs or DNT § Expected options in web browser & antivirus

slide-9
SLIDE 9

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡9 ¡

Smart & Useful… but Scary & Creepy

§ More relevant ads vs. privacy concerns § OBA surreptitious § Lack of knowledge led them to think the worst § Complex preferences

slide-10
SLIDE 10

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡10 ¡

OBA User Studies

Smart, Useful, Scary Smart, Useful, Scary, Cr , Creepy: eepy: Per Perceptions of Behavioral Advertising ceptions of Behavioral Advertising Why Johnny Can't Opt Out: Why Johnny Can't Opt Out: A Usability Evaluation of T A Usability Evaluation of Tools to Limit Online

  • ols to Limit Online

Behavioral Advertising Behavioral Advertising What Do Online Behavioral Advertising Privacy What Do Online Behavioral Advertising Privacy Disclosur Disclosures Communicate to Users? es Communicate to Users?

slide-11
SLIDE 11

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡11 ¡

OBA Control Mechanisms

slide-12
SLIDE 12

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡12 ¡

Problematic opt-out interface

slide-13
SLIDE 13

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡13 ¡

slide-14
SLIDE 14

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡14 ¡

Common Usability Problems

§ Inappropriate defaults

§ Poorly designed interfaces, jargon § Lack of feedback § Misconceptions § Some tools break functionality

slide-15
SLIDE 15

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡15 ¡

OBA User Studies

Smart, Useful, Scary Smart, Useful, Scary, Cr , Creepy: eepy: Per Perceptions of Behavioral Advertising ceptions of Behavioral Advertising Why Johnny Can't Opt Out: Why Johnny Can't Opt Out: A Usability Evaluation of T A Usability Evaluation of Tools to Limit Online

  • ols to Limit Online

Behavioral Advertising Behavioral Advertising What Do Online Behavioral Advertising Privacy What Do Online Behavioral Advertising Privacy Disclosur Disclosures Communicate to Users? es Communicate to Users?

slide-16
SLIDE 16

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡16 ¡

Do OBA disclosures empower users to make privacy choices?

  • Online study of 1,505 participants
slide-17
SLIDE 17

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡17 ¡

OBA Disclosures in Context

slide-18
SLIDE 18

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡18 ¡

OBA Disclosures in Isolation

slide-19
SLIDE 19

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡19 ¡

Two Icons and Seven Taglines

§ “AdChoices” § “Interest based ads” § “Why did I get this ad?” § “Learn about your ad choices” § “Configure ad preferences” § “Sponsor ads” § Blank (no tagline)

slide-20
SLIDE 20

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡20 ¡

Findings (1/2) § OBA disclosures are not noticed § Purpose was misunderstood

§ “AdChoices” was outperformed

§ Users are afraid to click

slide-21
SLIDE 21

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡21 ¡

Findings (2/2)

§ Opt out = “Stop advertising companies from collecting information about your browsing activities.” (FALSE)

§ 63% thought it was true 63% thought it was true

slide-22
SLIDE 22

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡22 ¡

Recommendations § Understand what users care about § Understand how users make decisions § Iterative user study process § Match expectations § Educate users

slide-23
SLIDE 23

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡23 ¡

Work in Progress § Understanding what matters for users § The impact of information on behavior § Field study of privacy tools

slide-24
SLIDE 24

CyLab ¡Usable ¡Privacy ¡and ¡Security ¡Laboratory ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡h7p://cups.cs.cmu.edu/ ¡ ¡ ¡ ¡ ¡24 ¡

References

“Smart, Useful, Scary “Smart, Useful, Scary, Cr , Creepy: Per eepy: Perceptions of Behavioral Advertising” ceptions of Behavioral Advertising” [Ur, Leon, Cranor, Shay, and Wang. In Proc. of the Symposium On Usable Privacy and Security (SOUPS). Washington, D.C., July 2012.] “Why Johnny Can't Opt Out: A Usability Evaluation of T “Why Johnny Can't Opt Out: A Usability Evaluation of Tools to Limit Online

  • ols to Limit Online

Behavioral Advertising” Behavioral Advertising” [Leon, Ur, Balebako, Cranor, Shay, and Wang. In Proc. of the ACM SIGCHI Conference on Human Factors in Computing Systems (CHI), Austin, Texas, May 2012.] “What Do Online Behavioral Advertising Privacy Disclosur “What Do Online Behavioral Advertising Privacy Disclosures Communicate to es Communicate to Users” Users” [Leon, Cranshaw, Ur, Cranor, Hastak, Graves, Xu. In Proc. of the Workshop

  • n Privacy in the Electronic Society (WPES) 2012.
slide-25
SLIDE 25

Pedro ¡Leon: ¡pgl@andrew.cmu.edu ¡ ¡ ¡ ¡ ¡ ¡ ¡ Blase ¡Ur: ¡bur@cmu.edu ¡