Eksperimental Design and Analysis

1. Eksperimental Design and Analysis Dagens program • Hvem er I og hvem er jeg? • Om kurset: Læringsmål • Kursets problemstilling: X → Y eller X Y • Indhold, form, opgaver, eksamen og praktik • Gruppeinddeling • Øvelsesopgave

2. Læringsmål Efter kurset skal I kunne: • Udforme et spørgeskema til brug for en undersøgelse. • Tilrettelægge og gennemføre spørgeskemaundersøgelser (surveys) og eksperimenter. • Analysere data fra observa-tionsstudier og eksperimenter. • Vurdere om ændringer på en hjemmeside har en effekt.

3. Survey Design & Analysis • 5. Questionnaire design • 5.1 Introducing the questionnaire • ... • 5.6 Routing • 6. Piloting the survey • 7. Analyzing the results • ... • 8. Reporting • 8.1 Presenting the results • 1. Introduction • 2. What is a survey? • 2.1 Why survey? • 3. Preparation • 3.1 Before doing a survey • 3.2 Types of survey • 4. Sampling • 4.1 Why do we need a sample? • 4.2 Sampling frames • 4.3 Sampling error • 4.4 Size of the sample

5. Sampling

6. Population og stikprøve Stikprøveenhed (subject / unit)

7. Stikprøvestørrelse * Estimation af en forventet andel på 50 %, fejlmargin 5 %, sikkerhed 95 %.

8. www.bedstpaanettet.dk

9. Observationsstudie el. eksperiment? • Et webbureau vil finde ud af om en menu i toppen eller venstre kolonne giver den mest brugervenlige hjemmeside. • Alle besøgende på bureauets hjemmeside bliver præsenteret for et pop-up spørgeskema. • De bliver bl.a. spurgt, hvor tilfredse de alt-i-alt var med den seneste hjemmeside de besøgte og om denne hjemmeside har en topmenu eller venstre menu. • Er det et observationsstudie eller et eksperiment?

10. Eksperimental Design and Analysis Dagens program • Hvem er I og hvem er jeg? • Om kurset: Læringsmål • Kursets problemstilling: X → Y eller X Y • Indhold, form, opgaver, eksamen og praktik • Gruppeinddeling • Øvelsesopgave

11. Observationsstudie Enheders (units) værdier på responsvariablen og forklar-ende variable observeres, uden at udsætte enhederne for påvirkninger (treatments) Eksempel En brugerundersøgelse, hvor et spørgeskema popper op på en hjemmeside. Eksperiment Enhederne (subjects) udsættes for påvirkninger (i forsøg) og man observerer effekten på responsvariablen (dens værdi). Påvirkningerne (treatments) udgør de forklarende variable. Eksempler: Undersøgelse af ny medicin. Gr. A får kalktabletter, Gr. B får den nye medicin. Skibe males med maling A på den ene side og maling B på den anden side. Antal m2 rust på hver side måles efter 3 år. Population Sample Observationsstudier vs. eksperimenter

12. Problemstilling: Konversionsrate • www.houseofkids.dk flyttede sit e-mærke op ved siden af indkøbskurven og opnåede et løft i konversionsraten på 32%! (Kilde: www.emaerket.dk) • Konversionsraten: Andelen af besøgende, der køber. • Hvad med andre ændringer af hjemmesiden?

13. Værktøj: Google Website Optimizer

14. Kursets problemstilling Kan digital kommunikation f.eks. sælge rejser?

15. Hvad er gevinsten ved høj brugervenlighed? Y = salg Profitmaksimerende virksomheder: • Giver en høj brugervenlighed et stort salg? Offentlige virksomheder: • Giver en høj brugervenlighed færre borgerhenvendelser? • Hvad giver en høj brugervenlighed? • Kursets problemstilling: • X → Y eller • XY X = brugervenlighed

16. Eksperimental Design and Analysis Dagens program • Hvem er I og hvem er jeg? • Om kurset: Læringsmål • Kursets problemstilling: X → Y eller X Y • Indhold, form, opgaver, eksamen og praktik • Brugerundersøgelser og eksperimenter • Teori • Opgave

17. Fagligt indhold, form og praktik • Pensum • Artikler og bøger, der er gratis på nettet • Form • 2 x 45 min. forelæsning, inkl. øvelser • 2 x 45 min. øvelser (en del med Excel) • 2 gruppearbejder med skriftlig aflevering, præsentation samt forsvar og kritik • 1 eksamensopgave

18. Fagligt indhold, form og praktik • Aflevering af 3 opgaver i grupper • Eksamen • Mundtlig eksamen (20 min.) med afsæt i opg. 3 • Kursushjemmeside • Forelæsningsplan • Slides • Øvelser • Opgaver • Data • Lokale • Forelæsninger 4A16 • Øvelser 4A58

19. Opsamling • Population vs. stikprøve. Stikprøveenhed • Stikprøveudvælgelse (prob. og non-prob) • Observationsstudie vs. eksperiment • Læringsmål: • Udforme et spørgeskema til brug for en undersøgelse. • Tilrettelægge og gennemføre spørgeskema-undersøgelser (surveys) og eksperimenter. • Analysere data fra observationsstudier og eksperimenter. • Vurdere om ændringer på en hjemmeside har en effekt.

20. Dagens øvelse - undersøgelsesdesign • Diskuter i jeres gruppe, hvordan I vil tilrettelægge en brugerundersøgelse af www.frederiksberg.dk. Undersøgelsen skal være færdig den 15. oktober. • Besvarelsen, maks. 3 slides, skal omfatte en stillingtagen til: • Hvad er population, stikprøve, stikprøveenhed? • Hvordan vil I indsamle data? • Hvordan vil I fat på de personer, som skal svare? • Hvor mange data vil I indsamle? • Hvor og hvornår vil I indsamle data? • Hvad er de konkrete fordele og ulemper ved jeres dataindsamling? • Hvordan ser jeres tids-/aktivitetsplan for undersøgelsen ud? • Læg et link til jeres besvarelse på kursushjemmeside kl. 12.00