Kvantitatiiviset tutkimusmenetelmät

2. Kvantitatiiviset tutkimusmenetelmät Luento 2 Tiedonkeruu ja raportointi Kaisu Puumalainen

3. Raportointi

4. Raportoinnista • raportin perusrakenne: • johdanto • teoriaosa, jossa viitekehys ja hypoteesit • tutkimuksen suoritustavan (metodologia) kuvaus (data collection + measures) • tulokset (kuvailu + testaus) • tulkinnat + arviointi • rajoitukset + jatkotutkimusaiheet

5. Metodologian raportointi 1 • otanta: • kohderyhmä, rajaukset, otantakehys, otoskoko • informantit, otantamenetelmä, prosessi • tiedonkeruu: • menetelmän valinta, prosessi, instrumentin laadinta, esitestaus • vastausprosentti, edustavuus

6. Esim. otanta ja tiedonkeruu (1) The empirical data used in this study is drawn from a dataset collected using a structured mail questionnaire. The survey was carried out in spring 2004. The initial population consisted of Finnish companies engaged in R&D from eight different industry categories: food, forestry, furniture, chemicals, metals, electronics, information and communications technology (ICT), and services. The questionnaire was developed partly by using extant measurement scales, which were translated into Finnish. The use of a back-translation procedure involving a native English speaker ensured that the meanings of the item statements were not altered. Seven-point Likert scales were mainly used to minimize executive response time and effort (Knight & Cavusgil 2004). Pretests for getting feedback regarding the clarity of the survey items were conducted with ten companies of varying size in different sectors. Like numerous other researchers, we chose to rely on single key informants in our data collection. In order to maximize the data accuracy and reliability, we followed Huber and Power’s (1985) guidelines on how to get quality data from single informants. Entrepreneurial orientation is normally operationalized from the perspective of the CEO (Covin & Slevin 1989; Wiklund & Shepherd 2003), and CEOs are typically the most knowledgeable persons regarding their companies’ strategies and overall business situations (Zahra & Covin 1995). Most of our respondents had titles such as chief executive officer, managing director, chief technology officer and R&D director, indicating a senior position in the firm.

7. Esim. otanta ja tiedonkeruu (2) A total of 1140 companies were identified from the Blue Book Database. Of those, 881 were reached by telephone and were found eligible to answer questionnaire. Other firms were not reached in spite of numerous telephone calls, or were considered ineligible. Eligibility and the identity of the most suitable key informants were ascertained during the telephone conversation. Participation in the survey was solicited by means of incentives such as the offer of a summary report of the results, and by assuring confidentiality of the responses. Of the firms contacted by telephone, 200 refused to participate. The survey questionnaire, along with a preaddressed postage-paid return envelope and a cover letter describing the purpose of the research, was mailed to the 681 firms that agreed to participate. A reminder e-mail was sent to those who had not answered within two weeks.

8. Esim. otanta ja tiedonkeruu (3) A total of 299 responses were received, yielding a satisfactory effective response rate of 33.9% (299/881). Non-response bias was assessed on a number of variables (e.g., size, profitability, time of latest new product launch, international operation mode) by comparing early and late respondents, following the suggestions of Armstrong and Overton (1977). There was no evidence of non-response bias, with the exception that the firm size of the early and late respondents differed slightly: it was larger in the late-respondent group when measured against the number of employees (the sample means for the early and late respondents were 140 and 205 employees, t= -2.50, d.f.=121, sig.=.014). We also compared the distribution of the number of employees in our data with the corresponding distribution of all Finnish companies with more than 50 employees, and found that in the categories between 100 and 999 employees, the proportions were equal. Four per cent of firms have more than 1000 employees (Statistics Finland 2004), as did 13% of our sample. This suggests that very large companies may be over-represented, and is in contrast with the comparison of early and late respondents implying that companies with large numbers of employees might be under-represented. Furthermore, as there was no significant difference between the early and late respondents in terms of turnover, we concluded that our sample was not biased.

9. Esim. otanta ja tiedonkeruu (4) In order to minimize social desirability bias in the measurement of constructs, it was emphasized in the cover letter that there were no right or wrong answers, and that the responses would remain strictly confidential (Zahra & Covin 1995). The respondents were asked to recall the situation in their companies during the most recent three year period to avoid recollection errors. The sample used in this paper includes 217 firms from manufacturing and service segments. Seven different industry sectors were selected in aim to obtain a heterogeneous sample so as to increase the generalizability of the findings. Since we want to make distinction between individual and firm-level factors and in this study we aspire for capturing firm-level entrepreneurship and rather formal organizational renewal capabilities, the size class was restricted to firms with 50 employees or more. The upper cut-off 1000 employees was used to filter the largest firms out. This was done because the measures used to assess hypothesized relationship between independent and dependent variables include questions concerning organizational changes and international performance during the last three years. It is presumable that due to the organizational inertia in very large firms the lag between organizational changes and enhanced performance is longer than in small firms. Thus, it is possible that to capture the impact of organizational changes on performance of very large firms, the time period should be longer than used in this survey. To avoid the possible bias in results, the largest firms were omitted from this study.

10. Metodologian raportointi 2 • mittarit: • mittarien kehittely, kontrollimuuttujat • validiteetti ja reliabiliteetti • analyysit: • millä menetelmillä hypoteesit testattiin • raportissa mainittavat seikat vaihtelevat menetelmittäin

11. Esim. mittaaminen (1) Dependent variables: international performance We agree with many other authors (e.g., Cavusgil & Zou 1994; Katsikeas et al. 2000) that international performance is a multidimensional construct that should be measured using a variety of indicators (for a thorough review of the measures used, see e.g., Zou & Stan 1998; Leonidou et al. 2002; Manolova & Manev 2004). These indicators could be objective or subjective, absolute or relative, reflecting either the scale of international operations or success in them. We measured the scale of international operations on two objective indicators: 1) international sales as a percentage of total sales, and 2) the number of countries in which the company operates. These are both among the most commonly used proxies in this context (Walters & Samiee 1990; Sullivan 1994; Robertson & Chetty 2000; Autio et al 2000). In their review of 31 performance studies, Walters and Samiee (1990) found that 68% of them used the first and 13% the second measure. We also computed objective relative measures of the degree of internationalization by standardizing the international sales percentage and number of countries within each industry. These relative measures gave results that were identical to the absolute measures, and are thus not reported separately. We acknowledge that growth measures would be useful objective indicators of international performance as well. Autio et al. (2000) examined change in international sales as a percentage of total sales and growth in total sales, in order to understand the overall impact of growth in international sales. The success of international operations was assessed in a subjective manner. The respondents were asked to indicate their level of satisfaction with their international activities during the previous three years on six different dimensions of performance, and as a whole. The average of these seven items was also used as an overall indicator (Cronbach alpha = .91).

12. Esim. mittaaminen (2) Our reliance on self-reported data from single informants introduces the risk of common method variance. In order to obviate this risk, we followed the procedure suggested by Wiklund and Shepherd (2003) and computed the correlation coefficient with a self-reported profitability measure and an externally obtained one. We were able to find the return on investment (ROI) figures of 68 respondent companies from Talouselämä and Tietoviikko magazines, which are Finnish business magazines that collect and publish annual financial data from several industries. The correlation between the measures was .40 (p<.01). In fact, the results of previous research suggest that subjective measures of performance can accurately reflect objective measures (Lumpkin & Dess 2001).

13. Esim: mittaaminen (3) Independent variables Entrepreneurial orientation was conceptualized as consisting of the dimensions of innovativeness, proactiveness and risk-taking. The measure was adapted from Naman and Slevin (1993), and Wiklund (1998), which were based on measures developed in Covin and Slevin (1988) and Miller and Friesen (1982). Pretests were conducted, after which some original items were dropped and new ones generated on the basis of previous studies on firm-level entrepreneurship. The measure included nine items, which were assessed on a scale from one to seven (see Appendix). The three dimensions are closely related, so a composite measure was constructed as an average of all nine items, resulting in a reliability coefficient of .74, which is satisfactory according to the guidelines presented in Nunnally (1978).

14. Esim: mittaaminen (4) Control variables There are firm-specific and external factors that may affect a firm’s international performance, regardless of its strategic orientation (Lumpkin & Dess 1996) or its renewal capability. We therefore controlled for firm size, experience in international operations, and environmental dynamism. Firm size is normally operationalized as the number of employees and/or amount of annual sales. It is assumed to affect international performance positively, as a larger firm has a larger pool of resources to exploit and the possibility to achieve advantages of scale in its international operations. In order to avoid problems of multicollinearity in the hypothesis testing, we only used annual sales turnover (reported in million €) as an indicator of firm size. The sales were log-transformed to correct for positive skewness.

15. Tulosten raportointi: kuvailu • grafiikka • pylväät, histogrammit • piirakat • viiva- ja aluekuviot • sirontakuviot • frekvenssijakaumat • tunnusluvut • jakauman sijainti (keskiluvut) • jakauman hajonta (hajontaluvut) • jakauman muoto (vinous ja huipukkuus)

16. Esim: frekvenssejä ja tunnuslukuja

17. Esim. korrelaatioita ja tunnuslukuja Significance a p < .05, b p < .01

18. Tulosten raportointi: testaus • mitä kaikkea pitää raportoida? -> riippuu analyysimenetelmästä • Yleensä ainakin testisuure (+keskivirhe) ja merkitsevyystaso • ei SAS-tulostusta sellaisenaan (ehkä liitteeksi) • tiivistä taulukoiksi!!

19. Esim. Analyysimenetelmänraportointi • In the final analyses we use multiple linear regression analysis to test our hypotheses. We use the financial performance indicators for t=2007 to t=2010 as dependent variables in estimating the following equation:

20. Esim. Regressiomallinraportointi

21. Tulosten raportointi: tulkinta ja arviointi • mitä tulokset tarkoittavat käytännössä, selkeällä kielellä ilman numeroita • korosta sellaista mikä oli yllättävää, uutta tai merkittävää • vertaa aiempiin tutkimuksiin, hyvä jos saat enimmäkseen samanlaisia tuloksia, ja jotain uutta • tulosten pysyvyys, yleistettävyys ja tarkkuus • rajoitukset • jatkotutkimusaiheet

22. Raportointiesimerkkejä • Faktorianalyysi ja Cronbachin alpha • Entrepreneurs in Turkey: A Factor Analysis of Motivations, Success Factors, and ProblemsCynthia Benzing, Hung Manh Chu, Orhan Kara.Journal of Small Business Management. Milwaukee: Jan 2009. Vol. 47, Iss. 1; p. 58 (34 pages) • Shopping malls attractiveness: a segmentation approachMohammed Ismail El-Adly.International Journal of Retail & Distribution Management. Bradford: 2007. Vol. 35, Iss. 11; p. 936

23. Raportointiesimerkkejä • Lineaarinen regressioanalyysi • Subsidiary size and the level of subsidiary autonomy in multinational corporations: a quadratic model investigation of Australian subsidiariesStewart Johnston, Bulent Menguc.Journal of International Business Studies. Washington: Sep 2007. Vol. 38, Iss. 5; p. 787 (15 pages) • Logistinen regressioanalyysi, binary • Firm-specific influences on the internalization of after-sales service activities in foreign marketsDirk Morschett.The Journal of Services Marketing. Santa Barbara: 2006. Vol. 20, Iss. 5; p. 309

24. Raportointiesimerkkejä • GLM, multi-way ANOVA • Gender differences in occupational stress and coping strategies amont IT personnelVivien K G Lim, Thompson S H Teo.Women in Management Review. 1996. Vol. 11, Iss. 1; p. 20 (9 pages) • Sex Differences and Risk-Taking Propensity of EntrepreneursMasters, Robert, Meier, Robert.Journal of Small Business Management. Milwaukee: Jan 1988. Vol. 26, Iss. 1; p. 31 (5 pages)

25. Tiedonkeruu

26. Tiedonkeruumenetelmiä • kirjoituspöytätutkimus • Sisäiset tietokannat • tilastotietokannat • Kaupalliset tietokannat • Kyselypohjaiset tuotteet • kuluttajapaneelit • Monitor, RISC, yhteiskuntatieteellinen tietoarkisto • Meta-analyysi • kenttätutkimus • Survey • havainnointi • kokeet

27. IV. Kirjoituspöytätutkimus • tietolähteitä • yrityksen sisäiset tiedot • markkinointipanokset ja tulokset • Kassapäätetiedot • asiakaspalaute, reklamaatiot • Asiakastietokanta, SAP, ERP • julkaisut, luettelot, raportit, tilastot • Aiemmat tutkimukset (meta-analyysi) • Tietokannat • Pörssikurssit • Yritysten uutiset ja tilinpäätökset • YK, Maailmanpankki jne. maatilastot • standardoidut tutkimustuotteet • inventaariotutkimukset • kuluttajapaneelit • Kuluttajien luottamus, ostopäällikköindeksi jne.

28. IV. Kirjoituspöytätutkimus • etuja • halpa ja nopea • voi olla ainut käytännössä mahdollinen (esim. historiatiedot) • usein mahdollista saada pitkittäisaineistoa • rajoituksia • kerätty aiemmin ja ei juuri kyseiseen tarkoitukseen • Saatavilla yleensä vain helposti mitattavista käsitteistä • luotettavuuden arviointi hankalaa • vertailukelpoisuus, esim. hinnat ja valuutat

29. IV. Kirjoituspöytätutkimus • Tietokantoja Katin käytössä • Thomson One, DataStream (globaali, pörssiyhtiöitä) • SDC Platinum (globaali, yritysostot ja yhteistyö) • ETLA yritystietokanta (Suomen 600 suurinta yritystä) + Internet –tietokanta • Amadeus + Zefyr (eurooppalaiset yritykset, tp + omistajuustiedot) • Voitto Plus (suomalaiset yritykset, tp-tiedot) • MarketLine (toimiala-, yritys- ja maakohtaiset tiedot) • RISI (metsäteollisuus) • ITU World Telecommunications /ICT Indicators • Energian hinnat maittain aikasarjoina (EEA)

30. IV. Tietolähteitä netissä • YK:ntilastot • http://data.un.org/ • Maailmanpankintilastot • http://data.worldbank.org/ • OECD:ntilastot • http://www.oecd.org/document/0,3746,en_2649_201185_46462759_1_1_1_1,00.html • EUROSTAT:ntilastot • http://epp.eurostat.ec.europa.eu/portal/page/portal/statistics/search_database • Tilastokeskus • http://www.stat.fi/

31. Meta-analyysi • Kirjallisuuskatsaus tilastollisella analyysilla • Kvantitatiivinen tutkimus, jossa aineistona on aiemmista julkaistuista tutkimuksista saadut tilastolliset tunnusluvut • Vetää yhteen aiempien tutkimusten tuloksia • Kuvailee ja selittää vaikutuksen voimakkuutta (effectsize) eri tutkimuksissa • Antaa käsityksen tulosten yleistettävyydestä • Tunnistaa kontekstitekijöitä ja moderaattoreita • Hunter& Schmidt (2004). Methods of meta-analysis. Sage

32. Survey elikysely- jahaastattelututkimukset • tiedot kerätään kysymällä havaintoyksiköiltä • sopii abstraktien asioiden mittaamiseen • esim. asenteet, arvot, mielipiteet, aikomukset, odotukset • sopii aiemmin tapahtuneiden asioiden mittaamiseen • vaatii vastaajilta yhteistyötä tutkijan kanssa • yleisin kenttätutkimuksen tiedonkeruumenetelmä liiketalouden tutkimuksessa

33. Survey • vastausprosentti 10-95% • Riippuu tiedonkeruumenetelmästä, kohderyhmästä/ informantista • Korkeampi haastatteluissa ja yritysten sisäisissä kyselyissä • hyvä 30-40%, pitäisi olla yleensä vähintään 15% • Saadut vastaukset kpl / otantaan kuuluva kohderyhmä kpl • miksi ihminen vastaa • ystävällisyys, avuliaisuus • seuran tarve • mahdollisuus oppia uutta • palkkio tai hyöty • aihepiiri kiinnostaa

34. Tehtävä, vastausprosentti? • Kohderyhmänä suomalaiset vientiä harjoittavat pk-yritykset • Amadeus-tietokannasta löytyy 45 000 suomalaista pk-yritystä • Otat 1 000 yrityksen satunnaisotoksen ja soitat niihin • 50 ei tavoiteta lainkaan, koska ne ovat menneet konkurssiin • 40 eivät ole enää pk-yrityksiä • 200 on pk-yrityksiä, mutta niillä ei ole vientiä • 60 ovat kohderyhmässä, mutta eivät halua vastata • Saat 200 vastausta, joista 10 on palautettu tyhjänä saatteena ettei yrityksellä ole vientiä

35. Vastaamisen motiiveja • Henkilökohtainen hyöty (vetoaminen, personointi, palkkio) • Yhteiskunnallinen hyöty /normi (anonymiteetti) • Sitoutuminen (ennakkoilmoitus, DL, seuranta) • Uutuus (kuori, saate, lomake) • Helppous (palautuskuori) • Asiantuntemus (informantin valinta)

36. Esimerkkejä motivoinnista(Cavusgil & Elvey-Kirk,1998) • Yleinen hyöty: Apuasi tarvitaan! Antamasi tiedot auttavat (1) ymmärtämään kuluttajien näkemyksiä auton huollosta, ja parantamaan alan palveluja (2) vaikuttamaan alan lainsäädäntöön. Yhteistyöstänne on todella suuri apu. • Egoistinen: Sinun mielipiteesi on tärkeä! On tärkeää että ilmaiset mielipiteesi, jotta autonhuoltopalveluja tarjoavat yritykset saavat tietää millaisia tuotteita ja palveluita sinä tarvitset. Kiitos että ilmoitat mielipiteesi. • Auta tekijää tai teettäjää: Tarvitsemme apuasi! Mielipiteesi ovat hyvin tärkeitä tutkimuksemme onnistumiselle. Tulosten oikeellisuus riippuu täysin otoksen vastaajien, kuten sinun, panoksestasi. Olemme todella kiitollisia avustasi.

37. Tehtävä • Toimivatko eri motivointitavat eri maissa? • Ovatko eri motivointitavat tehokkaampia akateemisessa / kaupallisessa tutkimuksessa? • Ovatko eri motivointitavat tehokkaampia kuluttajille / yrityksille kohdistetussa tutkimuksessa?

38. Type of appeal and response rateCavusgil & Elvey-Kirk,1998

39. Survey: tiedonkeruutapoja • henkilökohtainen haastattelu • puhelinhaastattelu /CATI • postikysely /fax • nettikysely /sähköposti

40. Henkilökohtainenhaastattelu • haastattelijan aloitteesta syntynyt kaksisuuntaista kommunikaatiota sisältävä tilanne, jonka tavoitteena on saada vastaajalta tietoa • selkeä roolijako: • haastattelija määrää keskustelun kulun • ei välittömiä seurauksia haastateltavalle • Kvantitatiivisessa tutkimuksessa yleensä määrämuotoinen kysymyslista ja usein valmiit vastausvaihtoehdot • toteutustapoja • ovelta ovelle • työpaikalla • ostoskeskuksessa tai kulkuneuvossa

41. Henkilökohtainenhaastattelu • etuja • haastattelija nostaa vastausprosenttia • apuvälineet mahdollisia • täsmennyspyynnöt mahdollisia • siirtymät kysymyksestä toiseen joustavia • otantakehystä ei välttämättä tarvita • tutkija voi kontrolloida kuka vastaa • voidaan kysyä paljon kysymyksiä

42. Haastattelunongelmia • hidasta ja kallista • haastattelija saattaa vaikuttaa haastateltavan vastauksiin • haastateltava ei ole yhteistyökykyinen tai -haluinen • haastateltava ei ole tavoitettavissa • haastateltava ei ole rehellinen tai ei tiedä vastausta • haastattelijan käytös vaihtelee • haastattelija keksii itse vastauksia • haastattelija tallentaa vastaukset väärin

43. Haastattelunsuoritus • haastattelijan briefaus • haastateltavan motivointi • tutkimuksen tarkoitusperät • miksi minulta näitä kysytään? • mihin näitä tietoja käytetään? • tiedon kerääminen • saako vastaajaa auttaa? • tiedon tallennus • nauhoitus tai muistiinpanot

44. Puhelinhaastattelu • toteutus • numerot listasta, luettelosta tai satunnaisesti • kuluttajille paras aika arkisin klo 18-21 • Hyvä myös posti- tai nettikyselyn ennakkoilmoituksena • rajoituksia • ei apuvälineitä • ei paljoa kysymyksiä (5-10 min.) • ei liikaa vastausvaihtoehtoja per kysymys • otoksen edustavuus • etuja • hyvä vastausprosentti • voi soittaa mistä vain • nopea • halpa • toistettavuus

45. Postikysely • toteutus • Otantakehys tarvitaan • Laaditaan lomake • Laaditaan saatekirje (tai –viesti) • Esitestataan lomake • Suunnitellaan palautusjärjestelyt • Ennakkoilmoitus ja mahd. uusintakierros • Suunnitellaan kannusteet vastaamiseen • follow-up, varsinkin jos vastausprosentti jää matalaksi

46. Postikysely • etuja • suora informaatio ilman välikäsiä • nopea suuren joukon tavoittaminen • halpa • tarkka informaatio, vastaajalla aikaa etsiä tietoa • sopii arkaluontoisiinkin asioihin • rajoituksia • kuka vastaa • kysymysten järjestys kaikille sama, max 5-10 sivua • ymmärtääkö vastaaja • vastausprosentti 10-50%

47. Nettikysely • toteutus • otantakehys tai kaikkien saatavissa • saate vai ei • lomake + esitestaus (huom. Myös teknisen toimivuuden varmistamiseksi) • palautusjärjestelyt • kannusteet vastaamiseen • Työkaluja esim. SPSS Data Entry, Webropol

48. Nettikysely • etuja • suora informaatio ilman välikäsiä • nopea suuren joukon tavoittaminen • halpa • tarkka informaatio, vastaajalla aikaa etsiä tietoa • kysymysten järjestys ja ristiriitaisten vastausten eliminointi joustavasti • rajoituksia • kuka vastaa • tutkimuksen kohderyhmän oltava nettikäyttäjiä • tekniset ongelmat

49. Käyttäisitkö seuraavissa tilanteissa henkilökohtaista haastattelua, puhelinhaastattelua vai lomakekyselyä. Perustele valintasi • tutkimus uuden asuinalueen asukkaille siitä, miksi he muuttivat ko. alueelle. Haluat myös tietoa siitä, mikä heitä alueessa miellyttää ja mikä ei. • tutkimus LTY:n opiskelijoille siitä ketä kolmesta ehdokkaasta he kannattavat ylioppilaskunnan uudeksi puheenjohtajaksi • tutkimus ympäri Suomea sijaitseville päivittäistavaratukkuliikkeille näiden varastohenkilöstön johtamiseen liittyvistä asioista • tutkimus suuryritysten talousjohtajille heidän näkemyksistään toimialansa suhdannekehityksestä tulevaisuudessa • tutkimus Eteläsuomalaisille apteekkareille mielipiteistä ehdotettua uutta lakia kohtaan, joka sallisi reseptilääkkeiden mainostamisen

50. Saatekirje (tai –viesti) • mieluiten vastaajan nimellä • tutkimuksen tarkoitus • vastaamisen tärkeys • Luottamuksellisuus • Vastaamiseen kuluva aika • Ei ole oikeita tai vääriä vastauksia • kannusteet • vastaamisohjeet (mihin mennessä, palautuskuori) • yhteystiedot lisätietojen kysymiseksi + allekirjoitus • mistä osoite saatu • kiitokset vastaamisesta