Bit By Bit - Running eksperimente - 4.6 Advies
Of jy self dinge doen of met 'n maat werk, ek wil graag vier stukke raad aanbied wat ek in my eie werk besonder nuttig gevind het. Die eerste twee advies is van toepassing op enige eksperiment, terwyl die tweede twee baie meer spesifiek vir digitale-eeue eksperimente is.
My eerste raad vir wanneer jy 'n eksperiment doen, is dat jy soveel as moontlik moet dink voordat enige data ingesamel is. Dit lyk waarskynlik vir navorsers wat gewoond is aan lopende eksperimente, maar dit is baie belangrik vir diegene wat gewoond is aan die werk met groot databronne (sien hoofstuk 2). Met sulke bronne word die meeste van die werk gedoen nadat u die data het, maar eksperimente is die teenoorgestelde: die meeste van die werk moet gedoen word voordat u data versamel. Een van die beste maniere om jouself te dwing om versigtig te dink voordat jy data insamel, is om 'n voorontledingsplan vir jou eksperiment te skep en te registreer, waarin jy basies die analise beskryf wat jy sal uitvoer (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .
My tweede stuk algemene advies is dat geen enkele eksperiment perfek sal wees nie, en daarom moet jy oorweeg om 'n reeks eksperimente te ontwerp wat mekaar versterk. Ek het dit gehoor as die armada-strategie beskryf . eerder as om een ​​massiewe slagskip te bou, moet jy baie kleiner skepe bou met komplementêre sterkte. Hierdie soort multi-eksperiment studies is roetine in die sielkunde, maar hulle is skaars elders. Gelukkig maak die lae koste van sommige digitale eksperimente meer-eksperimentstudies makliker.
Gegewe die algemene agtergrond, wil ek nou twee wenke aanbied wat meer spesifiek is vir die ontwerp van digitale leeftyd eksperimente: maak nul veranderlike koste data (afdeling 4.6.1) en bou etiek in jou ontwerp (afdeling 4.6.2).