Ena ke tsela eo ka tloaelo e sebetsang ka eona. U kena ho websaete ea e-commerce, khethollaeng kapa eng eo u batlang ho e reka, hlahloba 'me u phethe mokhoa oa ho lefa. Joale, o boetse o fumana imeile e u k ¯ opa hore u lefelle pefo pelee romeloa. Leha ho le joalo ho na le ts'ebetso: imeile ha e tsoe k'hamphaning e tsamaisang thepa, 'me chelete eo u kotsing ho e lefella e tlae se ke ea buseletsoa ebile e ke ke ea thusa ho sebetsa taelo ea hau. Litlhaselo tse ling tse kang lotho ea scam, moo u tsebisitsoeng ho hlōla sweepstake,lotho kapa moputso oa tlhōlisano eo u sa kang ua e nka pele - setting up a office network. [ ,, ] Ho ferekanya ka tsela e tloaelehileng e ne e le bothata le Google Flu Trends. Bala pampiri ea Lazer et al. (2014) , 'me u ngole lengolo le lekhutšoanyane, le hlakileng ho moenjiniere Google ho hlalosa bothata le ho fana ka maikutlo a hore na u ka e rarolla joang.
[ ] Bollen, Mao, and Zeng (2011) bolela hore boitsebiso bo tsoang Twitter bo ka sebelisoa ho bolela esale pele marakeng oa 'maraka. Ho fumanoa hona ho entse hore ho be le letlapa la hedge-Derwent Capital Markets-ho kenya chelete ka 'marakeng oa theko e thehiloeng ho data e tsoang ho Twitter (Jordan 2010) . Ke bopaki bofe boo u ka bo bonang pele o beha chelete ea hau mokotleng oo?
[ ] Ha babuelli ba bang ba bophelo bo botle ba sechaba ba nahana hore e-cigarettes ke thuso e atlehang ea ho tsuba, ba bang ba lemosa ka likotsi tse ka 'nang tsa e-ba teng, tse kang maemo a phahameng a nikotine. Ak'u nahane hore mofuputsi o etsa qeto ea ho ithuta maikutlo a sechaba ho e-cigarettes ka ho bokella litlaleho tse amanang le li-cigarette tsa Twitter le ho tsamaisa maikutlo.
Ke lintho life tse tharo tseo u ka li tšoenyang ka ho fetisisa ka thuto ee?
Clark et al. (2016) ile ea etela thuto e joalo feela. Ntlha ea pele, ba ile ba bokella litlhapi tse 850 000 tse sebelisang mantsoe a amanang le li-cigareteng ho tloha ka January 2012 ho fihlela ka December 2014. Ha ba hlahloba haufi, ba lemohile hore boholo ba li-tweets tsena li ne li ikemela (ke hore, ha li hlahisoe ke batho) marang-rang. Ba ile ba hlahisa algorithm ea batho ea ho tseba hore ba arohane le litlhahiso tse ikemetseng ho tloha litopong tsa manyolo. Ho sebelisa mokhoa ona oa motho ho lemoha algorithm ba fumane hore 80% ea tweets e ne e iketsetse. Na see se fumanoa se fetola karabo ea hau karolong ea (a)?
Ha ba bapisa maikutlo a li-tweets tsa manyolo le a tloaelehileng, ba fumane hore li-tweets tse itekanetseng li ne li le monate ho feta li-tweets tse phelang (6.17 ho ea ho 5.84). Na see se fumanoa se fetola karabo ea hau ho (b)?
[ ] Ka November 2009, Twitter e fetotse potso ena ho lebokoseng la tweet ho tsoa "U etsa'ng?" Ho "Ho etsahala'ng?" (Https://blog.twitter.com/2009/whats-happening).
U nahana hore ho fetoha ha maikutlo ho tla ama batho ba tweets le / kapa seo ba se tweet?
Bolela lebitso le le leng la lipatlisiso tseo u ka ratang ho li potlakela "U etsa'ng?" Hlalosa hore na ke hobane'ng ha.
Bolela lebitso le le leng la lipatlisiso tseo u ka ratang ho li potlakisa "Ho etsahala'ng?" Hlalosa hore na ke hobane'ng ha.
[ ] "Retweets" hangata li sebelisetsoa ho lekanyetsa tšusumetso le ho jala tšusumetso ho Twitter. Qalong, basebedisi ba ne ba lokela ho etsisa le ho tsata tweet eo ba e ratileng, ba behe mongoli oa pele ka mohope oa hae, mme ba itšoare ka letsoho "RT" pele tweet e bontša hore e ne e le retweet. Joale, ka 2009, Twitter e kentse konopo ea "retweet". Ka June 2016, Twitter e nolofalletse basebelisi ho bala litlhapi tsa bona (https://twitter.com/twitter/status/742749353689780224). Na u nahana hore liphetoho tsee li lokela ho ama tsela eo u sebelisang "phetolelo" ka eona ha u etsa lipatlisiso? Hobane'ng kapa ha ho joalo?
[ ,, ,, ,, ] Pampiri e hlalositsoeng haholo, Michel le basebetsi-'moho le eena (2011) ile ba hlahloba libuka tse fetang limilione tse hlano tsa li-digitized ho leka ho tseba mekhoa ea nako e telele ea setso. Boitsebiso boo ba bo sebelisitseng bo se bo lokolitsoe joaloka dataset ea Google NGrams, kahoo re ka sebelisa data ho pheta-pheta le ho eketsa tse ling tsa mosebetsi oa bona.
Ho tse ling tsa tse ngata tse hlahang pampiri, Michel le basebetsi-'moho ba ile ba pheha khang ea hore re lebala kapele le ka potlako. Bakeng sa selemo se itseng, ba re "1883," ba ile ba lekanya palo ea 1-grams e hatisitsoeng selemo le selemo pakeng tsa 1875 le 1975 e neng e le "1883". Ba ile ba nahana hore karolo ena ke ea thahasello liketsahalong tse ileng tsa etsahala selemong seo. Setšoantšong sa bona sa 3a, ba ile ba rera litlhaselo tsa ho sebelisoa ka lilemo tse tharo: 1883, 1910, le 1950. Lilemong tsena tse tharo li arolelana mokhoa o tloaelehileng: ho sebelisoa hanyenyane pele ho selemo seo, e leng sekoti, ebe se bolaoa. Ka mor'a moo, Michelle le basebetsi-'moho le eena ba lekanya "halofo ea bophelo" ea selemo le selemo ka lilemo tse pakeng tsa 1875 le 1975. Tšoantšong ea bona 3a (ka hare), ba bontšitse hore halofo ea bophelo ba e mong le e mong selemo se fokotseha, 'me ba pheha khang ea hore sena se bolela hore re leballa kapele le ka potlako. Ba sebelisitse Version 1 ea Senyesemane corpus, empa ka mor'a moo Google e lokolla phetolelo ea bobeli ea corpus. Ka kopo bala likarolo tsohle tsa potso pele u qala ho ngolisa.
Ketsahalo ena e tla u fa ho itloaetsa ho ngola khoutu e ts'oanelang, ho hlalosa liphetho, le ho qabana ha data (ho sebetsa ka lifaele tse sa hlakang le ho sebetsana le data e lahlehileng). Ketsahalo ena e tla u thusa ho tsoha le ho sebetsa ka dataset e ruileng le e thahasellisang.
Fumana boitsebiso bo bobe ho websaete ea Google Books NGram Viewer. Ka ho khetheha, o lokela ho sebelisa version 2 ea Senyesemane corpus, e ileng ea lokolloa ka la 1 July, 2012. E sa ikemiselitse, faele ena ke 1.4GB.
Khutlisa karolo e kholo ea setšoantšo sa 3a sa Michel et al. (2011) . Ho khutlisa setšoantšo sena, u tla hloka lifaele tse peli: eo ue kopitsitseng karolong e itseng (a) le "faele ea likhaello", tseo u ka li sebelisang ho fetola litekanyo tse bobebe ka boholo. Hlokomela hore file eohle e na le mohaho o ka etsang hore ho be thata ho o bala. Na tlhahiso ea 2 ea data ea NGram e hlahisa liphello tse tšoanang ho tse hlahisoang Michel et al. (2011) , tse thehiloeng ho data 1 ea tlhahiso?
Joale hlahloba graph ea hau khahlanong le graph e entsoeng ke NGram Viewer.
Ho tsosolosa setšoantšo sa 3a (setšoantšo se ka sehloohong), empa fetola \(y\) -axis hore e be palo e boleloang e boleloang (eseng tekanyo ea ho bua).
Na phapang pakeng tsa (b) le (d) e etella pele ho hlahloba hape liphello tsa Michel le al. (2011). Hobane'ng kapa ha ho joalo?
Hona joale, u sebelisa palo ea ho bua, pheta kemiso ea setšoantšo sa 3a. Ke hore selemo se seng le se seng pakeng tsa 1875 le 1975, bala halofo ea bophelo ba selemo seo. Bophelo ba halofo ea bophelo bo hlalosoa e le palo ea lilemo tse fetang pele palo ea menyetla e fihla halofo ea tlhōrō ea bohlokoa. Hlokomela hore Michel et al. (2011) etsa ntho e rarahaneng ho lekanya karolo ea halofo ea bophelo-bona karolo III.6 ea Boitsebiso bo tšehetsang Inthaneteng-empa ba bolela hore mekhoa eo ka bobeli e hlahisa liphello tse tšoanang. Na phetolelo ea 2 ea data ea NGram e hlahisa liphello tse tšoanang ho tse hlahisoang Michel et al. (2011) , tse thehiloeng ho data 1 ea tlhahiso? (Tlhahiso: U se ke ua hlolloa haeba e sa etsoe.)
Na ho ne ho e-na le lilemo tse ngata tse neng li lebaleha ka ho khetheha kapa haholo-butle butle-butle? Hlahloba ka bokhutšoao ka mabaka a khonehang a mohlala oo mme u hlalose hore na u khethile joang li-outliers.
Joale pheta phetho ena bakeng sa phetolelo ea 2 ea data ea NGrams ka Sechaena, Sefora, Sejeremane, Seheberu, Setaliana, Serussia le Sepanishe.
Ha li bapisoa le lipuo tsohle, na ho na le lilemo tse ling tse neng li lebaletsoe ka ho toba kapele haholo butle-butle? Hlalosa ka bokhutšoanyane ka mabaka a ka khonehang bakeng sa mohlala oo.
[ ,, ,, ,, ] Penney (2016) ile a hlahloba hore na ho phatlalatsoa hohle mabapi le tlhokomelo ea NSA / PRISM (ke hore, litemenolo tsa Snowden) ka June 2013 ho ne ho amahanngoa le ho fokotseha ka tšohanyetso ho sephethephethe ho lihlooho tsa Wikipedia litabeng tse hlahisang mathata a sephiri. Haeba ho joalo, phetoho ena ea boitšoaro e tla ba e lumellanang le phello e senyang e bakoang ke ho behoa boima. Ka linako tse ling mokhoa oa Penney (2016) o bitsoa ho sitisoa ha nako ea lihlopha tsa moralo, 'me o amana le mekhoa e hlalositsoeng karolong ea 2.4.3.
Ho khetha sehlooho sa mantsoe a bohlokoa, Penney e boletsoeng lethathamong le sebelisoang Lefapheng la Tšireletso ea Lehae la United States bakeng sa ho latela le ho shebella litaba tsa sechaba. Lethathamo la DHS le arolelana mabitso a mang a lipatlisiso ka litaba tse ngata, e leng, "Matšoenyeho a Bophelo," "Ts'ireletso ea Ts'ebeliso ea Sechaba" le "Sekhukhuni." Sehlopha sa thuto, Penney o sebelisitse mantsoe a 48 a amanang le "Bokhukhuni" ). Ka mor'a moo o ile a hlophisa lihlooho tsa Wikipedia likhakanyo tsa khoeli le khoeli bakeng sa libuka tse 48 tsa Wikipedia ka likhoeli tse 32, ho tloha qalong ea January 2012 ho fihlela qetellong ea August 2014. Ho tiisa taba ea hae, o ile a boela a theha lihlopha tse ngata tsa papiso ka ho latela sehlooho se shebile lihlooho tse ling.
Hona joale, o tla araba le ho atolosa Penney (2016) . Lintlha tsohle tse tala tseo u tla li hloka bakeng sa ketsahalo ena li fumaneha ho tloha Wikipedia. Kapa o ka e fumana ho tloha ho R-package wikipediatrend (Meissner and R Core Team 2016) . Ha u ngola likarabo tsa hau, ka kopo hlokomela hore na ke mohloli ofe oa data oo u o sebelisitseng. (Hlokomela hore mosebetsi ona o boetse o hlaha khaolong ea 6.) Ketsahalo ena e tla u fa mokhoa oa ho qabana le ho nahana ka liteko tsa tlhaho mehloli e mengata ea litaba. E tla boela eu tsoele pele le ho tsamaisana le mohloli oa litaba o ka thahasellisang oa merero e tlang.
Bala Penney (2016) 'me u phete papiso ea hae ea 2 e bontšang leqephe la pono ea "Bokhukhuni" -e leng maqepheng a pele le a morao ka litemenolo tsa Snowden. Hlalosa se fumanoeng.
Ka mor'a moo, pheta setšoantšo sa 4A, se bapisang sehlopha sa thuto ("Sekhukhuni" -e leng lihlooho tse amanang le tsona) le sehlopha sa baphatlalatsi se nang le mantsoe a bohlokoa ka tlas'a "DHS le Mekhatlo e meng" lethathamong la DHS (bona likhaolo tsa tlhaloso 10 le mongolo o botlaaseng ba leqephe 139). Hlalosa se fumanoeng.
Ka karolo e itseng (b) u bapisa sehlopha sa thuto le sehlopha se le seng sa baphatlalatsi. Penney e boetse e bapisoa le lihlopha tse ling tse peli tse bapisoang ke lihlopha tse latelang: "Lihlooho tse amanang le" Ts'ireletso ea Ts'ebetso ea Sechaba "(sehlomathiso sa tefo ea 11) le maqephe a tloaelehileng a Wikipedia (tekanyo ea 12). Hlahloba le sehlopha se seng sa li-comparator, 'me u hlahlobe hore na li fumanoa ho tsoa ho karolo (b) li na le maikutlo afe ka khetho ea hau ea sehlopha sa baphatlalatsi. Ke khetho efe e etsang hore u be le kutloisiso e kholo? Hobane'ng?
Penney o boletse hore mantsoe a bohlokoa a amanang le "Bokhukhuni" a ne a sebelisetsoa ho khetha lihlooho tsa Wikipedia hobane 'muso oa US o ne o bolela bokhukhuni e le lebaka la bohlokoa bakeng sa mekhoa ea bona ea ho shebella marang-rang. Joaloka tekete ea "Likhukhuni" tsena tse 48-tse amanang le mantsoe a bohlokoa, Penney (2016) eena o ile a etsa lipatlisiso ka MTurk, a botsa ba arabelang ho lekanya e mong le e mong oa mantsoe a sehlooho a ht ka lebaka la Bothata ba 'Muso, Boinotši-Bo Utloang, le ho Qoba (sehlomathiso tafoleng ea 7 le ea 8 ). Pheta lipatlisiso ho MTurk 'me u bapise liphetho tsa hau.
Ho itšetlehile ka liphello ho karolo (d) le ho bala ha sehlooho sena, na u lumellana le khetho ea Penney ea sehlooho sa mantsoe a sehlooho sehlopheng sa thuto? Hobane'ng kapa ha ho joalo? Haeba ho se joalo, u ka fana ka maikutlo afe ho e-na le hoo?
[ ] Efrati (2016) tlaleha hore, "ho arolelana ka ho feletseng" ho Facebook ho ne ho fokotsehile ka selemo se ka bang 5.5% ha selemo sa "tlhahiso ea pele" e fokotseha ka 21% selemo ka selemo. Ho theoha hona ho ne ho le thata haholo ho basebelisi ba Facebook ba ka tlase ho lilemo tse 30. Tlaleho e boletse hore ho theoha ha lintlha tse peli. E 'ngoe ke kholo ea palo ea "metsoalle" batho ba nang le Facebook. E 'ngoe ke hore karolo e' ngoe ea ho arolelana mosebetsi e fetotsoe ho melaetsa le ho baphōlisano joaloka Snapchat. Tlaleho eo e boetse e senola maqheka a 'maloa a Facebook a neng a lekile ho matlafatsa kabelo, ho kenyelletsa le News Feed algorithm tweaks e etsang hore likarolo tsa pele li hlahe haholoanyane, hammoho le likhopotso tsa nakoana tsa likarolo tsa pele tse nang le karolo ea "Letsatsing lena". Ho na le maikutlo afe, haeba a le teng, a etsa liphuputso tsee bakeng sa bafuputsi ba batlang ho sebelisa Facebook e le mohloli oa litaba?
[ ] Phapang ke efe pakeng tsa setsebi sa bophelo sechabeng le rahistori? Ho ea ka Goldthorpe (1991) , phapang e kholo ke ho laola ho bokella data. Bo-rahistori ba qobelloa ho sebelisa li-relics, athe litsebi tsa kahisano li ka ntlafatsa boitsebiso ba tsona ba ho bokella lits'ebeletso ka morero o itseng. Bala Goldthorpe (1991) . Phapang pakeng tsa lipolotiki le histori e amana joang le maikutlo a ho sireletsa batho le ho itokisa?
[ ] Sena se haha ​​holim'a potso e fetileng. Goldthorpe (1991) ile ea fana ka likarabo tse 'maloa tsa bohlokoa, tse kenyelletsoang ho tsoa ho Nicky Hart (1994) tse ileng tsa phephetsa boinehelo ba Goldthorpe mabapi le boitsebiso bo ntlafalitsoeng. E le ho hlakisa mefokolo ea boitsebiso bo entsoeng ka mokhoa o hlophisitsoeng, Hart o hlalositse Progent Worker Project, phuputso e kholo ho lekanya kamano pakeng tsa maemo a sechaba le ho vouta e neng e khannoa ke Goldthorpe le basebetsi-'moho har'a bo-1960. Joalokaha motho a ka lebella ho tsoa ho setsebi se neng se rata dintlha tse entsoeng ho fumanoa dintlha, Lenaneo la Basebetsi ba Hlokang Matla le ile la bokella boitsebiso bo neng bo lokiselitsoe ho rarolla khopolo ea morao-rao e mabapi le bokamoso ba sechaba sechabeng mehleng ea maemo a eketsehileng a bophelo. Empa, Goldthorpe le basebetsi-'moho le eena ba "lebala" ho bokella tlhahisoleseding mabapi le boitšoaro ba basali ba ho vouta. Mona ke kamoo Nicky Hart (1994) akaretsang sekhetho sohle:
"... ho thata ho qoba qeto ea hore basali ba fane ka lebaka la hore 'setšoantšo sena se entsoeng' dataset se koaletsoe ke pono ea paradigmatic e sa kenyelletseng phihlelo ea basali. E khannoa ke pono ea thuto ea tsebo ea sehlopha le ho nka khato e le tsa bothata ba banna ..., Goldthorpe le basebetsi-'moho le eena ba ile ba haha ​​bopaki ba bopaki bo fanang ka tlhokomelo le khopolo ea bona ho e-na le ho ba pepesa tekong e nepahetseng ea ho lekana. "
Hart o ile a tsoela pele:
"Lipatlisiso tsa mohlolo tsa Morero oa Basebeletsi ba Mahlahahlaha li re bolella ho eketsehileng ka litekanyetso tsa masculinist tsa bochaba-lemo ho feta ha li tsebahatsa mekhoa ea ho laola, lipolotiki le bophelo ba lintho tse bonahalang."
Na u ka nahana ka mehlala e meng moo pokello ea lits'ebetso e entsoeng ka mokhoa o entsoeng ka mokhoa o hlophisitsoeng e nang le mekhoa e tsitsitseng ea moqapi oa data e hahiloeng ho eona See se bapisoa joang le ho ferekanya ha algorithm? See se ka ba le liphello life ha bafuputsi ba lokela ho sebelisa li-readymades le ha ba lokela ho sebelisa litlhapi?
[ ] Khaolong ena, ke fapane le boitsebiso bo bokelloa ke bafuputsi bakeng sa bafuputsi ba nang le litlaleho tsa tsamaiso tse entsoeng ke lik'hamphani le mebuso. Batho ba bang ba bitsa litlaleho tsa tsamaiso "tse fumanehang", tseo ba li bapisang le "data e entsoeng." Ke 'nete hore litlaleho tsa tsamaiso li fumanoa ke bafuputsi, empa li boetse li entsoe haholo. Ka mohlala, lik'hamphani tsa theknoloji tsa morao-rao li sebetsa ka thata ho bokella le ho thibela boitsebiso ba tsona. Kahoo, litlaleho tsena tsa tsamaiso li fumaneha ebile li entsoe, ho itšetlehile feela ka pono ea hau (setšoantšo sa 2.12).
Setšoantšo sa 2.12: Setšoantšo ke letata le mmutla; seo u se bonang se itšetlehile ka pono ea hau. Mehloli e mengata ea litaba e fumaneha ebile e etselitsoe; hape, seo u se bonang se itšetlehile ka pono ea hau. Ka mohlala, litlaleho tsa lits'oants'o tse bokelletsoeng ke k'hamphani ea thelefono ea thelefono li fumanoa boitsebiso ho latela mofuputsi. Empa, tsena lirekoto tse tšoanang li etselitsoe dintlha ho tloha ho motho ea sebetsang lefapheng la ho lefella k'hamphani ea fono. Mohloli: Popular Science Monthly (1899) / Wikimedia Commons .
Fana ka mohlala oa mohloli oa data moo ho o bonang hore o fumanoa le o entsoeng hoa thusa ha u sebelisa mohloli oo oa tlhahlobo oa lipatlisiso.
[ ] Inthaneteng e nahanang, Christian Sandvig le Eszter Hargittai (2015) arola lipatlisiso tsa lipampiri ka mekhahlelo e 'meli e meholo ho itšetlehile ka hore na tsamaiso ea digital ke "seletsa" kapa "ntho ea ho ithuta." Mohlala oa mofuta oa pele-moo tsamaiso sesebelisoa-ke lipatlisiso tsa Bengtsson le basebetsi-'moho le bona (2011) ka ho sebelisa lintlha tsa thelefono bakeng sa ho sisinyeha ka mor'a tšisinyeho ea lefatše Haiti ka 2010. Mohlala oa mofuta oa bobeli-oo tsamaiso e leng ntho ea ho ithuta-o etsa lipatlisiso ke Jensen (2007) ka hore na ho kenyelletsoa ha liselefouno ho pholletsa le Kerala, India ho amme joang ts'ebetso ea 'maraka oa litlhapi. Ke fumana phapang ena e le molemo kahobane e hlakisa hore lithuto tseo tse sebelisang mehloli ea data ea digital li ka ba le lipakane tse fapaneng le haeba li sebelisa mofuta o tšoanang oa mohloli oa data. E le hore u tsoele pele ho hlakisa phapang ena, hlalosa lithuto tse 'nè tseo u li boneng: tse peli tse sebelisang tsamaiso ea digital e le sesebelisoa le tse peli tse sebelisang tsamaiso ea digital e le ntho ea thuto. U ka sebelisa mehlala e tsoang khaolong ena haeba u batla.