[ , ] Algorytmiczne zakłócenie było problemem z Google Flu Trends. Przeczytaj artykuł Lazer et al. (2014) i napisać krótki, jasny e-mail do inżyniera z Google wyjaśniającego problem i oferującego pomysł, jak to naprawić.
[ ] Bollen, Mao, and Zeng (2011) twierdzą, że dane z Twittera można wykorzystać do przewidywania rynku akcji. To odkrycie doprowadziło do utworzenia funduszu hedgingowego - Derwent Capital Markets - do inwestowania na giełdzie w oparciu o dane zebrane z Twittera (Jordan 2010) . Jakie dowody chciałbyś zobaczyć przed wpłaceniem pieniędzy do tego funduszu?
[ Podczas gdy niektórzy zwolennicy zdrowia publicznego uważają e-papierosy za skuteczną pomoc w rzucaniu palenia, inni ostrzegają przed potencjalnym ryzykiem, takim jak wysoki poziom nikotyny. Wyobraź sobie, że badacz postanawia zbadać opinię publiczną na temat e-papierosów, zbierając posty na Twitterze związane z e-papierosami i przeprowadzając analizę sentymentów.
[ ] W listopadzie 2009 r. Twitter zmienił pytanie w polu tweeta z "Co robisz?" Na "Co się dzieje?" (Https://blog.twitter.com/2009/whats-happening).
[ ] "Retweets" są często używane do mierzenia wpływu i rozprzestrzeniania wpływów na Twitterze. Początkowo użytkownicy musieli kopiować i wklejać tweet, który im się podobał, oznaczać oryginalnym autorem jego rękojeścią i ręcznie wpisać "RT" przed tweetem, aby wskazać, że był to retweet. Następnie w 2009 roku na Twitterze dodano przycisk "Retweet". W czerwcu 2016 r. Twitter umożliwił użytkownikom przesyłanie do sieci własnych tweetów (https://twitter.com/twitter/status/742749353689780224). Czy uważasz, że te zmiany powinny wpłynąć na sposób, w jaki używasz "Retweets" w swoich badaniach? Dlaczego lub dlaczego nie?
[ , , , ] W szeroko dyskutowanym artykule Michel i współpracownicy (2011) przeanalizowali treść ponad pięciu milionów zdigitalizowanych książek, próbując zidentyfikować długoterminowe trendy kulturowe. Dane, których użyli, zostały teraz opublikowane jako zbiór danych Google NGrams, więc możemy wykorzystać te dane do replikacji i rozszerzenia niektórych ich prac.
W jednym z wielu wyników pracy Michel i współpracownicy twierdzili, że zapominamy coraz szybciej. Na konkretny rok, powiedzmy "1883", obliczyli odsetek 1-gramów publikowanych każdego roku pomiędzy 1875 a 1975 rokiem, które były "1883". Uznali, że ta proporcja jest miarą zainteresowania wydarzeniami, które miały miejsce w tym roku. Na ich rysunku 3a, ukształtowali trajektorie wykorzystania na trzy lata: 1883, 1910 i 1950. Te trzy lata mają wspólny wzorzec: niewielkie wykorzystanie przed tym rokiem, potem skok, a następnie rozpad. Następnie, aby oszacować wskaźnik zaniku w każdym roku, Michel i jego współpracownicy obliczyli "okres półtrwania" każdego roku dla wszystkich lat między 1875 a 1975 rokiem. Na ich rysunku 3a (wstawka) wykazali, że okres półtrwania każdego rok się zmniejsza i twierdzili, że oznacza to, że zapominamy o przeszłości coraz szybciej. Użyli wersji 1 korpusu języka angielskiego, ale później Google opublikował drugą wersję tego korpusu. Przed rozpoczęciem kodowania przeczytaj wszystkie części pytania.
Ta aktywność pozwoli ci ćwiczyć pisanie kodu wielokrotnego użytku, interpretowanie wyników i fałszowanie danych (np. Praca z niezręcznymi plikami i obsługa brakujących danych). Ta aktywność pomoże Ci w uruchomieniu z bogatym i interesującym zestawem danych.
Uzyskaj surowe dane z witryny Google Books NGram Viewer. W szczególności powinieneś użyć wersji 2 korpusu języka angielskiego, który został wydany 1 lipca 2012. Nieskompresowany, ten plik ma 1,4 GB.
Odtworzyć główną część figury 3a Michel et al. (2011) . Aby odtworzyć tę figurę, będziesz potrzebować dwóch plików: tego, który pobrałeś w części (a) i pliku "total counts", za pomocą którego możesz przekonwertować surowe liczby na proporcje. Zauważ, że całkowity plik zliczeń ma strukturę, która może sprawić, że będzie trochę trudny do odczytania. Czy wersja 2 danych NGram daje wyniki podobne do tych przedstawionych w Michel et al. (2011) , które są oparte na danych w wersji 1?
Teraz sprawdź swój wykres przed wykresem utworzonym przez przeglądarkę NGram Viewer.
Odtworzyć rysunek 3a (główny rysunek), ale zmienić \(y\) -axis, aby być liczbą surowych wzmianek (a nie liczbą wzmianek).
Czy różnica między (b) i (d) prowadzi do przewartościowania któregokolwiek z wyników Michel et al. (2011). Dlaczego lub dlaczego nie?
Teraz, używając proporcji wzmianek, powtórz wstawkę z figury 3a. Oznacza to, że dla każdego roku między 1875 a 1975 r. Należy wyliczyć okres półtrwania tego roku. Okres półtrwania definiuje się jako liczbę lat, które upływają, zanim proporcja wzmianek osiągnie połowę swojej wartości szczytowej. Zauważ, że Michel et al. (2011) zrobić coś bardziej skomplikowanego, aby oszacować okres półtrwania - patrz sekcja III.6 Wspieranie informacji online - ale twierdzą, że oba podejścia dają podobne wyniki. Czy wersja 2 danych NGram daje wyniki podobne do tych przedstawionych w Michel et al. (2011) , które są oparte na danych w wersji 1? (Podpowiedź: nie bądź zaskoczony, jeśli tak się nie stanie.)
Czy były jakieś lata, które były odstające, takie jak lata, które zostały zapomniane szczególnie szybko lub szczególnie powoli? Krótko spekuluj na temat możliwych przyczyn tego wzorca i wyjaśnij, jak zidentyfikowałeś te wartości odstające.
Teraz powtórz ten wynik dla wersji 2 danych NGrams w języku chińskim, francuskim, niemieckim, hebrajskim, włoskim, rosyjskim i hiszpańskim.
Porównywanie we wszystkich językach, czy były jakieś lata, które były odstające, takie jak lata, które zostały zapomniane szczególnie szybko lub szczególnie powoli? Krótko spekuluj na temat możliwych przyczyn tego wzorca.
[ , , , ] Penney (2016) zbadał, czy powszechny rozgłos dotyczący nadzoru NSA / PRISM (tj. Rewelacji Snowdena) w czerwcu 2013 r. Był związany z gwałtownym i nagłym spadkiem ruchu do artykułów Wikipedii na tematy, które budzą obawy o prywatność. Jeśli tak, ta zmiana zachowania byłaby zgodna z efektem mrożenia wynikającym z masowego nadzoru. Podejście Penney (2016) jest czasami nazywane projektem przerywanej serii czasowej i jest związane z podejściami opisanymi w sekcji 2.4.3.
Aby wybrać słowa kluczowe w temacie, Penney odniósł się do listy wykorzystywanej przez Departament Bezpieczeństwa Wewnętrznego USA do śledzenia i monitorowania mediów społecznościowych. Lista DHS kategoryzuje niektóre wyszukiwane terminy w szeregu zagadnień, np. "Problemy zdrowotne", "Bezpieczeństwo infrastruktury" i "Terroryzm". W przypadku grupy badawczej Penney użył 48 słów kluczowych związanych z "Terroryzmem" (patrz tabela dodatku 8 ). Następnie agregował miesięcznie liczbę wyświetleń artykułów w Wikipedii dla odpowiednich 48 artykułów z Wikipedii w ciągu 32 miesięcy, od początku stycznia 2012 do końca sierpnia 2014. Aby wzmocnić swoją argumentację, utworzył również kilka grup porównawczych, śledząc widoki artykułów na inne tematy.
Teraz będziesz replikować i rozszerzać Penney (2016) . Wszystkie surowe dane potrzebne do tego działania są dostępne z Wikipedii. Lub możesz go pobrać z wikipediatrend pakietu R (Meissner and R Core Team 2016) . Kiedy piszesz swoje odpowiedzi, zwróć uwagę na używane źródło danych. (Zauważ, że ta sama aktywność pojawia się również w rozdziale 6.) Ta aktywność da ci praktykę w splataniu danych i myśleniu o naturalnych eksperymentach w dużych źródłach danych. Pozwoli Ci to także na rozpoczęcie pracy z potencjalnie interesującym źródłem danych dla przyszłych projektów.
[ ] Efrati (2016) zgłosiła, na podstawie poufnych informacji, że "całkowite udostępnienie" na Facebooku zmniejszyło się o około 5,5% rok do roku, podczas gdy "pierwotne udostępnianie programów telewizyjnych" spadło o 21% rok do roku. Ten spadek był szczególnie dotkliwy w przypadku użytkowników Facebooka w wieku poniżej 30 lat. Raport przypisał spadek dwóm czynnikom. Jednym z nich jest wzrost liczby "znajomych" ludzi na Facebooku. Druga polega na tym, że niektóre działania związane z udostępnianiem zostały przeniesione do wiadomości i do konkurencji, takich jak Snapchat. Raport ujawnił także kilka taktyk, które Facebook próbował zwiększyć udostępnianie, w tym usprawnienia algorytmów kanałów informacyjnych, dzięki którym oryginalne posty są bardziej widoczne, a także okresowe przypomnienia o oryginalnych wpisach dzięki funkcji "W tym dniu". Jakie konsekwencje, jeśli w ogóle, mają te odkrycia dla badaczy, którzy chcą używać Facebooka jako źródła danych?
[ ] Jaka jest różnica między socjologiem a historykiem? Według Goldthorpe (1991) główną różnicą jest kontrola nad gromadzeniem danych. Historycy są zmuszeni używać relikwii, podczas gdy socjologowie mogą dostosować gromadzenie danych do określonych celów. Przeczytaj Goldthorpe (1991) . Jaka jest różnica między socjologią a historią związaną z ideą kancelarii i gotowych?
[ ] To opiera się na poprzednim quesiton. Goldthorpe (1991) nakreślił szereg krytycznych odpowiedzi, w tym jeden od Nicky'ego Harta (1994) który podważył przywiązanie Goldthorpe'a do danych na zamówienie. Aby wyjaśnić potencjalne ograniczenia danych szytych na miarę, Hart opisał projekt "Zamożnego Pracownika", dużą ankietę służącą do pomiaru relacji między klasą społeczną a głosowaniem, którą Goldthorpe i jego koledzy przeprowadzili w połowie lat sześćdziesiątych. Jak można się było spodziewać od uczonego, który faworyzował projektowane dane na podstawie znalezionych danych, Projekt Zamożnego Pracownika zbierał dane, które były dostosowane do ostatnio proponowanej teorii o przyszłości klasy społecznej w erze rosnących standardów życia. Ale Goldthorpe i koledzy jakoś "zapomnieli" zebrać informacje na temat zachowań głosujących kobiet. Oto jak Nicky Hart (1994) podsumował cały odcinek:
"... trudno jest uniknąć wniosku, że kobiety zostały pominięte, ponieważ ten zestaw danych" na miarę "był ograniczony przez paradygmatyczną logikę, która wykluczała doświadczenie kobiet. Kierując się teoretyczną wizją świadomości klasowej i działania jako męskiego zainteresowania ..., Goldthorpe i jego koledzy skonstruowali zestaw empirycznych dowodów, które karmiły i pielęgnowały swoje własne teoretyczne założenia, zamiast wystawiać je na ważny test adekwatności ".
Hart kontynuowała:
"Wyniki empiryczne Projektu Zamożnych Pracowników mówią nam więcej o męskich wartościach socjologii w połowie wieku, niż informują o procesach stratyfikacji, polityki i życia materialnego."
Czy możesz wymyślić inne przykłady, w których gromadzenie danych na zamówienie ma wbudowane w niego zbędne elementy kolektora danych? Jak to się ma do konfrontacji algorytmicznej? Jakie mogą być tego konsekwencje, gdy naukowcy powinni korzystać z gotowych rozwiązań i kiedy powinni korzystać z kancelarii?
[ W tym rozdziale zestawiłem dane zebrane przez badaczy dla badaczy z dokumentami administracyjnymi tworzonymi przez firmy i rządy. Niektórzy nazywają te rejestry administracyjne "znalezionymi danymi", które kontrastują z "zaprojektowanymi danymi". Prawdą jest, że rejestry administracyjne są odkrywane przez naukowców, ale są również wysoce zaprojektowane. Na przykład nowoczesne firmy technologiczne bardzo ciężko pracują, aby zebrać i skoordynować swoje dane. W związku z tym te zapisy administracyjne są zarówno znalezione, jak i zaprojektowane, zależą tylko od twojej perspektywy (rysunek 2.12).
Podaj przykład źródła danych, w którym widzenie go zarówno jako znalezionego, jak i zaprojektowanego jest pomocne przy używaniu tego źródła danych do badań.
[ ] W rozważnym eseju Christian Sandvig i Eszter Hargittai (2015) podzielili badania cyfrowe na dwie szerokie kategorie w zależności od tego, czy system cyfrowy jest "instrumentem" czy "przedmiotem badań". Przykład pierwszego rodzaju - gdzie system jest instrument - to badanie przeprowadzone przez Bengtssona i współpracowników (2011) na temat wykorzystywania danych z telefonów komórkowych do śledzenia migracji po trzęsieniu ziemi na Haiti w 2010 roku. Przykładem drugiego rodzaju - gdzie system jest przedmiotem badań - są badania Jensena (2007) w jaki sposób wprowadzenie telefonów komórkowych w całej Kerali w Indiach miało wpływ na funkcjonowanie rynku ryb. Uważam, że to rozróżnienie jest pomocne, ponieważ wyjaśnia, że studia wykorzystujące cyfrowe źródła danych mogą mieć zupełnie inne cele, nawet jeśli używają tego samego źródła danych. W celu dalszego wyjaśnienia tego rozróżnienia opisz cztery przeprowadzone badania: dwa, które wykorzystują system cyfrowy jako instrument i dwa, które wykorzystują system cyfrowy jako przedmiot badań. Możesz użyć przykładów z tego rozdziału, jeśli chcesz.