3.3 Mae cyfanswm y fframwaith gwall yr arolwg

Cyfanswm gwallau arolwg gwall = gynrychiolaeth + gwallau mesur.

Mae'r amcangyfrifon sy'n deillio o arolygon sampl yn aml yn amherffaith. Hynny yw, fel rheol mae gwahaniaeth rhwng yr amcangyfrif a gynhyrchir gan arolwg sampl (ee uchder cyfartalog amcangyfrifedig myfyrwyr mewn ysgol) a'r gwir werth yn y boblogaeth (ee uchder cyfartalog gwirioneddol myfyrwyr mewn ysgol). Weithiau mae'r gwallau hyn mor fach eu bod yn anhygoel, ond weithiau, yn anffodus, gallant fod yn fawr ac yn ganlyniadol. Mewn ymgais i ddeall, mesur a lleihau gwallau, creodd ymchwilwyr fframwaith cysyniadol unigol, trosfwaol yn raddol ar gyfer y camgymeriadau a all godi mewn arolygon sampl: cyfanswm fframwaith gwallau'r arolwg (Groves and Lyberg 2010) . Er i ddatblygiad y fframwaith hwn ddechrau yn y 1940au, credaf ei fod yn cynnig dau syniad defnyddiol i ni ar gyfer ymchwil arolwg yn yr oes ddigidol.

Yn gyntaf, mae cyfanswm fframwaith gwallau'r arolwg yn egluro bod dau fath o wallau: tuedd ac amrywiant . Ychydig, rhagfarn yw gwall systematig ac mae amrywiant yn wall ar hap. Mewn geiriau eraill, dychmygwch gynnal 1,000 o ailadroddiadau o'r un arolwg sampl ac yna edrych ar ddosbarthiad yr amcangyfrifon o'r 1,000 ailgynhyrchiad hyn. Y rhagfarn yw'r gwahaniaeth rhwng cymedr yr amcangyfrifon hyn a ddychwelir a'r gwir werth. Yr amrywiant yw amrywiad yr amcangyfrifon hyn. Mae pob un arall yn gyfartal, hoffem weithdrefn heb unrhyw ragfarn ac amrywiant bach. Yn anffodus, ar gyfer llawer o broblemau go iawn, nid yw gweithdrefnau o'r fath, nad ydynt yn amrywio o fân, yn bodoli, sy'n golygu bod ymchwilwyr yn y sefyllfa anodd o benderfynu sut i gydbwyso'r problemau a gyflwynir gan ragfarn ac amrywiant. Mae'n well gan rai ymchwilwyr weithdrefnau di-dueddol yn greddf, ond gall ffocws un meddwl ar ragfarn fod yn gamgymeriad. Os mai'r nod yw cynhyrchu amcangyfrif sydd mor agos â phosib i'r gwirionedd (hy, gyda'r gwall lleiaf posibl), efallai y byddwch yn well â gweithdrefn sydd â rhagfarn fechan ac amrywiant bach nag ag un sy'n yn ddiduedd ond mae ganddo amrywiant mawr (ffigwr 3.1). Mewn geiriau eraill, mae cyfanswm fframwaith gwallau'r arolwg yn dangos, wrth werthuso gweithdrefnau ymchwilio'r arolwg, y dylech ystyried y ddau duedd ac amrywiant.

Ffigur 3.1: Tuedd ac amrywiant. Yn ddelfrydol, byddai gan ymchwilwyr weithdrefn amcangyfrif gwahaniaethau isel-wahaniaeth. Mewn gwirionedd, mae'n rhaid iddynt wneud penderfyniadau yn aml sy'n creu gwaharddiad rhwng rhagfarn ac amrywiant. Er bod rhai ymchwilwyr yn ffafriol yn greddf o weithdrefnau diduedd, weithiau gall gweithdrefn amrywio bach, rhagfarn fach gynhyrchu amcangyfrifon mwy cywir na gweithdrefn ddiduedd sydd ag amrywiad uchel.

Yr ail brif syniad o gyfanswm fframwaith gwallau'r arolwg, a fydd yn trefnu llawer o'r bennod hon, yw bod dwy ffynhonnell o wallau: problemau sy'n ymwneud â phwy yr ydych yn siarad â nhw ( cynrychiolaeth ) a phroblemau sy'n gysylltiedig â'r hyn rydych chi'n ei ddysgu o'r sgyrsiau hynny ( mesur ). Er enghraifft, efallai y bydd gennych ddiddordeb mewn amcangyfrif agweddau am breifatrwydd ar-lein ymysg oedolion sy'n byw yn Ffrainc. Mae gwneud dau fath wahanol o ddyfynbris yn gofyn am yr amcangyfrifon hyn. Yn gyntaf, o'r atebion y mae ymatebwyr yn eu rhoi, rhaid i chi gasglu eu hagweddau am breifatrwydd ar-lein (sy'n broblem o fesur). Yn ail, o'r agweddau a gymerwyd ymhlith yr ymatebwyr, rhaid i chi gasglu'r agweddau yn y boblogaeth gyfan (sy'n broblem o gynrychiolaeth). Bydd samplu perffaith gyda chwestiynau arolwg gwael yn cynhyrchu amcangyfrifon gwael, fel y bydd samplu gwael gyda chwestiynau arolwg perffaith. Mewn geiriau eraill, mae amcangyfrifon da yn gofyn am ddulliau cadarn o fesur a chynrychiolaeth. O ystyried y cefndir hwnnw, byddaf yn adolygu sut mae ymchwilwyr arolwg wedi meddwl am gynrychiolaeth a mesur yn y gorffennol. Yna, byddaf yn dangos sut y gall syniadau am gynrychiolaeth a mesur arwain at ymchwil arolygu digidol.