Evaluation of interviewer characteristics and analysis on interviewer effect in TDHS-2013

Abstract

Günümüzde araştırma kalitesi üzerine odaklanan ve araştırma hatasıkaynaklarını ele alan çalışmalar oldukça azdır. Literatürdeki çalışmalar, belirlenmesive kontrol edilmesi zor ve maliyetli olan örneklem dışı hatalar yerine görece kontroledilebilir olan örneklem hataları üzerinde durulmuştur.Bu tezde, 2013 Nüfus ve Sağlık Araştırması (2013 TNSA) işe alım sürecinedahil olan saha personeli adaylarının profili ortaya çıkarılmaya çalışılmıştır. İşe alımsüreci, saha personeli adaylarının çeşitli formlar doldurduğu adımlardan oluşmaktadır.Amaca yönelik olarak bu formlar yardımıyla `2013 TNSA Saha Personeli Veri Seti`oluşturulmuştur. Bu veri seti ile ulusal düzeyde temsiliyeti olan hanehalkı ve kadınveri setleri kullanılarak betimleyici analizler yapılmıştır. Ayrıca saha personeli işe alımformlarından elde edilen bazı bilgiler aracılığıyla araştırmanın saha öncesi ve sonrasıkarşılaştırılabilmiştir. Görüşmecilerin tamamladıkları görüşme sayıları veperformansları üzerine etki eden özellikleri de çalışma kapsamında incelenmiştir.Bununla birlikte, 2013 TNSA kapsamında gerçekleşen görüşmelerin sonuçları,cevaplama ve tamamlama oranları, örneklem illeri ve saha personelinin görevleriylebirlikte hanehalkı ve kadın görüşmeleri için saha personeli bazında değerlendirilmiştir.Sonuçlar, detaylı ileri analizlerin yapılabilmesi için saha personeli veadaylarının bilgilerinin güncel ve eksiksiz olarak alınması gerekliliğini ortayakoymaktadır. Personel veri seti, 2013-TNSA saha çalışması için başvuran adaylarınprofilini ve görüşmeci özellikleri ile performansları arasındaki ilişkiyideğerlendirmeye imkan tanımıştır. Ancak, personel veri seti görüşmecilerin tutum,davranış ve beklentilerini değerlendirmeye yönelik bilgiler içermemektedir. Ayrıcadoğum tarihi değişimine dayanarak hesaplanan takvim oranları, çocukların doğumtarihi bilgisi üzerinde görüşmeci yanlılığı olabileceğini göstermektedir. Bu çalışmanıngörüşmeci profilini analiz etme ve saha personelinin özellikleri ile araştırma sonuçlarıarasında bağ kurabilme konularında sonraki çalışmalar için kaynak oluşturmasıbeklenmektedir.

Recently, while being few in numbers, there have been studies focusing onsurvey quality and discussing sources of survey errors. Studies in the literature haveemphasized on relatively controllable sampling errors, instead of non-sampling errors,which are costly to determine and difficult to control.This thesis aims to reveal profiles of data collection staff candidates involvedin 2013 Turkey Demographic and Health Survey (TDHS-2013) recruitment process.This process consisted of different stages, in which the candidates filled in variousforms. In order to reach the aim of this study, a special data set named `TDHS-2013Data Collection Staff data` (hereafter, `staff data set`) was constructed using theseforms. Descriptive analyses are carried out using nationally representative householdand women data sets from the TDHS-2013 along with the staff data set. Moreover, preand post processes of the fieldwork are compared by means of certain informationobtained from recruitment forms. Furthermore, effects of interviewer characteristicson both number of completed interviews and interviewer performance are considered.Additionally, results of interviews, response rates and completion rates, along withsample provinces and assignments of the staff, are evaluated on the basis of datacollection staff for household interviews and women interviews.Results indicate that information on the candidates should be gathered fullyand kept updated to carry out further analyses in detail. The constructed staff data setlet us examine the profiles of all applicants for the TDHS-2013 fieldwork, and evaluatethe relation between interviewer characteristics and their performances. However, theconstructed staff data set with the available information of interviewers was notsuitable to make assessments regarding the attitudes, behaviors, and expectations ofinterviewers. Additionally, calculated calendar ratios on displacement of child birthdates imply that there is a potential interview bias on child birth date information. Weexpect this study will be a starting point for further studies analyzing interviewerprofile, and investigating for a relation between data collection staff and surveyestimates.