CRITICAL APPRAISAL OF QUALITATIVE STUDIES

(PENILAIAN KRITIS STUDI KUALITATIF)

1. Was a qualitative approach appropriate?

(Apakah pendekatan kualitatif sesuai?)
a. What should I look for ?
Is the question being asked seeking to further understanding of people’s views,
opinions and/or experiences in relation to a specific setting / scenario / circumstance ?
(Apa yang harus saya cari?
Apakah pertanyaan yang diajukan bertujuan untuk memahami lebih jauh tentang
pandangan, opini, dan / atau pengalaman orang-orang terkait dengan pengaturan /
skenario / keadaan tertentu?)
b. Where do I find the information ?
The Title, Abstract and Introduction/Background should tell you whether a qualitative
approach was appropriate for the question being asked.
In this paper :
(Di mana saya dapat menemukan informasinya?
Judul, Abstrak dan Pendahuluan / Latar Belakang harus memberi tahu Anda apakah
pendekatan kualitatif sesuai untuk pertanyaan yang diajukan.
Dalam makalah ini )
2. Was the sampling strategy appropriate for the approach?
(Apakah strategi pengambilan sampel sesuai untuk pendekatan tersebut?)
a. What should I look for?
(Apa yang harus saya cari?)
How were the participants/setting(s) selected? Does the sample include a range of
experiences (maximum variation sample), where all relevant ‘variables’ are accounted
for, e.g. gender, age, geographical location, severity of condition, social support, socio-
economic background, access to services, ethnicity? A convenience sample is seldom a
good sampling choice.
(Bagaimana peserta / pengaturan dipilih? Apakah sampel tersebut mencakup berbagai
pengalaman (sampel variasi maksimum), jika semuanya relevan 'Variabel'
diperhitungkan, misalnya jenis kelamin, usia, lokasi geografis, parahnya kondisi, sosial
dukungan, latar belakang sosial ekonomi, akses ke layanan, etnis? Sampel praktis
jarang merupakan sampel yang baik pilihan.)
 b. Where do I find the information?
(Di mana saya dapat menemukan informasinya?)
The Methods should tell you how patients were recruited and selected.
(Metode harus memberi tahu Anda bagaimana pasien kembali cruited dan dipilih.)
3. What were the data collection methods?
(Apa metode pengumpulan datanya?)
a. What should I look for?
(Apa yang harus saya cari?)
Are data collection methods described in sufficient detail to allow you to repeat the
study? Are they transparent and appropriate? E.g. Interviews are useful to explore
individual experience(s); Focus groups are useful to explore views of a particular
group or elicit information that is generated during group discussions.
(Apakah metode pengumpulan data dijelaskan secara memadai detail untuk
memungkinkan Anda mengulangi studi? Apakah mereka transparan dan sesuai?
Misalnya. Wawancara adalah berguna untuk mengeksplorasi pengalaman individu;
Fokus kelompok berguna untuk mengeksplorasi pandangan tertentu kelompok atau
dapatkan informasi yang dihasilkan selama diskusi kelompok.)
b. Where do I find the information?
(Di mana saya dapat menemukan informasinya?)
Look in the Methods section for data collection information, including interview
guides and field notes.
(Lihat di bagian Metode untuk pengumpulan data informasi, termasuk panduan
wawancara dan lapangan catatan.)
4. How were data analysed and how were these checked?
(Bagaimana data dianalisis dan bagaimana ini diperiksa?)
a. What should I look for?
(Apa yang harus saya cari?)
Was the data analysis approach appropriate for the methodology used? E.g. A
grounded theory study needs to include constant comparison. Are the analytical steps
explained in detail (are they transparent)? Are the steps to ensure ‘quality control
’described? E.g. Double coding, research team discussion of identified item,
respondent validation.
(Apakah pendekatan analisis data sesuai untuk metodologi yang digunakan? Misalnya.
Sebuah studi teori dasar perlu menyertakan perbandingan yang konstan. Apakah itu
 langkah-langkah analitis dijelaskan secara rinci (apakah mereka induk)? Apakah
langkah-langkah untuk memastikan 'kendali mutu' dijelaskan? Misalnya. Pengodean
ganda, tim peneliti menemukan perdebatan tentang item yang diidentifikasi, validasi
responden.)
b. Where do I find the information?
(Di mana saya dapat menemukan informasinya?)
The Methods section should provide sufficient information about how data were
analysed.
(Bagian Metode harus menyediakan cukup informasi tentang bagaimana data
dianalisis.)
5. Is the researcher’s position described?
(Apakah posisi peneliti dijelaskan?)
a. What should I look for?
(Apa yang harus saya cari?)
It is ideal that the researcher(s) clearly state their position in relation to the research
question. For example – their background, gender, and existing knowledge or personal
experience of the topic to be researched.
(Idealnya peneliti menyatakan dengan jelas posisi dalam kaitannya dengan pertanyaan
penelitian. Untuk contoh - latar belakang, jenis kelamin, dan keberadaan mereka
pengetahuan atau pengalaman pribadi tentang topik tersebut diteliti.)
b. Where do I find the information?
(Di mana saya dapat menemukan informasinya?)
Look in the Methods/Results/Discussion section(s) to see if there is some mention of
the researcher’s position as part of the research process.
(Lihat di bagian Metode / Hasil / Diskusi) untuk melihat apakah ada yang
menyebutkan posisi peneliti sebagai bagian dari proses penelitian.)
What were the results?
(Apa hasilnya?)
1. Do the results make sense?
(Apakah hasilnya masuk akal?)
a. What should I look for?
(Apa yang harus saya cari?)
 Do the results answer the question, do they make sense and are they credible?
(Credibility). Are the themes/theoretical concepts presented credible and do they relate
to the research question?
(Apakah hasil menjawab pertanyaan, apakah mereka berhasil masuk akal dan apakah
mereka dapat dipercaya? (Kredibilitas). Apakah tema / konsep teoritis disajikan
kredibel dan apakah mereka berhubungan dengan pertanyaan penelitiantion?)
b. What does it mean?
(Apa artinya?)
Look in the findings/results section: Have thezauthors provided a range of data
(quotes) to support their interpretation (themes/ theoretical concepts) of data? Are the
quotes indexed so they could be traced back to the original data set? For example:
patient/participant #2.
(Lihat di bagian temuan / hasil: Miliki penulis menyediakan berbagai data (kutipan)
untuk mendukung interpretasi mereka (tema / teoritis konsep) data? Apakah kutipan
diindeks sehingga mereka dapat ditelusuri kembali ke kumpulan data asli? Untuk
contoh: pasien / peserta # 2.)
Have authors provided ‘negative cases’ i.e. narratives that do not fit the identified
themes/ theoretical framework. For example where some par ticipants’ experiences
differ from the main findings (think outliers!)
(Apakah penulis memberikan 'kasus negatif' yaitu narratives yang tidak sesuai dengan
tema / theokerangka retikal. Misalnya dimana beberapa parPengalaman peserta
berbeda dengan temuan utama (pikirkan outlier!))
Have the authors provided context (background to participant) for quotes in order to
interpret meaning? This should be relevant to the findings discussed, for example age
and gender/ length or severity of condition, socio economic background, educational
background, etc.
(Minta penulis memberikan konteks (latar belakang kepada peserta) untuk kutipan
untuk ditafsirkan berarti? Ini harus relevan dengan temuan dibahas, misalnya usia dan
jenis kelamin / panjang atau keparahan kondisi, latar belakang sosial ekonomi, latar
belakang pendidikan, dll.)
2. Are the conclusions drawn justified by the results?
(Apakah kesimpulan yang diambil dibenarkan oleh hasil?)
a. What should I look for?
(Apa yang harus saya cari?)
 How well does the analysis explain why people behave in the way they do? How
comprehensible would this explanation be to a thoughtful participant from the setting
(can participants/ patients ‘see’ themselves in the interpretation of data)? How well
does the explanation fit with what we know already and if not why not?
(Seberapa baik analisis menjelaskan mengapa orang berperilaku seperti yang mereka
lakukan? Bagaimana bisa dimengerti penjelasan ini peserta yang bijaksana dari
lingkungan (dapat peserta / pasien 'melihat' diri mereka sendiri di interpretation data)?
Seberapa cocok penjelasannya dengan apa yang kita sudah tahu dan jika tidak,
mengapa tidak?)
b. Where do I find the information?
(Di mana saya dapat menemukan informasinya?)
Look in the Discussion/Conclusion sections of the paper (although some
predominately qualitative journals merge findings and discussion).
(Lihat di bagian Diskusi / Kesimpulan dari kertas (meskipun beberapa didominasi
kualitatif jurnal menggabungkan temuan dan diskusi).)
Check whether the authors draw on examples of data when providing explanations.
(Periksa apakah penulis menggunakan contoh data saat memberikan penjelasan.)
Look for references to previous research in this area and existing theory and whether
these are discussed in relation to findings and explanations offered by authors.
(Carilah referensi penelitian sebelumnya dalam hal ini area dan teori yang ada dan
apakah ini dibahas dalam kaitannya dengan temuan dan penjelasan ditawarkan oleh
penulis.)
Does the paper offer a ‘so what’ recommendation?
(Apakah makalah tersebut menawarkan rekomendasi 'jadi apa'?)
3. Are the finding transferable to other clinical settings?
(Apakah temuan dapat dialihkan ke pengaturan klinis lain?)
a. What should I look for?
(Apa yang harus saya cari?)
This may not be applicable to all studies using qualitative methods (e.g. exploratory,
pilot studies). However, research using maximum variation sampling and particularly
theoretical sampling needs to demonstrate that the findings are transferable to other
settings. E.g. A study aims to explore experiences of breathlessness in COPD and a
true theoretical/ maximum variation sample has been recruited then the findings are
transferrable to other clinical settings with a similar context, E.g. includes a range of
 illness experiences, age, gender, socio-economic background, illness severity.
However if the sample includes only white, middle class men in their 50’s, then this is
not maximum variation sampling and cannot be transferred to other settings.
(Ini mungkin tidak berlaku untuk semua studi yang menggunakan kualifikasi metode
itatif (misalnya eksplorasi, studi percontohan). Namun, penelitian menggunakan
variasi sampling dan khususnya kebutuhan pengambilan sampel teoritis untuk
menunjukkan bahwa temuan dapat dialihkan ke pengaturan lain. Misalnya. Sebuah
studi bertujuan untuk mengeksplorasi pengalaman sesak di COPD dan benar sampel
variasi teoritis / maksimum telah direkrut kemudian temuannya dapat ditransfer ke
pengaturan klinis lain dengan konteks serupa, Mis. mencakup berbagai pengalaman
penyakit, usia, jenis der, latar belakang sosial ekonomi, tingkat keparahan penyakit.
Namun jika sampel hanya menyertakan putih, tengah kelas pria di usia 50-an, maka ini
tidak maksimal variasi pengambilan sampel dan tidak dapat ditransfer ke pengaturan
lainnya.)
b. Where do I find the information?
(Di mana saya dapat menemukan informasinya?)
Check the sampling information in the Methods section. Then compare the sampling
strategy mentioned with the actual participant sample recruited in the Findings section.
Did the authors recruit the sample they set out to recruit?
(Periksa informasi pengambilan sampel di Metode bagian. Kemudian bandingkan
strategi pengambilan sampel menbersama dengan sampel peserta yang direkrut di
bagian Temuan. Apakah penulis merekrut sampel yang akan mereka rekrut?)
In the Discussion/Conclusion section check whether the authors discuss the
transferability of the findings. If not check if the authors have outlined whether the
findings are limited to a particular context as part of the limitations of the study.
(Di bagian Diskusi / Kesimpulan, periksa apakaheh penulis membahas pengalihan
temuan. Jika tidak periksa apakah penulis telah menjelaskannya apakah temuannya
terbatas pada tertentu konteks sebagai bagian dari batasan penelitian.)
True theoretical sampling as described in Grounded Theory Methodology is guided by
emerging themes during constant comparative analysis. This is particular to this
methodology so does not apply to all other qualitative methodologies. If this
methodology is used, steps to illustrate how theoretical sampling has been followed in
the research process should be described throughout the Methods section.
(Pengambilan sampel teoretis yang benar seperti yang dijelaskan di Ground
Metodologi Teori ed dipandu oleh kemunculan tema selama analisis komparatif
konstan. Ini khusus untuk metodologi ini jadi tidak berlaku untuk semua metodologi
kualitatif lainnya. Jika met ini odology digunakan, langkah-langkah untuk
menggambarkan bagaimana teoritis pengambilan sampel telah diikuti dalam process
harus dijelaskan di seluruh Metode bagian.)