This document provides guidance on critically appraising qualitative studies. It outlines 5 key areas to examine: (1) the appropriateness of the qualitative approach, (2) the sampling strategy, (3) data collection methods, (4) data analysis and quality checks, and (5) the researcher's position. For each area, it describes what the reviewer should look for in the study and where in the document that information can be found. The goal is to evaluate whether the study has used rigorous and transparent qualitative methods to answer its research question and draw justified conclusions.
This document provides guidance on critically appraising qualitative studies. It outlines 5 key areas to examine: (1) the appropriateness of the qualitative approach, (2) the sampling strategy, (3) data collection methods, (4) data analysis and quality checks, and (5) the researcher's position. For each area, it describes what the reviewer should look for in the study and where in the document that information can be found. The goal is to evaluate whether the study has used rigorous and transparent qualitative methods to answer its research question and draw justified conclusions.
This document provides guidance on critically appraising qualitative studies. It outlines 5 key areas to examine: (1) the appropriateness of the qualitative approach, (2) the sampling strategy, (3) data collection methods, (4) data analysis and quality checks, and (5) the researcher's position. For each area, it describes what the reviewer should look for in the study and where in the document that information can be found. The goal is to evaluate whether the study has used rigorous and transparent qualitative methods to answer its research question and draw justified conclusions.
(Apakah pendekatan kualitatif sesuai?) a. What should I look for ? Is the question being asked seeking to further understanding of people’s views, opinions and/or experiences in relation to a specific setting / scenario / circumstance ? (Apa yang harus saya cari? Apakah pertanyaan yang diajukan bertujuan untuk memahami lebih jauh tentang pandangan, opini, dan / atau pengalaman orang-orang terkait dengan pengaturan / skenario / keadaan tertentu?) b. Where do I find the information ? The Title, Abstract and Introduction/Background should tell you whether a qualitative approach was appropriate for the question being asked. In this paper : (Di mana saya dapat menemukan informasinya? Judul, Abstrak dan Pendahuluan / Latar Belakang harus memberi tahu Anda apakah pendekatan kualitatif sesuai untuk pertanyaan yang diajukan. Dalam makalah ini ) 2. Was the sampling strategy appropriate for the approach? (Apakah strategi pengambilan sampel sesuai untuk pendekatan tersebut?) a. What should I look for? (Apa yang harus saya cari?) How were the participants/setting(s) selected? Does the sample include a range of experiences (maximum variation sample), where all relevant ‘variables’ are accounted for, e.g. gender, age, geographical location, severity of condition, social support, socio- economic background, access to services, ethnicity? A convenience sample is seldom a good sampling choice. (Bagaimana peserta / pengaturan dipilih? Apakah sampel tersebut mencakup berbagai pengalaman (sampel variasi maksimum), jika semuanya relevan 'Variabel' diperhitungkan, misalnya jenis kelamin, usia, lokasi geografis, parahnya kondisi, sosial dukungan, latar belakang sosial ekonomi, akses ke layanan, etnis? Sampel praktis jarang merupakan sampel yang baik pilihan.) b. Where do I find the information? (Di mana saya dapat menemukan informasinya?) The Methods should tell you how patients were recruited and selected. (Metode harus memberi tahu Anda bagaimana pasien kembali cruited dan dipilih.) 3. What were the data collection methods? (Apa metode pengumpulan datanya?) a. What should I look for? (Apa yang harus saya cari?) Are data collection methods described in sufficient detail to allow you to repeat the study? Are they transparent and appropriate? E.g. Interviews are useful to explore individual experience(s); Focus groups are useful to explore views of a particular group or elicit information that is generated during group discussions. (Apakah metode pengumpulan data dijelaskan secara memadai detail untuk memungkinkan Anda mengulangi studi? Apakah mereka transparan dan sesuai? Misalnya. Wawancara adalah berguna untuk mengeksplorasi pengalaman individu; Fokus kelompok berguna untuk mengeksplorasi pandangan tertentu kelompok atau dapatkan informasi yang dihasilkan selama diskusi kelompok.) b. Where do I find the information? (Di mana saya dapat menemukan informasinya?) Look in the Methods section for data collection information, including interview guides and field notes. (Lihat di bagian Metode untuk pengumpulan data informasi, termasuk panduan wawancara dan lapangan catatan.) 4. How were data analysed and how were these checked? (Bagaimana data dianalisis dan bagaimana ini diperiksa?) a. What should I look for? (Apa yang harus saya cari?) Was the data analysis approach appropriate for the methodology used? E.g. A grounded theory study needs to include constant comparison. Are the analytical steps explained in detail (are they transparent)? Are the steps to ensure ‘quality control ’described? E.g. Double coding, research team discussion of identified item, respondent validation. (Apakah pendekatan analisis data sesuai untuk metodologi yang digunakan? Misalnya. Sebuah studi teori dasar perlu menyertakan perbandingan yang konstan. Apakah itu langkah-langkah analitis dijelaskan secara rinci (apakah mereka induk)? Apakah langkah-langkah untuk memastikan 'kendali mutu' dijelaskan? Misalnya. Pengodean ganda, tim peneliti menemukan perdebatan tentang item yang diidentifikasi, validasi responden.) b. Where do I find the information? (Di mana saya dapat menemukan informasinya?) The Methods section should provide sufficient information about how data were analysed. (Bagian Metode harus menyediakan cukup informasi tentang bagaimana data dianalisis.) 5. Is the researcher’s position described? (Apakah posisi peneliti dijelaskan?) a. What should I look for? (Apa yang harus saya cari?) It is ideal that the researcher(s) clearly state their position in relation to the research question. For example – their background, gender, and existing knowledge or personal experience of the topic to be researched. (Idealnya peneliti menyatakan dengan jelas posisi dalam kaitannya dengan pertanyaan penelitian. Untuk contoh - latar belakang, jenis kelamin, dan keberadaan mereka pengetahuan atau pengalaman pribadi tentang topik tersebut diteliti.) b. Where do I find the information? (Di mana saya dapat menemukan informasinya?) Look in the Methods/Results/Discussion section(s) to see if there is some mention of the researcher’s position as part of the research process. (Lihat di bagian Metode / Hasil / Diskusi) untuk melihat apakah ada yang menyebutkan posisi peneliti sebagai bagian dari proses penelitian.) What were the results? (Apa hasilnya?) 1. Do the results make sense? (Apakah hasilnya masuk akal?) a. What should I look for? (Apa yang harus saya cari?) Do the results answer the question, do they make sense and are they credible? (Credibility). Are the themes/theoretical concepts presented credible and do they relate to the research question? (Apakah hasil menjawab pertanyaan, apakah mereka berhasil masuk akal dan apakah mereka dapat dipercaya? (Kredibilitas). Apakah tema / konsep teoritis disajikan kredibel dan apakah mereka berhubungan dengan pertanyaan penelitiantion?) b. What does it mean? (Apa artinya?) Look in the findings/results section: Have thezauthors provided a range of data (quotes) to support their interpretation (themes/ theoretical concepts) of data? Are the quotes indexed so they could be traced back to the original data set? For example: patient/participant #2. (Lihat di bagian temuan / hasil: Miliki penulis menyediakan berbagai data (kutipan) untuk mendukung interpretasi mereka (tema / teoritis konsep) data? Apakah kutipan diindeks sehingga mereka dapat ditelusuri kembali ke kumpulan data asli? Untuk contoh: pasien / peserta # 2.) Have authors provided ‘negative cases’ i.e. narratives that do not fit the identified themes/ theoretical framework. For example where some par ticipants’ experiences differ from the main findings (think outliers!) (Apakah penulis memberikan 'kasus negatif' yaitu narratives yang tidak sesuai dengan tema / theokerangka retikal. Misalnya dimana beberapa parPengalaman peserta berbeda dengan temuan utama (pikirkan outlier!)) Have the authors provided context (background to participant) for quotes in order to interpret meaning? This should be relevant to the findings discussed, for example age and gender/ length or severity of condition, socio economic background, educational background, etc. (Minta penulis memberikan konteks (latar belakang kepada peserta) untuk kutipan untuk ditafsirkan berarti? Ini harus relevan dengan temuan dibahas, misalnya usia dan jenis kelamin / panjang atau keparahan kondisi, latar belakang sosial ekonomi, latar belakang pendidikan, dll.) 2. Are the conclusions drawn justified by the results? (Apakah kesimpulan yang diambil dibenarkan oleh hasil?) a. What should I look for? (Apa yang harus saya cari?) How well does the analysis explain why people behave in the way they do? How comprehensible would this explanation be to a thoughtful participant from the setting (can participants/ patients ‘see’ themselves in the interpretation of data)? How well does the explanation fit with what we know already and if not why not? (Seberapa baik analisis menjelaskan mengapa orang berperilaku seperti yang mereka lakukan? Bagaimana bisa dimengerti penjelasan ini peserta yang bijaksana dari lingkungan (dapat peserta / pasien 'melihat' diri mereka sendiri di interpretation data)? Seberapa cocok penjelasannya dengan apa yang kita sudah tahu dan jika tidak, mengapa tidak?) b. Where do I find the information? (Di mana saya dapat menemukan informasinya?) Look in the Discussion/Conclusion sections of the paper (although some predominately qualitative journals merge findings and discussion). (Lihat di bagian Diskusi / Kesimpulan dari kertas (meskipun beberapa didominasi kualitatif jurnal menggabungkan temuan dan diskusi).) Check whether the authors draw on examples of data when providing explanations. (Periksa apakah penulis menggunakan contoh data saat memberikan penjelasan.) Look for references to previous research in this area and existing theory and whether these are discussed in relation to findings and explanations offered by authors. (Carilah referensi penelitian sebelumnya dalam hal ini area dan teori yang ada dan apakah ini dibahas dalam kaitannya dengan temuan dan penjelasan ditawarkan oleh penulis.) Does the paper offer a ‘so what’ recommendation? (Apakah makalah tersebut menawarkan rekomendasi 'jadi apa'?) 3. Are the finding transferable to other clinical settings? (Apakah temuan dapat dialihkan ke pengaturan klinis lain?) a. What should I look for? (Apa yang harus saya cari?) This may not be applicable to all studies using qualitative methods (e.g. exploratory, pilot studies). However, research using maximum variation sampling and particularly theoretical sampling needs to demonstrate that the findings are transferable to other settings. E.g. A study aims to explore experiences of breathlessness in COPD and a true theoretical/ maximum variation sample has been recruited then the findings are transferrable to other clinical settings with a similar context, E.g. includes a range of illness experiences, age, gender, socio-economic background, illness severity. However if the sample includes only white, middle class men in their 50’s, then this is not maximum variation sampling and cannot be transferred to other settings. (Ini mungkin tidak berlaku untuk semua studi yang menggunakan kualifikasi metode itatif (misalnya eksplorasi, studi percontohan). Namun, penelitian menggunakan variasi sampling dan khususnya kebutuhan pengambilan sampel teoritis untuk menunjukkan bahwa temuan dapat dialihkan ke pengaturan lain. Misalnya. Sebuah studi bertujuan untuk mengeksplorasi pengalaman sesak di COPD dan benar sampel variasi teoritis / maksimum telah direkrut kemudian temuannya dapat ditransfer ke pengaturan klinis lain dengan konteks serupa, Mis. mencakup berbagai pengalaman penyakit, usia, jenis der, latar belakang sosial ekonomi, tingkat keparahan penyakit. Namun jika sampel hanya menyertakan putih, tengah kelas pria di usia 50-an, maka ini tidak maksimal variasi pengambilan sampel dan tidak dapat ditransfer ke pengaturan lainnya.) b. Where do I find the information? (Di mana saya dapat menemukan informasinya?) Check the sampling information in the Methods section. Then compare the sampling strategy mentioned with the actual participant sample recruited in the Findings section. Did the authors recruit the sample they set out to recruit? (Periksa informasi pengambilan sampel di Metode bagian. Kemudian bandingkan strategi pengambilan sampel menbersama dengan sampel peserta yang direkrut di bagian Temuan. Apakah penulis merekrut sampel yang akan mereka rekrut?) In the Discussion/Conclusion section check whether the authors discuss the transferability of the findings. If not check if the authors have outlined whether the findings are limited to a particular context as part of the limitations of the study. (Di bagian Diskusi / Kesimpulan, periksa apakaheh penulis membahas pengalihan temuan. Jika tidak periksa apakah penulis telah menjelaskannya apakah temuannya terbatas pada tertentu konteks sebagai bagian dari batasan penelitian.) True theoretical sampling as described in Grounded Theory Methodology is guided by emerging themes during constant comparative analysis. This is particular to this methodology so does not apply to all other qualitative methodologies. If this methodology is used, steps to illustrate how theoretical sampling has been followed in the research process should be described throughout the Methods section. (Pengambilan sampel teoretis yang benar seperti yang dijelaskan di Ground Metodologi Teori ed dipandu oleh kemunculan tema selama analisis komparatif konstan. Ini khusus untuk metodologi ini jadi tidak berlaku untuk semua metodologi kualitatif lainnya. Jika met ini odology digunakan, langkah-langkah untuk menggambarkan bagaimana teoritis pengambilan sampel telah diikuti dalam process harus dijelaskan di seluruh Metode bagian.)