Trang chủSÁCH DỊCH TIẾNG VIỆTThống kê Sinh học Cơ bản và Lâm sàng

Thống kê Sinh học Cơ bản và Lâm sàng, Ấn bản thứ 5. Chương 11: Nghiên cứu Khảo sát (Survey Research)

Bài giảng Rung nhĩ dành cho sau đại học
Phác đồ chẩn đoán và điều trị thiếu máu bất sản
Phác đồ chẩn đoán và điều trị bệnh hồng cầu hình liềm

Thống kê Sinh học Cơ bản và Lâm sàng, Ấn bản thứ 5 – Basic & Clinical Biostatistics, 5e
Tác giả: Susan White – Nhà xuất bản McGraw-Hill Medical – Biên dịch: Ths.Bs. Lê Đình Sáng


Chương 11: Nghiên cứu Khảo sát (Survey Research)

NHỮNG KHÁI NIỆM CHÍNH

  1. Nghiên cứu khảo sát là một trong những hình thức nghiên cứu phổ biến nhất.
  2. Nghiên cứu khảo sát thường liên quan đến việc hỏi mọi người về một chủ đề, mặc dù một số khảo sát có thể dựa trên các nguồn dữ liệu có sẵn.
  3. Một câu hỏi nghiên cứu rõ ràng và các mục tiêu cụ thể giúp định hướng thiết kế của một cuộc khảo sát và bảng câu hỏi.
  4. Các chủ đề khảo sát có thể cần được điều tra bằng các nhóm tập trung (focus groups) để biết được các vấn đề cụ thể quan trọng cần nghiên cứu.
  5. Phương pháp khảo sát được xác định bởi câu hỏi nghiên cứu. Chúng bao gồm phỏng vấn và bảng câu hỏi tự điền qua thư tín hoặc điện thoại. Chúng có thể dựa trên web, hoặc được thực hiện trực tiếp.
  6. Nên lựa chọn các loại câu hỏi và thang đo trả lời phù hợp nhất, và câu hỏi phải không có sai lệch (bias).
  7. Các câu hỏi có danh sách các câu trả lời có thể có được xác định trước sẽ dễ phân tích hơn các câu hỏi mở.
  8. Việc lựa chọn thang đo (danh nghĩa, thứ tự, định lượng) có ảnh hưởng đến các cách mà kết quả có thể được phân tích.
  9. Các câu trả lời cần được cân bằng với số lượng các lựa chọn trả lời tích cực và tiêu cực bằng nhau.
  10. Nhìn chung, các câu trả lời nên cụ thể và tránh các tính từ mơ hồ.
  11. Các loại câu trả lời cần phải đồng nhất và loại trừ lẫn nhau.
  12. Các câu hỏi có khả năng gây khó chịu đôi khi có thể được làm mềm để chúng dễ được đối tượng chấp nhận hơn.
  13. Các câu hỏi cho phép đối tượng chọn nhiều lựa chọn tùy ý có thể gây ra những thách thức tại thời điểm phân tích.
  14. Mọi người thường thấy thang đo xếp hạng (ranking scales) khó nếu có nhiều hơn ba lựa chọn cần xếp hạng.
  15. Thang đo Likert rất phổ biến và dễ hiểu đối với người trả lời.
  16. Độ tin cậy (Reliability) cho biết liệu kết quả từ một bài kiểm tra hoặc bảng câu hỏi có thể tái lập được hay không.
  17. Độ giá trị (Validity) cho biết liệu một bài kiểm tra hoặc bảng câu hỏi có đang đo lường những gì nó dự định đo lường hay không.
  18. Thử nghiệm sơ bộ (Pilot testing) là điều cần thiết và không cần sử dụng một mẫu lớn.
  19. Một tỷ lệ phản hồi cao mang lại sự tin tưởng hơn vào các phát hiện.
  20. Theo dõi hiệu quả là cách quan trọng nhất để tăng tỷ lệ phản hồi.
  21. Một thư ngỏ được soạn thảo kỹ lưỡng nên đi kèm với tất cả các bảng câu hỏi.
  22. Các hình thức khuyến khích, cả bằng tiền và không bằng tiền, dường như có ảnh hưởng lớn đến tỷ lệ phản hồi.
  23. Các cân nhắc về đạo đức và các hội đồng xét duyệt của tổ chức yêu cầu người trả lời phải được đảm bảo rằng các câu trả lời của họ sẽ được giữ bí mật.
  24. Các phương pháp lấy mẫu phù hợp dẫn đến các nghiên cứu có giá trị hơn miễn là loại người trả lời phù hợp với câu hỏi nghiên cứu.
  25. Xác định số lượng đối tượng cần thiết là một phần của quy trình thiết kế khảo sát.
  26. Kết quả khảo sát được phân tích bằng các phương pháp đã được thảo luận trước đây trong cuốn sách này.

VẤN ĐỀ TÌNH HUỐNG

VẤN ĐỀ TÌNH HUỐNG 1

Bảng kiểm Phẩm giá Bệnh nhân (Patient Dignity Inventory – PDI) đo lường sự căng thẳng liên quan đến phẩm giá mà một bệnh nhân ung thư trải qua. Li và cộng sự (2018) đã nghiên cứu độ giá trị và độ tin cậy của bản dịch PDI sang tiếng Quan Thoại (PDI-MV). Mỗi khi một công cụ khảo sát được dịch sang một ngôn ngữ mới, độ tin cậy và độ giá trị nên được kiểm tra lại bằng ngôn ngữ đó để đảm bảo rằng cuộc khảo sát vẫn hoàn thành mục đích của nó trong ngôn ngữ mới. https://doi.org/10.1371/journal.pone.0203111

VẤN ĐỀ TÌNH HUỐNG 2

Với số lượng các cuộc khảo sát được gửi đến các bác sĩ ngày càng tăng, thách thức trong việc tối ưu hóa tỷ lệ phản hồi là một điều khó vượt qua. Brtnikova và cộng sự (2018) đã nghiên cứu một số phương pháp lấy mẫu và nhắc nhở khác nhau bao gồm email, thư tay và bưu thiếp. Họ thấy rằng tỷ lệ phản hồi dao động từ 66% đến 83% và phát hiện các mức độ phản hồi khác nhau giữa các chuyên khoa. https://doi.org/10.1371/journal.pone.0202755. Dữ liệu có thể được truy cập bằng liên kết này: https://ndownloader.figshare.com/files/12852026

VẤN ĐỀ TÌNH HUỐNG 3

Nhiễm trùng đường tiết niệu (UTIs) là một trong những bệnh nhiễm khuẩn phổ biến nhất, chiếm 7 triệu lượt khám ngoại trú và 1 triệu lượt nhập viện tại Hoa Kỳ mỗi năm. Chúng thường do Escherichia coli gây ra và thường được điều trị theo kinh nghiệm bằng trimethoprim-sulfamethoxazole. Các hướng dẫn gần đây của Hiệp hội Bệnh truyền nhiễm Hoa Kỳ khuyến nghị loại thuốc này là liệu pháp tiêu chuẩn với các fluoroquinolone cụ thể là lựa chọn hàng thứ hai. Hai yếu tố quan trọng trong việc lựa chọn điều trị là chi phí chăm sóc sức khỏe của liệu pháp thuốc và sự xuất hiện của tình trạng kháng trimethoprim-sulfamethoxazole ở các chủng E. coli gây UTIs. Huang và Stafford (2002) đã sử dụng dữ liệu khảo sát từ Khảo sát Chăm sóc Y tế Ngoại trú Quốc gia (NAMCS) để đánh giá các đặc điểm nhân khẩu học và lâm sàng của những phụ nữ đến khám tại các bác sĩ chăm sóc ban đầu và chuyên khoa về UTIs.

CÁC CÂU HỎI NGHIÊN CỨU

Với một chút kiến thức thông thường và thông tin từ chương này, bạn có thể phát triển các bảng câu hỏi để đánh giá các khóa học, tìm hiểu sở thích của sinh viên để sử dụng trong một chương trình giáo dục, và các công việc khác mà bạn muốn thu thập thông tin tại địa phương. Đối với các dự án sâu rộng hơn, đặc biệt là những dự án liên quan đến một dự án nghiên cứu, bạn có thể muốn tham khảo ý kiến của một nhà thống kê sinh học, nhà dịch tễ học, hoặc chuyên gia khác có chuyên môn về khảo sát.

Mọi người đều biết về các cuộc khảo sát. Trên thực tế, quan điểm của người bình thường về thống kê phần lớn dựa trên kết quả của các cuộc thăm dò ý kiến và khảo sát thị trường. Nhiều người liên kết các cuộc khảo sát với cuộc điều tra dân số Hoa Kỳ, diễn ra 10 năm một lần, nhưng một cuộc điều tra dân số không thực sự là một cuộc khảo sát. Một cuộc điều tra dân số hỏi tất cả mọi người trong quần thể, trong khi một cuộc khảo sát chỉ hỏi một mẫu từ quần thể.

Thuật ngữ thăm dò ý kiến (poll) thường được liên kết với các cuộc thăm dò chính trị, nhưng nó chỉ đơn giản có nghĩa là đặt câu hỏi để tìm hiểu thông tin hoặc ý kiến.

Xác định Câu hỏi Nghiên cứu

Nhu cầu biết câu trả lời cho một câu hỏi thường là động lực cho nghiên cứu khảo sát, như trong các VẤN ĐỀ TÌNH HUỐNG. Cũng như bất kỳ câu hỏi nghiên cứu nào khác, một bước đầu tiên quan trọng là xem xét y văn để tìm hiểu những gì đã được biết về chủ đề và những phương pháp khác đã được sử dụng trước đây.

Có thể khó xác định các vấn đề chính xác cần được giải quyết trong một cuộc khảo sát. Trong tình huống này, các nhóm tập trung (focus groups) có thể giúp làm rõ các vấn đề. Các nhóm tập trung là các cuộc phỏng vấn một số ít người, thường là 6 đến 10 người, thay vì các cuộc phỏng vấn cá nhân, và được thực hiện trực tiếp hoặc qua điện thoại.

Quyết định Phương pháp Khảo sát

Hầu hết các cuộc khảo sát sử dụng bảng câu hỏi tự điền (self-administered questionnaires)—trực tiếp hoặc qua thư hoặc email, hoặc phỏng vấn (interviews)—cũng trực tiếp hoặc qua điện thoại. Mỗi phương pháp đều có những ưu và nhược điểm, một số trong đó được minh họa trong Bảng 11-1.

Bảng 11-1. Ưu và nhược điểm của các phương pháp khảo sát khác nhau.

Tự điền qua Thư/Email Tự điền Trực tiếp Phỏng vấn qua Điện thoại Phỏng vấn Trực tiếp
Chi phí ++ +
Thời gian ++ +
Tính chuẩn hóa + + +/- +/-
Độ sâu/chi tiết = + ++
Tỷ lệ phản hồi + + ++
Thiếu câu trả lời ++ ++
+, Ưu điểm; -, Nhược điểm; +/-, Trung tính.

Khi các cuộc phỏng vấn được sử dụng cho nghiên cứu khảo sát, chúng thường được gọi là phỏng vấn có cấu trúc (structured interviews), trong đó các câu hỏi giống nhau được đưa ra cho mỗi đối tượng theo cùng một thứ tự, và không được phép gợi ý.

Các cuộc khảo sát thường được coi là cắt ngang (cross-sectional) và đo lường tình hình hiện tại, và chắc chắn hầu hết các cuộc khảo sát đều thuộc loại này. Tuy nhiên, các bảng câu hỏi cũng được sử dụng trong các nghiên cứu đoàn hệ và bệnh-chứng.

PHÁT TRIỂN CÁC CÂU HỎI

Có nhiều cách để đặt câu hỏi, và các nhà thiết kế khảo sát muốn trình bày các câu hỏi sao cho chúng rõ ràng và thu được thông tin mong muốn.

Quyết định Định dạng Câu hỏi—Mở và Đóng:

Câu hỏi mở (Open-ended questions) là những câu hỏi cho phép đối tượng trả lời bằng lời của chính họ. Chúng đôi khi phù hợp, như được trình bày trong Bảng 11-2. Câu hỏi đóng (Closed-response questions) khó viết hơn, nhưng lợi ích của chúng là dễ dàng phân tích và báo cáo câu trả lời. Một ví dụ về câu hỏi mở và đóng được đưa ra trong Hộp 11-1.

Bảng 11-2. Câu hỏi mở và câu hỏi đóng.

Sử dụng câu hỏi Mở Sử dụng câu hỏi Đóng
Mục đích Lời lẽ hoặc trích dẫn thực tế Các câu trả lời phổ biến nhất
Người trả lời Có khả năng cung cấp câu trả lời bằng lời của họ Sẵn lòng trả lời chỉ khi dễ và nhanh; có thể viết không rõ ràng
Đặt câu hỏi Các lựa chọn chưa được biết Các lựa chọn có thể được dự đoán trước
Phân tích kết quả Phân tích nội dung; tốn thời gian Đếm hoặc tính điểm
Báo cáo kết quả Các câu trả lời riêng lẻ hoặc được nhóm lại Dữ liệu thống kê

 

HỘP 11-1. CÂU HỎI MỞ VÀ CÂU HỎI ĐÓNG.

Câu hỏi Mở: Tầm quan trọng của danh tiếng trong việc lựa chọn một chương trình fellowship là gì?
Vui lòng mô tả:

Câu hỏi Đóng: Tầm quan trọng của danh tiếng trong việc lựa chọn một chương trình fellowship là gì?

☐ Chắc chắn quan trọng
☐ Có lẽ quan trọng
☐ Có lẽ không quan trọng
☐ Chắc chắn không quan trọng

Quyết định Thang đo cho Câu trả lời:

Nếu sử dụng câu hỏi đóng, nhà nghiên cứu cần quyết định mức độ chi tiết cần thiết trong các câu trả lời. Thang đo giúp xác định phương pháp nào có thể được sử dụng để phân tích kết quả.

Đôi khi chỉ cần biết liệu một đối tượng có đồng ý với câu hỏi hay không là đủ (danh nghĩa), như trong Hộp 11-2. Một thang đo thứ tự có thể được sử dụng nếu muốn biết các mức độ quan trọng.

 

HỘP 11-2. LỰA CHỌN THANG ĐO CHO CÂU HỎI.

Danh nghĩa: Môi trường thành phố lớn có quan trọng trong việc lựa chọn một chương trình fellowship không?

☐ Có ☐ Không

Thứ tự: Môi trường thành phố lớn quan trọng như thế nào trong việc lựa chọn một chương trình fellowship?

☐ Chắc chắn quan trọng
☐ Hơi quan trọng
☐ Không quan trọng
☐ Hơi không quan trọng
☐ Chắc chắn không quan trọng

Một thành phố lớn như thế nào là quan trọng trong việc lựa chọn một chương trình fellowship?

☐ 25.000 hoặc ít hơn
☐ 25.001 đến 50.000
☐ 50.001 đến 100.000
☐ 100.001 đến 500.000
☐ Lớn hơn 500.000

Định lượng: Một thành phố lớn như thế nào là quan trọng trong việc lựa chọn một chương trình fellowship? ________________ dân số

Cân bằng các Loại Tích cực và Tiêu cực:

Các câu hỏi sử dụng thang đo thứ tự nên cung cấp số lượng lựa chọn tích cực bằng với số lượng lựa chọn tiêu cực. Hộp 11-3 cho thấy hai bộ lựa chọn. Bộ thứ hai có khả năng cung cấp các câu trả lời hợp lệ hơn, với câu trả lời trung lập ở vị trí giữa và cùng số lượng lựa chọn tích cực và tiêu cực.

 

HỘP 11-3. CÁC CÂU TRẢ LỜI CÂN BẰNG.

Vấn đề: Bạn hài lòng như thế nào với Khóa học Giới thiệu về Y học Lâm sàng?

☐ Hoàn toàn hài lòng
☐ Hầu như hài lòng
☐ Hơi hài lòng
☐ Bình thường
☐ Không hài lòng

Chỉnh sửa để cân bằng câu trả lời:

Bạn hài lòng như thế nào với Khóa học Giới thiệu về Y học Lâm sàng?

☐ Hoàn toàn hài lòng
☐ Hầu như hài lòng
☐ Bình thường
☐ Hầu như không hài lòng
☐ Hoàn toàn không hài lòng

Tránh các Từ định tính Mơ hồ:

Các vấn đề tiềm ẩn trong việc sử dụng các thuật ngữ như thỉnh thoảng, thường xuyên, hiếm khi, v.v. là gì?

Hộp 11-4 minh họa hai câu hỏi hỏi về lượng rượu tiêu thụ hàng tuần. Các lựa chọn chỉ định số lượng đồ uống thực tế ít mơ hồ hơn nhiều và sẽ dễ diễn giải hơn.

 

HỘP 11-4. TRÁNH CÁC TỪ ĐỊNH TÍNH MƠ HỒ.

Vấn đề: Bạn đã uống bao nhiêu đồ uống có cồn trong tuần qua?

☐ Không
☐ Một vài
☐ Vài
☐ Nhiều

Chỉnh sửa để bớt mơ hồ:

Bạn đã uống bao nhiêu đồ uống có cồn trong tuần qua?

☐ Không
☐ 1-5
☐ 6-10
☐ 11-20
☐ >20

Sử dụng các Loại trừ lẫn nhau:

Ví dụ, câu hỏi trong Hộp 11-5 gây nhầm lẫn vì nó đang trộn lẫn các hoạt động giáo dục và các nguồn thông tin. Giải pháp dễ nhất là tạo ra hai câu hỏi, mỗi câu hỏi có các câu trả lời loại trừ lẫn nhau.

 

HỘP 11-5. CÁC LOẠI KHÔNG ĐỒNG NHẤT VÀ LOẠI TRỪ LẪN NHAU.

Vấn đề: Nguồn nào sau đây đã cung cấp cho bạn nhiều thông tin nhất về việc cai thuốc lá?

☐ Đào tạo tại trường y
☐ Đào tạo nội trú
☐ Bác sĩ hướng dẫn
☐ Đồng nghiệp
☐ Tạp chí y khoa in
☐ Trang web hoặc tài nguyên liên quan đến web khác
☐ Sách/tờ rơi đã xuất bản
☐ Trình dược viên

Chỉnh sửa để loại trừ lẫn nhau:Kinh nghiệm giáo dục nào đã cung cấp cho bạn nhiều thông tin nhất về việc cai thuốc lá?
☐ Đào tạo tại trường y

☐ Đào tạo nội trú
☐ Đào tạo liên tục

Nguồn nào đã cung cấp cho bạn nhiều thông tin nhất về việc cai thuốc lá?

☐ Đồng nghiệp
☐ Tạp chí y khoa in
☐ Trang web hoặc tài nguyên liên quan đến web khác
☐ Sách/tờ rơi đã xuất bản
☐ Trình dược viên

Các câu hỏi có khả năng gây khó chịu:

Một số câu hỏi được xem là rất cá nhân, và mọi người ngần ngại tiết lộ thông tin. Ví dụ bao gồm thu nhập, hoạt động tình dục, và các thói quen cá nhân; xem Hộp 11-6. Có thể làm mềm cách đặt câu hỏi, có lẽ bằng cách yêu cầu ít chi tiết hơn.

 

HỘP 11-6. LÀM MỀM CÁC CÂU HỎI CÓ KHẢ NĂNG GÂY KHÓ CHỊU.
Vấn đề: Tổng thu nhập của bạn từ tất cả các nguồn trong năm 2019 là bao nhiêu? ___________</span><span style="font-size: 14pt; font-family: helvetica, arial, sans-serif;"><strong>Làm mềm câu hỏi khó chịu:</strong></span> <span style="font-size: 14pt; font-family: helvetica, arial, sans-serif;">Loại nào trong số các loại rộng sau đây mô tả đúng nhất tổng thu nhập của bạn từ tất cả các nguồn trong năm 2019?</span> <span style="font-size: 14pt; font-family: helvetica, arial, sans-serif;">☐10.000 hoặc ít hơn

10.001 đến20.000
20.001 đến35.000
35.001 đến50.000
50.001 đến100.000
☐ Hơn $100.000

Các mục Chọn tất cả những gì áp dụng:

Các mục mà đối tượng có thể chọn nhiều lựa chọn tùy ý thường được sử dụng. Tuy nhiên, chúng có thể khó phân tích. Cách tiếp cận tốt nhất là coi mỗi lựa chọn như một biến có/không và tính toán tỷ lệ phần trăm mỗi lần nó được chọn.

Sử dụng “Không biết”:

Không có sự đồng thuận nào trong việc sử dụng loại “Không biết” hoặc “Chưa quyết định”. Một số nhà nghiên cứu không thích cung cấp cơ hội cho một đối tượng không cam kết một câu trả lời. Những người khác chỉ ra rằng không cung cấp loại lựa chọn này buộc người trả lời phải chỉ ra những ý kiến mà họ không thực sự có.

Xếp hạng và Đánh giá:

Nhìn chung, các đối tượng nhầm lẫn các thang đo xếp hạng trong đó họ được yêu cầu xếp hạng một số lựa chọn từ 1 đến bất kỳ. Chúng tôi tin rằng việc xếp hạng các lựa chọn là tốt khi nhà nghiên cứu muốn biết lựa chọn nào được hầu hết các đối tượng xem là “tốt nhất”. Chọn 3 lựa chọn hàng đầu cũng hoạt động tốt.

Các vấn đề liên quan đến Thang đo

Các thang đo Likert thường được sử dụng trên nhiều cuộc khảo sát. Chúng cho phép các câu trả lời từ “hoàn toàn không đồng ý” đến “hoàn toàn đồng ý”, từ “quan trọng nhất” đến “ít quan trọng nhất”, v.v. Hộp 11-8 cho thấy một đoạn trích từ một cuộc khảo sát trong đó một số câu hỏi được hỏi về chất lượng của một chương trình fellowship.

1. Danh tiếng xuất sắc trên toàn quốc 2. Vị trí học thuật của các học viên tốt nghiệp 3. Nổi tiếng về nghiên cứu trong lĩnh vực bạn quan tâm

Không có sự đồng thuận nào trong y văn khảo sát về số lượng các loại cần sử dụng. Một số chẵn các loại, như câu hỏi đầu tiên trong Hộp 11-9, buộc người trả lời phải chọn một mức độ quan trọng hoặc không quan trọng nào đó, ngay cả khi họ hoàn toàn trung lập. Sở thích cá nhân của chúng tôi là một số lẻ các loại với năm hoặc bảy loại.

HỘP 11-9. SỐ LƯỢNG LỰA CHỌN TRẢ LỜI.

Số chẵn
Môi trường thành phố lớn quan trọng như thế nào trong việc lựa chọn một chương trình fellowship?
☐ Chắc chắn quan trọng

☐ Hơi quan trọng
☐ Hơi không quan trọng
☐ Chắc chắn không quan trọng

Số lẻ
Môi trường thành phố lớn quan trọng như thế nào trong việc lựa chọn một chương trình fellowship?

☐ Chắc chắn quan trọng
☐ Hơi quan trọng
☐ Không quan trọng
☐ Hơi không quan trọng
☐ Chắc chắn không quan trọng

BỐ CỤC BẢNG CÂU HỎI

Không có quy tắc cứng nhắc nào quy định cách định dạng một bảng câu hỏi, nhưng một số hướng dẫn chung, hợp lý được áp dụng. Vấn đề đầu tiên là độ dài; mặc dù các cuộc khảo sát ngắn hơn thường được ưa thích hơn các cuộc khảo sát dài hơn, Dillman và cộng sự (2014) trích dẫn một số nghiên cứu cho thấy các bảng câu hỏi dài tới bốn trang có tỷ lệ phản hồi tương tự.

Hầu hết các nhà nghiên cứu chọn đặt các câu hỏi dễ hơn trước và liệt kê các câu hỏi theo thứ tự logic để các câu hỏi về cùng một chủ đề được nhóm lại với nhau. Mặc dù không có sự đồng thuận nào về việc đặt các mục nhân khẩu học ở đầu hay cuối bảng câu hỏi, chúng tôi chọn đặt ở cuối.

ĐỘ TIN CẬY VÀ ĐỘ GIÁ TRỊ CỦA CÁC CÔNG CỤ KHẢO SÁT

Chúng tôi khuyên các nhà nghiên cứu nên sử dụng các bảng câu hỏi hoặc công cụ hiện có nếu có thể. Điều này không chỉ tiết kiệm thời gian và công sức trong việc phát triển bảng câu hỏi, mà còn tránh được sự cần thiết phải thiết lập độ tin cậy và độ giá trị của công cụ.

Các cách đo lường Độ tin cậy

Câu hỏi cơ bản được trả lời bởi độ tin cậy (reliability) là kết quả sẽ có thể tái lập được như thế nào nếu cùng một phép đo được thực hiện lặp đi lặp lại trên cùng một đối tượng.

Năm loại độ tin cậy khác nhau được liệt kê trong Bảng 11-3. Khả năng của một công cụ cung cấp cùng một phép đo vào những dịp khác nhau được gọi là độ tin cậy kiểm tra lại (test-retest reliability). Bởi vì khó có thể thực hiện cùng một công cụ cho cùng một người vào nhiều hơn một dịp, các nhà phát triển bảng câu hỏi và các cơ quan kiểm tra thường sử dụng độ tin cậy nhất quán nội tại (internal consistency reliability) như một ước tính của độ tin cậy kiểm tra lại.

Bảng 11-3. Các loại độ tin cậy.

Loại Đặc điểm Cách đo lường
Kiểm tra lại Các câu trả lời ổn định theo thời gian Thực hiện hai lần (thường được ước tính)
Nhất quán nội tại Sự thống nhất giữa các mục (đo lường cùng một thứ) Cronbach’s alpha (“tương quan trung bình”)
Dạng thay thế Các mục khác nhau đo lường cùng một chủ đề Tương quan giữa các điểm của các mục
Nội quan sát viên Quan sát viên nhất quán Tương quan nội lớp hoặc thống kê McNemar
Liên quan sát viên Các quan sát viên khác nhau đồng ý Tương quan nội lớp hoặc kappa

Độ tin cậy nhất quán nội tại của các mục trên công cụ hoặc bảng câu hỏi cho biết các mục có liên quan chặt chẽ với nhau như thế nào; tức là, liệu chúng có đang đo lường một đặc điểm duy nhất hay không. Các cơ quan kiểm tra đôi khi gọi độ tin cậy nhất quán nội tại là Cronbach’s alpha.

Độ giá trị của các Phép đo

Độ giá trị (Validity) là một thuật ngữ chỉ mức độ một công cụ (hoặc quy trình đo lường) đo lường được những gì nó có ý định đo lường.

Các thước đo độ giá trị thường được sử dụng là độ giá trị nội dung (content validity), bề mặt (face validity), tiêu chí (criterion validity), và cấu trúc (construct validity). Bảng 11-4 tóm tắt các loại độ giá trị.

Bảng 11-4. Các loại độ giá trị.

Loại Đặc điểm Cách đo lường
Nội dung Sự phù hợp của nội dung bởi các chuyên gia Chủ quan
Bề mặt Trông có vẻ đúng mục tiêu bởi những người không phải chuyên gia Chủ quan
Tiêu chí-đồng thời Có liên quan đến các kỹ năng tương tự tại thời điểm hiện tại Tương quan giữa các điểm trên các công cụ
Tiêu chí-dự báo Dự đoán các kỹ năng tương tự trong tương lai Tương quan giữa các điểm trên các công cụ
Cấu trúc (hội tụ & phân kỳ) Thước đo lý thuyết Tương quan với các thước đo khác

QUẢN LÝ CÁC CUỘC KHẢO SÁT

Một số vấn đề liên quan đến việc thiết kế và quản lý các bảng câu hỏi, cùng với các khuyến nghị từ y văn nghiên cứu khảo sát, được liệt kê trong Bảng 11-5.

Bảng 11-5. Tóm tắt các vấn đề liên quan đến việc quản lý bảng câu hỏi.

Vấn đề Ảnh hưởng đến thành công của Khảo sát
Tỷ lệ phản hồi Nên từ 50% đến 85%
Theo dõi Bốn đến năm lần mỗi 2 tuần làm tăng đáng kể tỷ lệ phản hồi
Thử nghiệm sơ bộ Rất quan trọng đối với sự thành công của bất kỳ cuộc khảo sát nào
Thư ngỏ Cung cấp mục đích của khảo sát và tại sao phản hồi là quan trọng
Thông báo trước Tăng tỷ lệ phản hồi từ 7-8%
Phong bì có dán tem trả lời Tăng tỷ lệ phản hồi từ 6-9%
Cung cấp khuyến khích cùng khảo sát
Bằng tiền Tăng tỷ lệ phản hồi từ 16-30%
Không bằng tiền Tăng tỷ lệ phản hồi khoảng 8%
Bưu phí hạng nhất, tem Tăng nhẹ
Màu sắc của bảng câu hỏi Không có ảnh hưởng nào được biết đến
Tính bảo mật Phải được đảm bảo; được yêu cầu bởi các IRB

Thử nghiệm Sơ bộ

Hầu như mọi người đã tham khảo ý kiến của tác giả về thiết kế bảng câu hỏi đều than thở, một khi có kết quả, rằng họ ước gì đã bao gồm một câu hỏi khác, hoặc hỏi một câu hỏi theo một cách khác. Thử nghiệm sơ bộ (Pilot test) được thực hiện sau khi bảng câu hỏi được thiết kế nhưng trước khi nó được in hoặc chuẩn bị để quản lý. Thử nghiệm sơ bộ có thể tiết lộ rằng mức độ đọc không phù hợp, một số câu hỏi không rõ ràng hoặc gây khó chịu, hoặc hướng dẫn không rõ ràng.

Tỷ lệ Phản hồi

Một tỷ lệ phản hồi (response rate) cao làm tăng sự tin tưởng của chúng ta vào tính hợp lệ của kết quả. Nhiều đề xuất về cách thực hiện theo dõi đã được đưa ra. Sự đồng thuận cho thấy rằng phản hồi tốt nhất xảy ra với ba đến bốn lần theo dõi cách nhau khoảng 2 tuần.

Thông báo trước

Nhiều chuyên gia khảo sát khuyến nghị thông báo trước cho những người sẽ nhận được khảo sát. Thông báo trước (prenotification) có thể được thực hiện bằng thư, điện thoại, hoặc ngày càng nhiều là bằng email.

Thư ngỏ và Phong bì Trả lời

Nếu một bảng câu hỏi được quản lý trực tiếp, không cần thiết phải có thư ngỏ (cover letter). Nếu không, nó là điều cần thiết. Thư ngỏ nên ngắn gọn, phù hợp, trên giấy tiêu đề, và có chữ ký.

Khuyến khích

Việc cung cấp khuyến khích (incentives) để hoàn thành một bảng câu hỏi là gây tranh cãi, nhưng nghiên cứu đã cho thấy rằng nó có thể làm tăng tỷ lệ phản hồi nhiều hơn bất kỳ hành động đơn lẻ nào khác, ngoại trừ việc theo dõi lặp đi lặp lại.

Tính ẩn danh và Bảo mật

Thư ngỏ nên chứa thông tin về tính ẩn danh (anonymity) hoặc bảo mật (confidentiality). Tùy thuộc vào mục đích và độ nhạy cảm của bảng câu hỏi, có thể nên làm cho các câu trả lời hoàn toàn ẩn danh.

LỰA CHỌN MẪU & XÁC ĐỊNH N

Nghiên cứu khảo sát được thực hiện đúng cách dựa trên nguyên tắc rằng một mẫu được chọn ngẫu nhiên có thể đại diện cho các câu trả lời của tất cả mọi người.

Ôn tập các Phương pháp Lấy mẫu

Chúng ta đã thảo luận về các phương pháp lấy mẫu ngẫu nhiên trong Chương 4 và xem xét chúng rất ngắn gọn ở đây. Một mẫu ngẫu nhiên đơn giản (simple random sample) là một mẫu trong đó mọi đối tượng đều có cơ hội được chọn như nhau. Một mẫu ngẫu nhiên hệ thống (systematic random sample) là một mẫu trong đó mọi mục thứ k được chọn. Một mẫu ngẫu nhiên phân tầng (stratified random sample) là một mẫu trong đó quần thể trước tiên được chia thành các tầng hoặc các nhóm con, và sau đó một mẫu ngẫu nhiên được chọn từ mỗi tầng. Một mẫu ngẫu nhiên cụm (cluster random sample) xảy ra khi quần thể được chia thành các cụm và một tập hợp con của các cụm được chọn ngẫu nhiên.

Tìm Cỡ mẫu cho một Khảo sát

Khi xác định cỡ mẫu, chúng ta trước tiên hỏi, “Kết cục nghiên cứu là gì?” Đó là tỷ lệ phần trăm những người trả lời theo một cách nhất định? Câu trả lời “trung bình”? Sự khác biệt giữa hai hoặc nhiều loại người trả lời? hoặc, Mối quan hệ giữa các câu hỏi?

Dyrbye và cộng sự (2018) muốn ước tính tỷ lệ phần trăm các bác sĩ nội trú báo cáo các triệu chứng kiệt sức. Họ có thể đã kỳ vọng rằng khoảng 50% sẽ xem nghiên cứu là một yếu tố quan trọng. Sử dụng chương trình G*Power, chúng ta thấy từ Hộp 11-10 rằng một mẫu 199 là đủ cho một khoảng tin cậy 95% nếu tỷ lệ là khoảng 50% và chúng ta muốn phát hiện một sự thay đổi 10% so với 50%.

HỘP 11-10. TÍNH TOÁN CỠ MẪU GPOWER ĐỂ ƯỚC TÍNH TỶ LỆ PHẦN TRĂM CÁC BÁC SĨ NỘI TRÚ CÓ TRIỆU CHỨNG KIỆT SỨC.*

 

HỘP 11-11. VÍ DỤ SỬ DỤNG GPOWER ĐỂ TÍNH CỠ MẪU CẦN THIẾT ĐỂ ƯỚC TÍNH TRUNG BÌNH TỪ KHẢO SÁT.*

PHÂN TÍCH KẾT QUẢ KHẢO SÁT

Hầu như tất cả các quy trình thống kê chúng ta đã thảo luận trong Chương 3 đến 10 đều được sử dụng để phân tích dữ liệu khảo sát. Các khoảng tin cậy cho các tỷ lệ, trung bình, sự khác biệt giữa các tỷ lệ hoặc trung bình, và các tương quan đều có liên quan, ngoài ra còn có chi-bình phương và các phép kiểm phi tham số khác; các phép kiểm t; phân tích phương sai; và hồi quy, bao gồm cả hồi quy logistic.

Phân tích Brtnikova và Cộng sự

Brtnikova và cộng sự đã sử dụng các phép kiểm chi-bình phương và các thống kê mô tả để mô tả tác động của các mô hình khảo sát khác nhau lên tỷ lệ phản hồi. Bảng 11-6 được sao chép từ nghiên cứu và liệt kê một số đặc điểm của người trả lời và tỷ lệ phản hồi. Các giá trị p là kết quả của các phép kiểm chi-bình phương cho sự liên kết của đặc điểm mẫu và mức độ phản hồi.

Bảng 11-6. Phản hồi Khảo sát theo Đặc điểm Mẫu.

Đặc điểm Không phản hồi tất cả các khảo sát (n=2111, 55%) % Cột Phản hồi tất cả các khảo sát (n=1740, 45%) % Cột giá trị p
Chuyên khoa <.0001
Y học gia đình 36.7 28.7
Nội khoa tổng quát 18.4 28.0
Nhi khoa 45.0 43.3
Nam, % 52.1 51.2 0.57
Tuổi nhà cung cấp 0.01
Dưới 40 19.3 17.3
40-49 32.0 28.7
50-59 31.8 36.1
Trên 60 17.0 17.9
Bối cảnh thực hành, %
Phòng khám tư 76.9 77.5 0.12
Peds, bác sĩ nhi; FM, bác sĩ y học gia đình; GIM, bác sĩ nội khoa tổng quát; HMO, tổ chức bảo trì sức khỏe; MCO, tổ chức chăm sóc được quản lý.

Phân tích Robbins và Cộng sự

Một tình huống chúng ta chưa thảo luận trước đây là việc sử dụng trọng số (weights) trong phân tích dữ liệu. Như chúng ta đã đề cập với các mẫu phân tầng, không phải tất cả các đối tượng đều đại diện cho cùng một số lượng các đối tượng không được lấy mẫu.

Robbins và cộng sự (2018) đã phải bao gồm các trọng số để phản ánh một kế hoạch lấy mẫu phức tạp. Dữ liệu của họ là từ Khảo sát Chăm sóc Y tế Ngoại trú Quốc gia (NAMCS) từ năm 2005 đến 2012.

TÓM TẮT

Chúng tôi đã thảo luận ba bài báo khảo sát trong chương này. Brtnikova và cộng sự (2018) đã nghiên cứu các yếu tố ảnh hưởng đến tỷ lệ phản hồi cho các cuộc khảo sát của các bác sĩ. Dyrbye và cộng sự (2018) đã nghiên cứu các yếu tố có thể dẫn đến kiệt sức của bác sĩ. Robbins và cộng sự (2018) đã đánh giá các mô hình trong việc quản lý ngưng thở khi ngủ của bác sĩ cho các bệnh nhân bị tăng huyết áp.

Chúng tôi đã xem xét một số yếu tố quan trọng khi thiết kế và quản lý một cuộc khảo sát. Chúng tôi chỉ cung cấp một cái nhìn tổng quan chung về nghiên cứu khảo sát, nhưng đã cung cấp một số tài liệu tham khảo cho những độc giả muốn tìm hiểu thêm.

BÀI TẬP THỰC HÀNH

  1. Những khó khăn, nếu có, với các cuộc khảo sát sau đây là gì: a. Các bảng câu hỏi được phát trên máy bay để đo lường sự hài lòng của khách hàng b. Một cuộc thăm dò ý kiến trong đó mọi người đăng nhập vào Internet và bỏ phiếu về một vấn đề c. Các bảng câu hỏi về sự hài lòng được gửi qua thư cho tất cả các bệnh nhân bởi các bệnh viện và phòng khám d. Yêu cầu sinh viên nộp một bản đánh giá khóa học trước khi nhận được điểm cuối kỳ
  2. Nếu bạn muốn phân tích thông tin trong Bảng 11-6 bằng các phương pháp thống kê, bạn sẽ sử dụng quy trình nào?
  3. Một bác sĩ nhi khoa đang có kế hoạch khảo sát phụ huynh của một mẫu ngẫu nhiên các bệnh nhân và muốn biết con họ xem TV bao nhiêu giờ mỗi tháng. Bạn sẽ hỏi câu hỏi này như thế nào?
  4. Một quản lý phòng khám muốn khảo sát một mẫu ngẫu nhiên các bệnh nhân để tìm hiểu xem họ nhìn nhận như thế nào về một số thay đổi gần đây được thực hiện trong hoạt động của phòng khám. Người quản lý đã soạn thảo một bảng câu hỏi và muốn bạn xem xét nó. Một trong những câu hỏi hỏi, “Bạn có đồng ý rằng giờ làm việc mới của phòng khám là một sự cải thiện so với giờ làm việc cũ không?” Bạn sẽ đưa ra lời khuyên gì cho người quản lý về cách diễn đạt của câu hỏi này?
  5. Giả sử bạn muốn biết các bác sĩ sẵn lòng đi bao xa để tham dự một khóa học đào tạo liên tục, giả sử rằng một số giờ nhất định được yêu cầu mỗi năm. Ngoài ra, bạn muốn tìm hiểu các chủ đề họ muốn được bao gồm trong các chương trình trong tương lai. Bạn có kế hoạch công bố kết quả nghiên cứu của mình. Bạn sẽ chọn mẫu các bác sĩ để bao gồm trong cuộc khảo sát của mình như thế nào? a. Tất cả các bác sĩ đã tham dự các chương trình của năm ngoái b. Tất cả các bác sĩ tham dự hai chương trình sắp tới c. Một mẫu ngẫu nhiên các bác sĩ đã tham dự các chương trình của năm ngoái d. Một mẫu ngẫu nhiên các bác sĩ được lấy từ một danh sách do hội y khoa tiểu bang duy trì e. Một mẫu ngẫu nhiên các bác sĩ ở mỗi quận được lấy từ một danh sách do các hội y khoa quận duy trì

Bảng Chú giải Thuật ngữ Thống kê Anh – Việt (Chương 11)

STT Thuật ngữ tiếng Anh Phiên âm Nghĩa Tiếng Việt
1 Survey Research /ˈsɜːrveɪ rɪˈsɜːrtʃ/ Nghiên cứu Khảo sát
2 Focus groups /ˈfoʊkəs ɡruːps/ Nhóm tập trung
3 Interviews /ˈɪntərvjuːz/ Phỏng vấn
4 Self-administered questionnaires /self ədˈmɪnɪstərd ˌkwestʃəˈnerz/ Bảng câu hỏi tự điền
5 Response scales /rɪˈspɒns skeɪlz/ Thang đo trả lời
6 Bias /ˈbaɪəs/ Sai lệch, Thiên kiến
7 Open-ended questions /ˈoʊpən ˈendɪd ˈkwestʃənz/ Câu hỏi mở
8 Nominal scale /ˈnɒmɪnəl skeɪl/ Thang đo danh nghĩa
9 Ordinal scale /ˈɔːrdɪnəl skeɪl/ Thang đo thứ tự
10 Numerical scale /njuːˈmerɪkəl skeɪl/ Thang đo định lượng
11 Vague adjectives /veɪɡ ˈædʒɪktɪvz/ Các tính từ mơ hồ
12 Homogeneous categories /ˌhoʊməˈdʒiːniəs ˈkætəɡɔːriz/ Các loại đồng nhất
13 Mutually exclusive categories /ˈmjuːtʃuəli ɪkˈskluːsɪv ˈkætəɡɔːriz/ Các loại loại trừ lẫn nhau
14 Ranking scales /ˈræŋkɪŋ skeɪlz/ Thang đo xếp hạng
15 Likert scales /ˈlaɪkərt skeɪlz/ Thang đo Likert
16 Reliability /rɪˌlaɪəˈbɪləti/ Độ tin cậy
17 Reproducible /ˌriːprəˈduːsəbəl/ Có thể tái lập, có thể lặp lại
18 Validity /vəˈlɪdəti/ Độ giá trị
19 Pilot testing /ˈpaɪlət ˈtestɪŋ/ Thử nghiệm sơ bộ
20 Response rate /rɪˈspɒns reɪt/ Tỷ lệ phản hồi
21 Follow-up /ˈfɒloʊ ʌp/ Theo dõi
22 Cover letter /ˈkʌvər ˈletər/ Thư ngỏ
23 Incentives /ɪnˈsentɪvz/ Các hình thức khuyến khích
24 Confidential /ˌkɒnfɪˈdenʃəl/ Bảo mật
25 Sampling methods /ˈsæmplɪŋ ˈmeθədz/ Các phương pháp lấy mẫu
26 Patient Dignity Inventory (PDI) /ˈpeɪʃənt ˈdɪɡnəti ˈɪnvəntɔːri/ Bảng kiểm Phẩm giá Bệnh nhân
27 Validity and reliability /vəˈlɪdəti ənd rɪˌlaɪəˈbɪləti/ Độ giá trị và độ tin cậy
28 Reminder methods /rɪˈmaɪndər ˈmeθədz/ Các phương pháp nhắc nhở
29 Specialties /ˈspeʃəltiz/ Các chuyên khoa
30 Urinary tract infections (UTIs) /ˈjʊərɪneri trækt ɪnˈfekʃənz/ Nhiễm trùng đường tiết niệu
31 Bacterial infections /bækˈtɪəriəl ɪnˈfekʃənz/ Nhiễm khuẩn
32 Outpatient visits /ˈaʊtˌpeɪʃənt ˈvɪzɪts/ Lượt khám ngoại trú
33 Hospital admissions /ˈhɒspɪtəl ədˈmɪʃənz/ Lượt nhập viện
34 Escherichia coli /ˌɛʃəˈrɪkiə ˈkoʊlaɪ/ Vi khuẩn Escherichia coli (E. coli)
35 Empirically /ɪmˈpɪrɪkli/ Theo kinh nghiệm
36 Trimethoprim-sulfamethoxazole /traɪˈmeθəprɪm ˌsʌlfəməˈθɒksəzoʊl/ Trimethoprim-sulfamethoxazole
37 Fluoroquinolones /ˌflʊərəʊˈkwɪnəloʊnz/ Các fluoroquinolone
38 Second-line choices /ˈsekənd laɪn ˈtʃɔɪsɪz/ Các lựa chọn hàng thứ hai
39 Health care costs /helθ ker kɒsts/ Chi phí chăm sóc sức khỏe
40 Drug therapy /drʌɡ ˈθerəpi/ Liệu pháp dùng thuốc
41 Emergence of resistance /ɪˈmɜːrdʒəns əv rɪˈzɪstəns/ Sự xuất hiện của tình trạng kháng thuốc
42 Demographics /ˌdeməˈɡræfɪks/ Đặc điểm nhân khẩu học
43 Clinical characteristics /ˈklɪnɪkəl ˌkærəktəˈrɪstɪks/ Đặc điểm lâm sàng
44 Primary care physicians /ˈpraɪmeri ker fɪˈzɪʃənz/ Bác sĩ chăm sóc ban đầu
45 Specialists /ˈspeʃəlɪsts/ Bác sĩ chuyên khoa
46 Polls /poʊlz/ Các cuộc thăm dò ý kiến
47 Marketing surveys /ˈmɑːrkɪtɪŋ ˈsɜːrveɪz/ Các cuộc khảo sát thị trường
48 U.S. census /juː es ˈsensəs/ Điều tra dân số Hoa Kỳ
49 Population /ˌpɒpjuˈleɪʃən/ Quần thể
50 Sample /ˈsæmpəl/ Mẫu
51 Research question /rɪˈsɜːrtʃ ˈkwestʃən/ Câu hỏi nghiên cứu
52 Literature review /ˈlɪtərətʃər rɪˈvjuː/ Tổng quan y văn
53 MEDLINE search /ˈmedlaɪn sɜːrtʃ/ Tìm kiếm trên MEDLINE
54 In-person interview /ɪn ˈpɜːrsən ˈɪntərvjuː/ Phỏng vấn trực tiếp
55 Telephone interview /ˈtelɪfoʊn ˈɪntərvjuː/ Phỏng vấn qua điện thoại
56 Mail survey /meɪl ˈsɜːrveɪ/ Khảo sát qua thư
57 Email survey /ˈiːmeɪl ˈsɜːrveɪ/ Khảo sát qua email
58 Standardization /ˌstændərdaɪˈzeɪʃən/ Tính chuẩn hóa
59 Structured interviews /ˈstrʌktʃərd ˈɪntərvjuːz/ Phỏng vấn có cấu trúc
60 Cross-sectional /krɒs ˈsekʃənəl/ Cắt ngang
61 Cohort studies /ˈkoʊhɔːrt ˈstʌdiz/ Nghiên cứu đoàn hệ
62 Case-control studies /keɪs kənˈtroʊl ˈstʌdiz/ Nghiên cứu bệnh-chứng
63 Content analysis /ˈkɒntent əˈnæləsɪs/ Phân tích nội dung
64 Scoring /ˈskɔːrɪŋ/ Chấm điểm, tính điểm
65 Statistical data /stəˈtɪstɪkəl ˈdeɪtə/ Dữ liệu thống kê
66 Fellowship /ˈfeloʊʃɪp/ Chương trình đào tạo sau đại học (fellowship)
67 Neutral answer /ˈnjuːtrəl ˈænsər/ Câu trả lời trung lập
68 Dissatisfaction /ˌdɪsˌsætɪsˈfækʃən/ Sự không hài lòng
69 Vague qualifiers /veɪɡ ˈkwɒlɪfaɪərz/ Các từ định tính mơ hồ
70 Alcoholic beverages /ˌælkəˈhɒlɪk ˈbevərɪdʒɪz/ Đồ uống có cồn
71 Nonhomogeneous categories /ˌnɒnhoʊməˈdʒiːniəs ˈkætəɡɔːriz/ Các loại không đồng nhất
72 Educational experience /ˌedʒuˈkeɪʃənəl ɪkˈspɪəriəns/ Kinh nghiệm giáo dục
73 Residency training /ˈrezɪdənsi ˈtreɪnɪŋ/ Đào tạo nội trú
74 Continuing education /kənˈtɪnjuɪŋ ˌedʒuˈkeɪʃən/ Đào tạo liên tục
75 Printed medical journal /ˈprɪntɪd ˈmedɪkəl ˈdʒɜːrnəl/ Tạp chí y khoa in
76 Web-related resource /web rɪˈleɪtɪd ˈriːsɔːrs/ Tài nguyên liên quan đến web
77 Drug salesperson /drʌɡ ˈseɪlzpɜːrsən/ Trình dược viên
78 Potentially objectionable questions /pəˈtenʃəli əbˈdʒekʃənəbəl ˈkwestʃənz/ Các câu hỏi có khả năng gây khó chịu
79 Total income /ˈtoʊtəl ˈɪnkʌm/ Tổng thu nhập
80 Check-all-that-apply items /tʃek ɔːl ðæt əˈplaɪ ˈaɪtəmz/ Các mục chọn tất cả những gì áp dụng
81 “Don’t Know” option /doʊnt noʊ ˈɒpʃən/ Lựa chọn “Không biết”
82 “Undecided” category /ˌʌndɪˈsaɪdɪd ˈkætəɡɔːri/ Loại “Chưa quyết định”
83 Ranking versus Rating /ˈræŋkɪŋ ˈvɜːrsəs ˈreɪtɪŋ/ Xếp hạng và Đánh giá
84 Questionnaire layout /ˌkwestʃəˈner ˈleɪaʊt/ Bố cục bảng câu hỏi
85 Skipping/branching questions /ˈskɪpɪŋ ˈbræntʃɪŋ ˈkwestʃənz/ Các câu hỏi bỏ qua/rẽ nhánh
86 Demographic items /ˌdeməˈɡræfɪk ˈaɪtəmz/ Các mục nhân khẩu học
87 Survey instruments /ˈsɜːrveɪ ˈɪnstrəmənts/ Các công cụ khảo sát
88 Test-retest reliability /test riːˈtest rɪˌlaɪəˈbɪləti/ Độ tin cậy kiểm tra lại
89 Internal consistency reliability /ɪnˈtɜːrnəl kənˈsɪstənsi rɪˌlaɪəˈbɪləti/ Độ tin cậy nhất quán nội tại
90 Cronbach’s alpha /ˈkrɒnbɑːks ˈælfə/ Hệ số alpha của Cronbach
91 Alternative form reliability /ɔːlˈtɜːrnətɪv fɔːrm rɪˌlaɪəˈbɪləti/ Độ tin cậy dạng thay thế
92 Intraobserver reliability /ˈɪntrə əbˈzɜːrvər rɪˌlaɪəˈbɪləti/ Độ tin cậy nội quan sát viên
93 Interobserver reliability /ˈɪntər əbˈzɜːrvər rɪˌlaɪəˈbɪləti/ Độ tin cậy liên quan sát viên
94 Intraclass correlation coefficient /ˈɪntrəklæs ˌkɒrəˈleɪʃən ˌkoʊɪˈfɪʃənt/ Hệ số tương quan nội lớp
95 Random error (noise) /ˈrændəm ˈerər (nɔɪz)/ Sai số ngẫu nhiên (nhiễu)
96 Systematic error (statistical bias) /ˌsɪstəˈmætɪk ˈerər (stəˈtɪstɪkəl ˈbaɪəs)/ Sai số hệ thống (sai lệch thống kê)
97 Content validity /ˈkɒntent vəˈlɪdəti/ Độ giá trị nội dung
98 Face validity /feɪs vəˈlɪdəti/ Độ giá trị bề mặt
99 Criterion validity /kraɪˈtɪəriən vəˈlɪdəti/ Độ giá trị tiêu chí
100 Construct validity /kənˈstrʌkt vəˈlɪdəti/ Độ giá trị cấu trúc