Cách tiến hành nghiên cứu khoa học sư phạm ứng dụng - 3. Thu thập dữ liệu nghiên cứu

ào hoạt động nhóm...*Đo kĩ năng thao tác	 Thí dụ một số kĩ năng thao tác của học sinh như:Sử dụng dụng cụ, hóa chất.Kĩ năng vẽ bản đồ.Chơi nhạc cụĐánh máy trên máy vi tínhThuyết trình*Đo hành vi/kĩ năng thao tácCollect data on student’s performance or behaviorRating scalesObservation ChecklistsThu thập dữ liệu vềhành vi/kĩ năng của học sinhThang xếp hạngBảng kiểm quan sát*Đo hành vi: Ví dụThang đoVí dụ1Thang xếp hạngTần suất mượn sách trong thư viện nhà trường của HS đó trong 1 tháng vừa qua thế nào? Rất thường xuyên Thường xuyên Thỉnh thoảng Hiếm khi Không bao giờ2Bảng kiểm quan sátHọc sinh đó thường xuyên xung phong lên bảng giải bài tập Toán ở lớp. Có Không*Đo hành viObservationObtrusiveUnobtrusiveQuan sátCông khaiKhông công khaiHọc sinh biết mình được quan sátHọc sinh không biết mình được quan sát Có thể ảnh hưởng đến hành vi của HS, giảm độ giá trị của dữ liệu; những hành vi quan sát được có thể không phải là các hành vi tiêu biểu của HS. Quan sát trong điều kiện tự nhiên đem lại các dữ liệu tin cậy hơn, phản ánh các hành vi tiêu biểu của HS.*Đo thái độGồm 8-12 câu hỏi theo dạng thang LikertMỗi câu hỏi gồm:	- Một mệnh đề mô tả/ đánh giá liên quan đến đối tượng được đo thái độ	- Thang đo với 5 mức độ được sử dụng phổ biếnCác dạng phản hồi có thể sử dụng:	đồng ý, 	tần suất, 	tính tức thì	tính cập nhật, 	tính thiết thựcThang đo thái độ*Đo thái độCác dạng phản hồi:Thang đo thái độĐồng ýHỏi về mức độ đồng ýTần suấtHỏi về tần suất thực hiện một nhiệm vụTính tức thìHỏi về thời điểm bắt đầu thực hiện nhiệm vụ Tính cập nhậtHỏi về thời điểm thực hiện nhiệm vụ gần nhấtTính thiết thựcHỏi về cách sử dụng các nguồn lực (VD: thời gian rảnh rỗi, tiền thưởng...). *Ví dụ về câu hỏi và các dạng phản hồi của thang đo thái độĐồng ýTần suấtTôi thích đọc sách hơn làm một số hoạt động khác. Hoàn toàn đồng ý	Đồng ý	Bình thường Không đồng ý	Hoàn toàn không đồng ýTôi đọc truyện. Hằng ngày 	Hầu hết các ngày Thỉnh thoảng	 	Ít khi	Rất ít khi*Tính tức thìTính cập nhậtBạn bắt đầu làm bài tập khi nào? Ngay trong ngày, .., 	 Cho đến khi tôi có thời gianLần cuối cùng bạn đọc sách là khi nào? Tuần này, ., Hai tháng trướcTính thiết thựcNếu được cho 200.000đ, bạn sẽ sử dụng bao nhiêu tiền để mua sách? 50-70.000đ 	 70-100.000đ 	 100-150.000đ 150-200.000đ*Đo thái độ: Ví dụThang đo thái độ đối với môn ToánMệnh đề khẳng định (Câu 1, 2, 3), Mệnh đề phủ định (Câu 4,5). Mỗi mức độ tương ứng với 1 điểm số (1 đến 5) Lưu ý: Đồng ý với mệnh đề khẳng định được điểm cao hơn. Đồng ý với mệnh đề phủ định được điểm thấp hơnRất không đồng ý Không đồng ý Bình thườngĐồng ýRất đồng ý1Tôi chắc chắn mình có khảnăng học toán.2Cô giáo rất quan tâm đến tiến bộ học toán của tôi.3Kiến thức về toán học sẽgiúp tôi kiếm sống.4Tôi không tin mình có thể giảitoán nâng cao.5Toán học không quan trọng trong công việc của tôi. *Đo thái độ: Ví dụKhoa học kỹ thuật giúp con người sống khoẻ mạnh, thuận lợi và tiện nghi hơn.Chúng ta lệ thuộc quá nhiều vào khoa học.Khoa học khiến cuộc sống thay đổi quá nhanh.Việc am hiểu khoa học không quan trọng trong cuộc sống hằng ngày của tôi.Thang đo thái độ đối với khoa họcCâu mang nghĩa tích cực (câu 1), Câu mang nghĩa không tích cực (câu 2,3,4)Lưu ý: đồng ý với câu mang nghĩa tích cực thì được điểm cao hơn, đồng ý với câu mang nghĩa không tích cực thì được điểm thấp hơn*Lưu ý khi xây dựng thang đoMỗi mệnh đề chỉ nên diễn đạt một ý tưởng/ khái niệm.Sử dụng ngôn ngữ đơn giản.Nếu thang đo gồm nhiều câu hỏi, cần phân chúng thành một số hạng mục. Mỗi hạng mục cần có tên rõ ràng.*Lưu ý khi xây dựng thang đoNêu đầy đủ các mức độ phản hồi, đặc biệt trong thang đo sử dụng với đối tượng nhỏ tuổi và ít kinh nghiệm.Sử dụng hoặc điều chỉnh lại các thang sẵn có cho phù hợp; chỉ xây dựng thang đo mới trong trường hợp thực sự cần thiết.Tôn trọng quyền sở hữu trí tuệ*Xây dựng và thử nghiệm thang đo mới ( Phiếu hỏi, phiếu điều tra, bảng kiểm quan sát, bài kiểm tra)Khi điều chỉnh hoặc xây dựng một thang đo mới, cần thử nghiệm các thang đo.Số lượng mẫu thử không cần nhiều, khoảng từ 10 đến 20 là đủ.Mẫu thử phải tương đương với nhóm NC.Mục đích chính của việc thử nghiệm là đánh giá liệu các câu hỏi có dễ hiểu và có ý nghĩa với nhóm NC hay không.*Khi thu thập dữ liệu, phải đảm bảo các dữ liệu có độ tin cậy và độ giá trị cao.2 - Độ tin cậy và độ giá trị*Độ tin cậyĐộ tin cậy là tính thống nhất, sự nhất quángiữa các lần đo khác nhau và tính ổn định của dữ liệu thu thập được.*Ví dụĐo cân nặng của bạn ANgàyCân nặng(kg)158265362Có điều gì đó bất ổn bởi cân nặng không thể thay đổi quá nhanh như vậy!Các số liệu trên không đáng tin cậy vì không ổn định/ không nhất quán giữa các lần đo khác nhau. Không thể sử dụng các dữ liệu này.*Độ giá trịĐộ giá trị là tính xác thực của các dữ liệu thu thập được. Các dữ liệu có giá trị là phản ánh trung thực kiến thức/hành vi/thái độcần đo*Ví dụVấn đề nghiên cứuThái độ của học sinh với môn Toán có sự tiến triển không?Các mệnh đề trong thang đoTôi thích làm bài tập về nhàMôn Toán rất thú vịTôi thích học Tiếng AnhTôi bắt đầu làm bài tập Vật lý ngay lập tức*Nhận xét: Trong 4 câu để thu thập dữ liệu, chỉ có câu 2 là thu thập dữ liệu cho câu hỏi nghiên cứu. Trong trường hợp này, dữ liệu thu được từ cả 4 câu sẽ không có giá trị. 	Để đảm bảo độ giá trị, tất cả các câu đều phải tập trung vào đo thái độ đối với môn Toán của học sinh.*Độ tin cậy và độ giá trị phản ánh chất lượng của dữ liệu, không phải là công cụ để thu thập dữ liệu.Độ tin cậy và độ giá trị có liên hệ với nhau.Độ tin cậy và độ giá trị*Soh K C (2006) AR(3)Độ tin cậy và giá trịTin cậyKhông có giá trịGiá trịKhông tin cậyKhông tin cậy Không có giá trịTin cậy và có giá trị*3. Kiểm chứng độ tin cậy của dữ liệuKiểm tra nhiều lầnSử dụng các dạng đề tương đươngChia đôi dữ liệuMột số phương pháp kiểm chứng độ tin cậy của dữ liệu:*1. Kiểm tra nhiều lầnMột nhóm HS sẽ làm một bài kiểm tra hai lần tại hai thời điểm khác nhau. Dữ liệu đáng tin cậy khi: điểm số ở hai lần kiểm tra phải tương đương nhau hoặc có độ tương quan cao.3. Kiểm chứng độ tin cậy của dữ liệu* Sử dụng các dạng đề tương đương Thiết kế hai dạng đề khác nhau của cùng một nội dung kiểm tra. Cùng một nhóm thực hiện cả hai bài kiểm tra trong cùng một thời điểm. Tính độ tương quan giữa điểm số kiểm tra của hai bài kiểm tra để xác định tính nhất quán của hai dạng đề. Hai đề được coi là tương đương khi hệ số tương quan lớn. 3. Kiểm chứng độ tin cậy của dữ liệu*Chia các điểm số kiểm tra của cùng 1 nhóm thành 2 phần (theo câu hỏi số chẵn: Câu 2,4,6,8,10 và câu hỏi số lẻ: Câu 1,3,5,7,9)Kiểm tra tính nhất quán giữa hai phần đó.Áp dụng công thức tính độ tin cậy Spearman-Brown.3. Chia đôi dữ liệu:rSB = 2 * rhh / (1 + rhh)rSB: Độ tin cậy Spearman-Brownrhh: Hệ số tương quan chẵn lẻĐộ tin cậy Spearman-Brown có thể được tính trên phần mềm Excel*Ví dụ: Chúng ta có điểm số của 15 học sinh (A đến O) sử dụng thang đo thái độ với 10 câu hỏi (Q1 đến Q10). Mỗi câu hỏi có điểm dao động từ 1 đến 6 (1: hoàn toàn không đồng ý và 6: Hoàn toàn đồng ý). Do đó chúng ta có kết quả như bảng sau:*Độ tin cậy Spearman-Brown: Ví dụBảng dưới đây là ví dụ về thang đo với 15 học sinh (A-O) trả lời 10 câu hỏi (Q1-Q10)Kết quả trả lời các câu hỏi được biểu thị bằng các số từ 1 đến 6 (ví dụ: Hoàn toàn không đồng ý = 1... Hoàn toàn đồng ý = 6).TổngSinh viên*Độ tin cậy Spearman-Brown: Ví dụTổng cộng các cột lẻ (Q1 + Q3 + Q5 + Q7 + Q9) rhh = 0.92 = CORREL (M2:M16, N2:N16)RSB = 2 * rhh / (1 + rhh) = 0.96Hệ số tương quan chẵn lẻĐộ tin cậy Spearman-BrownĐiểm lẻlĐiểm chẵn*Sau đó chúng ta tính hệ số tương quan chẵn lẻ (rhh) theo công thức trong bảng tính Excel:	 rhh = CORREL (array 1,array 2) (array 1: cột lẻ, array 2: cột chẵn) Theo ví dụ trên ta có:	 rhh = CORREL (M2:M16, N2:N16) = 0.92Với giá trị rhh là 0.92, có thể dễ dàng tính được độ tin cậy Spearman-Brown (rSB) bằng công thức:	 rSB = 2 * 0,92 / (1 + 0,92) = 0.96 *So sánh kết quả với bảng dưới đây: 	 Trong trường hợp này, độ tin cậy có giá trị rất cao vì rSB = 0.96 cao hơn giá trị 0.7. Chúng ta kết luận các dữ liệu thu được là đáng tin cậy.Ghi chú: Xem phần hướng dẫn chi tiết cách sử dụng các công thức tính toán trong phần mềm Excel tại Phụ lục 1rSB ≥ 0,7Dữ liệu đáng tin cậyrSB < 0,7Dữ liệu không đáng tin cậy*  4. Kiểm chứng độ giá trị của dữ liệuCó 3 cách kiểm chứng độ giá trị:Độ giá trị nội dungĐộ giá trị đồng quyĐộ giá trị dự báo*Kiểm chứng độ giá trị của dữ liệuĐộ giá trị nội dung( đề kiểm tra/ thang đo)Xem xét liệu các câu hỏi có phản ánh các vấn đề, khái niệm hoặc hành vi cần đo trong nghiên cứu hay không.Có tính chất mô tả nhiều hơn là thống kê.Có thể lấy nhận xét của GV/CBQL có kinh nghiệm để kiểm chứng.*Kiểm chứng độ giá trị của dữ liệu2. Độ giá trị đồng quyVề mặt logic, điểm số đạt được trong nghiên cứu phải có độ tương quan cao với các điểm số hiện có của cùng môn học.Tính hệ số tương quan của hai tập hợp điểm số là một cách kiểm chứng độ giá trị.*Kiểm chứng độ giá trị của dữ liệu3. Độ giá trị dự báoTương tự như độ giá trị đồng quy nhưng có định hướng tương lai.Các điểm số đạt được trong nghiên cứu phải tương quan với điểm số bài kiểm tra môn học sắp tới.*Một số lưu ý khi áp dụngThiết kế thang đo/công cụ đo/thu thập dữ liệu bảo đảm để đo đúng vấn đề cần NC.Độ tin cậy và độ giá trị là chất lượng của dữ liệu, không phải công cụ thu thập dữ liệu.Kiểm chứng độ tin cậy: trong điều kiện không có phương tiện CNTT có thể sử dụng các phương pháp đơn giản như kiểm tra nhiều lần, sử dụng dạng đề tương đương*Hệ số tương quan chẵn lẽĐộ tin cậy Spearman-BrownTổngChẵnLẻHọc sinh1. Tính hệ số tin cậy Spearman-Brown. Các dữ liệu có đáng tin cậy không?Bài tập 1*2.1. Hệ số tương quan chẵn - lẻ của một thang đo là 0,50. Độ tin cậy Spearman-Brown tương ứng là bao nhiêu?2.2. Để kiểm chứng độ giá trị của dữ liệu thu được từ thang đo hứng thú đọc, theo bạn có thể sử dụng kết quả của các bài kiểm tra nào?Bài tập 2 *Bài tập 3	Bài tập 3.1Các nhóm thiết kế công cụ đo ( Đề kiểm tra/ bảng kiểm quan sát/ phiếu hỏi) cho đề tài đã chọn	Bài tập 3.2	Các nhóm dự kiến cách kiểm chứng độ tin cậy, độ giá trị của dữ liệu thu được từ công cụ đo.