Đang tải... (xem toàn văn)
Đánh giá quy trình thiết kế đề thi trắc nghiệm khách quan tại khoa khoa học tự nhiên và xã hội ĐH Thái Nguyên
ĐẠI HỌC QUỐC GIA HÀ NỘI VIỆN ĐẢM BẢO CHẤT LƯỢNG GIÁO DỤC ______________________________ NGUYỄN TRƯỜNG SƠN ĐÁNH GIÁ QUY TRÌNH THIẾT KẾ ĐỀ THI TRẮC NGHIỆM KHÁCH QUAN TẠI KHOA KHOA HỌC TỰ NHIÊN VÀ XÃ HỘI ĐẠI HỌC THÁI NGUYÊN LUẬN VĂN THẠC SĨ Hà Nội – 2010 ĐẠI HỌC QUỐC GIA HÀ NỘI VIỆN ĐẢM BẢO CHẤT LƯỢNG GIÁO DỤC ______________________________ NGUYỄN TRƯỜNG SƠN ĐÁNH GIÁ QUY TRÌNH THIẾT KẾ ĐỀ THI TRẮC NGHIỆM KHÁCH QUAN TẠI KHOA KHOA HỌC TỰ NHIÊN VÀ XÃ HỘI ĐẠI HỌC THÁI NGUYÊN Chuyên ngành: Đo lường và đánh giá trong giáo dục (Chuyên ngành đào tạo thí điểm) LUẬN VĂN THẠC SĨ Người hướng dẫn khoa học: PGS.TS Lê Đức Ngọc Hà Nội – 2010 LỜI CẢM ƠN Với lòng biết ơn sâu sắc, tôi xin chân thành cảm ơn thầy giáo – PGS.TS Lê Đức Ngọc, người đã định hướng khoa học và giúp đỡ tôi trong suốt quá trình thực hiện luận văn này. Tôi xin bày tỏ lòng biết ơn tới: Ban giám đốc Viện Đảm bảo chất lượng Giáo dục, các thầy cô giáo tham gia giảng dạy khóa đào tạo Thạc sỹ Đo lường và Đánh giá trong Giáo dục, cùng các anh chị và các bạn đang công tác và học tập tại Viện Đảm bảo chất lượng Giáo dục – Đại học Quốc gia Hà Nội; Ban giám hiệu trường Đại học Khoa học – Đại học Thái Nguyên, các giảng viên tại các Khoa, Bộ môn, các bạn bè và đồng nghiệp; Người thân và gia đình đã luôn giúp đỡ, động viên tôi hoàn thành luận văn này. Hà Nội, ngày 30 tháng 05 năm 2010 Tác giả Nguyễn Trường Sơn LỜI CAM ĐOAN Tôi là: Nguyễn Trường Sơn Là học viên lớp cao học Đo lường và Đánh giá trong giáo dục Khóa 2006 – 2009 (theo Quyết định công nhận học viên cao học số 1803/SĐH ngày 7/11/2006 của Giám đốc Đại học Quốc gia Hà Nội). Tôi xin cam đoan danh dự về công trình khoa học này là của tôi. Nếu sai tôi xin hoàn toàn chịu trách nhiệm. Hà Nội, ngày 30 tháng 05 năm 2010 Tác giả Nguyễn Trường Sơn MỤC LỤC Trang MỞ ĐẦU 1 1. Lý do chọn đề tài 1 2. Mục đích nghiên cứu của đề tài 3 3. Nhiệm vụ nghiên cứu của đề tài 3 4. Giới hạn, phạm vi nghiên cứu 3 5. Câu hỏi nghiên cứu/ giả thuyết nghiên cứu của đề tài 3 5.1. Câu hỏi nghiên cứu 3 5.2. Giả thuyết nghiên cứu 4 6. Khách thể và đối tượng nghiên cứu 4 6.1. Khách thể nghiên cứu 4 6.2. Đối tượng nghiên cứu 4 7. Phương pháp nghiên cứu 4 7.1. Nghiên cứu lý thuyết 4 7.2. Nghiên cứu thực nghiệm 4 7.3. Phương pháp Toán học 4 8. Cấu trúc của luận văn 5 CHƯƠNG 1. CƠ SỞ LÝ LUẬN VÀ TỔNG QUAN 6 1.1. Lịch sử vấn đề nghiên cứu 6 1.1.1. Trên thế giới 6 1.1.2. Việt Nam 8 1.2. Các khái niệm cơ bản về đo lường và đánh giá trong giáo dục 11 1.3. Phương pháp trắc nghiệm trong kiểm tra đánh giá 15 1.3.1. Kiểm tra đánh giá kết quả học tập 15 1.3.2. Mục đích, ý nghĩa của việc kiểm tra, đánh giá KQHT 16 1.3.3. Phương pháp trắc nghiệm trong kiểm tra đánh giá 18 1.4. Quy trình xây dựng đề thi và ngân hàng câu hỏi TNKQ 22 1.4.1. Quy trình xây dựng đề thi TNKQ 22 i 1.4.2. Ngân hàng câu hỏi TNKQ 26 1.5. Kỹ thuật xây dựng các câu hỏi TNKQ 27 1.5.1. Loại đúng – sai (True or False) 27 1.5.2. Loại ghép đôi (Matching items) 29 1.5.3. Loại điền khuyết (Supply item) 30 1.5.4. Loại nhiều lựa chọn (Multi choice questions - MCQ) 31 1.5.5. So sánh trắc nghiệm khách quan và trắc nghiệm tự luận 35 1.6. Phân tích đánh giá câu hỏi và bài trắc nghiệm 37 1.6.1. Mục đích phân tích câu hỏi và bài trắc nghiệm 37 1.6.2. Phương pháp phân tích câu hỏi theo lý thuyết khảo thí hiện đại 38 1.6.3. Một số yêu cầu thống kê đối với câu hỏi và bài TNKQ 45 1.7. Kết luận chương 1 50 CHƯƠNG 2. THỰC TRẠNG QUY TRÌNH THIẾT KẾ ĐỀ THI TNKQ TẠI TRƯỜNG ĐẠI HỌC KHOA HỌC – ĐHTN 51 2.1. Vài nét về trường Đại học Khoa học – Đại học Thái Nguyên 51 2.2. Thông tin chung về các giảng viên tham gia khảo sát 52 2.3. Thực trạng quy trình thiết kế đề thi TNKQ tại đơn vị 54 2.3.1. Thực trạng sử dụng các phương pháp KTĐG 54 2.3.2. Thực trạng quy trình thiết kế đề thi TNKQ 56 2.3.3. Thực trạng phân tích và xử lý kết quả thi 62 2.3.4. Thực trạng chất lượng đề thi 65 2.4. Kết luận chương 2 73 CHƯƠNG 3: MỘT SỐ BIỆN PHÁP NÂNG CAO HIỆU QUẢ QUY TRÌNH THIẾT KẾ ĐỀ THI TNKQ TẠI TRƯỜNG ĐẠI HỌC KHOA HỌC - ĐHTN 74 3.1. Nguyên tắc đề xuất biện pháp 74 3.2. Một số biện pháp nâng cao hiệu quả quy trình thiết kế đề thi TNKQ tại đơn vị 74 3.3. Tổ chức thử nghiệm biện pháp 75 ii 3.4. Đánh giá chung của GV về tính khả thi và hiệu quả của các biện pháp đã triển khai 91 3.5. Kết luận chương 3 93 KẾT LUẬN VÀ KIẾN NGHỊ 95 TÀI LIỆU THAM KHẢO 99 PHỤ LỤC 102 iii CÁC CHỮ CÁI VIẾT TẮT TRONG LUẬN VĂN CNTT Công nghệ thông tin Disc Chỉ số độ phân biệt ĐHKH Đại học Khoa học ĐHQG HN Đại học Quốc gia Hà Nội ĐHTN Đại học Thái Nguyên ĐLĐG Đo lường đánh giá ĐBCLĐT&NCPTGD Đảm bảo chất lượng đào tạo và nghiên cứu phát triển giáo dục GV Giảng viên GD&ĐT Giáo dục và Đào tạo IRT Lý thuyết hồi đáp IRF Hàm đáp ứng câu hỏi KĐCL Kiểm định chất lượng KHKT Khoa học kỹ thuật KQHT Kết quả học tập KT, ĐG Kiểm tra, đánh giá MCQ Câu hỏi nhiều lựa chọn NCKH Nghiên cứu khoa học NHCH Ngân hàng câu hỏi NXB Nhà xuất bản TL Tự luận TNKQ Trắc nghiệm khách quan SV Sinh viên iv DANH MỤC CÁC BẢNG Tên bảng Trang Bảng chương 1 Bảng 1.1 Bảng trọng số cho các nội dung cần đánh giá 25 Bảng 1.2 So sánh phương pháp TNKQ và TNTL 36 Bảng chương 2 Bảng 2.1 Tỷ lệ các phương pháp mà GV sử dụng 54 Bảng 2.2 Nhận thức của GV về hiệu quả các phương pháp KTĐG 55 Bảng 2.3 Tỷ lệ GV phân tích độ khó 63 Bảng 2.4 Tỷ lệ GV phân tích độ phân biệt 63 Bảng 2.5 Thông tin về kết quả tính toán các câu hỏi học phần KHMTĐC 69 Bảng 2.6 Thông tin về kết quả tính toán năng lực của thí sinh 70 Bảng chương 3 Bảng 3.1 Bảng trọng số của học phần “Sinh lý thực vật” 78 Bảng 3.2 Kết quả thi thử nghiệm học phần “Sinh lý thực vật” 79 Bảng 3.3 Thông tin về kết quả tính toán các câu hỏi 83 Bảng 3.4 Thông tin về kết quả tính toán năng lực của thí sinh 86 Bảng 3.5 Kết quả phân tích câu hỏi số 3 88 v DANH MỤC CÁC HÌNH Tên hình Trang Hình chương 1 Hình 1.1 Tóm lược các phương pháp trắc nghiệm 19 Hình 1.2 Quy trình xây dựng đề thi TNKQ 23 Hình 1.3 Các loại câu hỏi TNKQ 27 Hình 1.4 Hàm đáp ứng câu hỏi (IRF) 41 Hình 1.5 Đường cong trả lời theo mô hình Rasch 43 Hình chương 2 Hình 2.1 Số lượng và tỷ lệ giảng viên tham gia khảo sát 53 Hình 2.2 Số năm kinh nghiệm giảng dạy của các giảng viên 53 Hình 2.3 Khó khăn khi thiết kế câu hỏi TNKQ chuẩn 59 Hình 2.4 Thời gian soạn câu hỏi TNKQ 60 Hình 2.5 Tỷ lệ GV phân tích câu hỏi thi 62 Hình 2.6 Tỷ lệ GV được bồi dưỡng phân tích câu hỏi thi 64 Hình 2.7 Sự phân bố năng lực chuẩn của 50 thí sinh 66 Hình 2.8 Kết quả thi học phần Xã hội học đại cương 66 Hình 2.9 Kết quả thi học phần Giải tích A1 67 Hình 2.10 Sự phân bố năng lực của các thí sinh với độ khó của bộ câu hỏi tốt 69 Hình 2.11 Sự phân bố của 50 câu hỏi trong học phần KHMTĐC 71 Hình 2.12 Ma trận so sánh năng lực thí sinh với độ khó của các câu hỏi thi 72 Hình chương 3 Hình 3.1 Kết quả thi thử nghiệm học phần “Sinh lý thực vật” 80 Hình 3.2 Sự phân bố của 50 câu hỏi đo năng lực của thí sinh trong học phần “Sinh lý thực vật” 82 Hình 3.3 Ma trận so sánh năng lực thí sinh với độ khó câu hỏi 84 vi [...]... Trước tình hình như vậy, tôi chọn đề tài luận văn: Đánh giá quy trình thi t kế đề thi trắc nghiệm khách quan tại Khoa Khoa học Tự nhiên và Xã hội (nay là trường Đại học Khoa học) – Đại học Thái Nguyên Kết quả nghiên cứu của luận văn sẽ là tài liệu cần thi t góp phần vào quá trình nâng cao chất lượng và hiệu quả của việc biên soạn và thi t kế đề thi trắc nghiệm khách quan tại đơn vị, đồng thời giúp đưa... luận và tổng quan về quy trình thi t kế đề thi Chương 2 Thực trạng quy trình thi t kế đề thi TNKQ tại trường Đại học Khoa học – Đại học Thái Nguyên Chương 3 Một số biện pháp nâng cao hiệu quả quy trình thi t kế đề thi TNKQ tại trường Đại học Khoa học Kết luận và kiến nghị Tài liệu tham khảo Phụ lục 4 CHƯƠNG 1 CƠ SỞ LÝ LUẬN VÀ TỔNG QUAN 1.1 Lịch sử vấn đề nghiên cứu 1.1.1 Trên thế giới Ở Châu Âu và Mỹ khoa. .. giảng viên trong việc thi t kế câu hỏi TNKQ dùng để kiểm tra đánh giá kết quả học tập của sinh viên 2 Mục đích nghiên cứu của đề tài • Đánh giá quy trình và hiệu quả của việc thi t kế và sử dụng các đề thi trắc nghiệm khách quan hiện nay của Nhà trường; • Đưa ra quy trình chuẩn thi t kế các đề thi trắc nghiệm khách quan • Đưa ra những giải pháp nhằm nâng cao kỹ năng thi t kế đề thi TNKQ của giảng viên... nghiên cứu của đề tài Để thực hiện mục đích trên, đề tài có các nhiệm vụ sau: - Khảo sát thực trạng về quy trình, cách thức thi t kế đề thi trắc nghiệm khách quan của các giảng viên trong Trường - Phân tích các câu hỏi trắc nghiệm khách quan của các đề thi đã được sử dụng (căn cứ vào kết quả trả lời trắc nghiệm của sinh viên) - Đưa ra quy trình chuẩn thi t kế đề thi trắc nghiệm khách quan 4 Giới hạn,... sát thực trạng quy trình thi t kế đề thi TNKQ 102 Phụ lục 2.2 Đề thi kết thúc học phần Xã hội học đại cương 105 Phụ lục 2.3 Đề thi kết thúc học phần Giải tích A1 114 Phụ lục 2.4 Đề thi kết thúc học phần Khoa học môi trường đại cương 118 Phụ lục chương 3 Danh sách báo cáo viên và các CBGV tham dự bỗi Phụ lục 3.1 dưỡng về quy trình và kỹ thuật xây dựng đề thi 125 TNKQ, cách xử lý kết quả thi Phụ lục 3.2... cuốn “Giáo dục học Đại học Đây là cuốn tài liệu dùng để bồi dưỡng các lớp Giáo dục học đại học và Nghiệp vụ sư phạm đại học Trong phần 1 của cuốn sách, tác giả Lâm Quang Thi p đã có bài viết về Đo lường và đánh giá thành quả học tập Tác giả đã đề cập đến rất nhiều nội dung như: đánh giá và đánh giá giáo dục; các phương pháp trắc nghiệm; chất lượng của các câu trắc nghiệm và của đề thi trắc nghiệm; đánh. .. • Đề tài nghiên cứu phương pháp, cách thức thi t kế đề thi trắc nghiệm khách quan của các giảng viên trong Trường; • Nghiên cứu, đánh giá các câu hỏi trắc nghiệm khách quan của một số đề thi TNKQ đã được sử dụng trong Trường, từ đó đề xuất quy trình chuẩn thi t kế đề thi TNKQ 5 Câu hỏi nghiên cứu/ giả thuyết nghiên cứu của đề tài 5.1 Câu hỏi nghiên cứu • Hiện nay các giảng viên trong Trường thi t kế. .. loại câu hỏi trắc nghiệm, cấu trúc đề thi Năm 2005, Trung tâm ĐBCLĐT&NCPTGD thuộc ĐHQGHN đã xuất bản cuốn “Giáo dục đại học - chất lượng và đánh giá Cuốn sách gồm có 3 phần: Phần 1: Đánh giá hoạt động giảng dạy và nghiên cứu khoa học của giảng viên; Phần 2: Đánh giá hoạt động học tập và nghiên cứu khoa học của sinh viên và học viên cao học; Phần 3: Đánh giá chương trình đào tạo và chương trình giảng... tra đánh giá kết quả học tập của người học nói chung thường sử dụng 2 hình thức thi chủ yếu là: thi viết (tự luận) và thi vấn đáp Thực tế, hai hình thức này chưa kiểm tra, đánh giá đầy đủ kiến thức đã học của người học một cách nhanh gọn, toàn diện và khách quan Thi viết (tự luận) và thi vấn đáp, phạm vi đề ra còn hạn chế về kiến thức, nhất là đối với kỳ thi học kỳ hoặc thi tốt nghiệp thì nội dung đề. .. Thanh và một số tác giả khác đã nghiên cứu về đề tài đo lường và đánh giá trong giáo dục Với việc ngày càng chú trọng vào công tác đánh giá chất lượng giáo dục, Bộ GD & ĐT đã có nhiều biện pháp nhằm đổi mới quá trình đánh giá kết quả học tập cho học sinh, sinh viên nhằm đảm bảo tính khách quan, công bằng và đánh giá chính xác năng lực người học 1.2 Các khái niệm cơ bản về đo lường và đánh giá trong giáo . chọn đề tài luận văn: Đánh giá quy trình thi t kế đề thi trắc nghiệm khách quan tại Khoa Khoa học Tự nhiên và Xã hội (nay là trường Đại học Khoa học) . luận và tổng quan về quy trình thi t kế đề thi. Chương 2. Thực trạng quy trình thi t kế đề thi TNKQ tại trường Đại học Khoa học – Đại học Thái Nguyên.
