Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Mỗi sách thường hướng tới nhóm đối tượng cụ thể, với mục đích cụ thể Sau thực hiện, muốn biết sách có đạt mục tiêu hay không, tác động chung lên nhóm hưởng lợi gì, liệu sách thiết kế tốt hay không Đây câu hỏi quan trọng, chúng liên quan chặt chẽ đến hiệu việc định sách Chính sách công dựa thực chứng cách sử dụng công cụ phân tích đa dạng để hiểu rõ sách cụ thể có hiệu hay không Trên thực tế, có nghiên cứu đánh giá tác động sách cách chặt chẽ, nghiêm túc Một lý rõ ràng việc đánh giá tác động sách chặt chẽ khoa học không dễ dàng, đòi hỏi không thời gian, nguồn lực, mà quan trọng hiểu biết thấu đáo tôn trọng nguyên tắc đánh giá tác động sách Một cách phổ biến, sai lầm, đánh giá tác động sách so sánh “trước – sau.” Trong nhiều trường hợp, người làm sách so sánh tình hoàn cảnh trước có sách, sau có sách, để đưa kết luận hiệu Chẳng hạn, xem xét câu hỏi:“Chính sách tín dụng có làm tăng thu nhập cho hộ nghèo xã Minh Quang, huyện Ba Vì hay không?” Bằng chứng thu sau: Thu nhập trung bình hộ nghèo xã Minh Quang, huyện Ba Vì trước có sách tín dụng triệu đồng hộ tháng Sau năm vay tín dụng hộ nghèo, thu nhập trung bình hộ nghèo xã tăng lên triệu hộ tháng Kết luận: Chương trình tín dụng cải thiện 50% thu nhập hộ nghèo xã Minh Quang Bằng chứng “trước-sau” cho kết luận có phải tác động sách giảm nghèo hay không Thứ nhất, hộ nghèo có vay tín dụng có đặc điểm khác so với hộ nghèo không vay tín dụng Ví dụ, hộ nghèo vay hộ có thành viên độ tuổi lao động, có hộ nghèo không vay gia đình toàn người già trẻ em Như vậy, kể sách tín dụng, hộ có người lao động có khả tăng thu nhập tốt so với hộ toàn người già Loại thiên lệch này, hộ tự lựa chọn có vay hay không, gọi thiên lệch lựa chọn (selection bias) Thứ hai, tăng thu nhập không đến từ sách mà yếu tố khác xảy đồng thời, chẳng hạn lãnh đạo xã động, vụ mùa thuận lợi, sách giáo dục từ năm 2000 bắt đầu phát huy tác dụng, hay nhiều lý khác Tương tự vậy, để trả lời câu hỏi “Đi học thạc sỹ Fulbright có làm tăng thu nhập hay không,” so sánh thu nhập học viên trước sau tốt nghiệp Đinh Vũ Trang Ngân Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Fulbright Tại sao? Nếu người chọn thi, nhận vào học Fulbright có đặc điểm có tương quan với thu nhập, so sánh trước – sau bị thiên lệch Ví dụ, giả sử người “có chí tiến thủ” học Fulbright, người này, không học Fulbright, có thu nhập cao so với người khác nhờ chí tiến thủ Kết thu nhập cao họ kết sách hay tác động học Fulbright, mà từ đặc điểm nội sinh sẵn có họ hình thành Trong hai trường hợp, lý tưởng so sánh xã Minh Quang có sách tín dụng, đồng thời sách tín dụng, so sánh kết khác biệt lên xã Hay tương tự, so sánh thu nhập người học Fulbright, thu nhập người không học Fulbright, kết luận tác động thực tế sách Vì vậy, nguyên tắc việc đánh giá tác động so sánh “thực tế” với “phản thực tế”(counterfactual) Tuy nhiên, “phản thực tế” không xảy Một người, xã, hay đối tượng tác động sách, không, quan sát họ hai phiên Vì vậy, để so sánh với thực tế, cần làm để ước lượng hay tưởng tượng giới “phản thực tế” rõ tốt Thế giới “phản thực tế” tưởng tượng xây dựng cách tìm “nhóm đối chứng” (control group) đạt tiêu chí sau: Không nhận sách, không bị tác động từ xa sách Càng giống nhóm nhận sách tốt “Càng giống nhóm nhận sách tốt” giải pháp cho vấn đề thiên lệch lựa chọn Đối với sách tự nguyện (vay tín dụng hay không, học Fulbright hay không), nhóm hưởng sách có số tính chất định (quyết tâm thoát nghèo nên vay, tâm thoát nghèo tìm cách khác để tăng thu nhập; ham học nên học, ham học giúp người cải thiện thu nhập kể không học.) Đinh Vũ Trang Ngân Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Vì vậy, cần tìm nhóm giống với nhóm nhận chnh sách (cũng tâm thoát nghèo vậy, hay ham học vậy), không tác động sách (không vay, không học) Chỉ tái tình “phản thực tế” giả tưởng cách tốt “Không bị tác động từ xa chương trình” lưu ý quan trọng, đặc biệt sách có tính lan tỏa cao, gọi sai lệch ảnh hưởng gián tiếp Ví dụ, sách xây dựng sở y tế xã A thu hút người dân xã B sang khám bệnh Nếu vậy, đo lường tác động lên sức khỏe người dân xã A so với xã B bị thiên lệch Có phương pháp đánh giá tác động bản: Thí nghiệm ngẫu nhiên (Randomization) Khác biệt khác biệt, hay gọi Biến đổi kép (Difference-in-difference) Biến công cụ (Instrumental variable) Kết nối điểm xu hướng (Propensity score matching) Hồi quy cắt (Regression discontinuity) Trong phạm vi thảo luận này, tìm hiểu số điểm số phương pháp Các bạn học thêm đề tài môn “Các Phương Pháp Nghiên Cứu” vào học kỳ mùa hè năm sau Phương pháp 1: Thí nghiệm ngẫu nhiên (Randomization) Các bước: Lựa chọn ngẫu nhiên đối tượng hưởng sách, ví dụ thông qua rút thăm Nhóm không hưởng sách nhóm đối chứng Vì lựa chọn ngẫu nhiên tính chất hai nhóm trung bình So sánh kết hai nhóm Ví dụ: Trên địa bàn tỉnh Tiền Giang, chọn số xã ngẫu nhiên hưởng sách tiêm phòng, số xã ngẫu nhiên không sách So sánh tỷ lệ trẻ em mắc bệnh tiêu chảy hai nhóm xã Ưu điểm phương pháp thí nghiệm ngẫu nhiên: - Được coi “chuẩn vàng” sai lệch lựa chọn - Lựa chọn ngẫu nhiên hạn chế tác động thiên lệch khác Nhược điểm phương pháp thí nghiệm ngẫu nhiên: - Chi phí cao - Vấn đề đạo đức: chọn ngẫu nhiên, số xã, hộ gia đình đáng hưởng sách không nhận Đinh Vũ Trang Ngân Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 - Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Tính đắn nội hàm (internal validity): Người nhận sách không tuân thủ Ví dụ yêu cầu số hộ tiêm chủng họ không tham gia, hộ không tham gia có số đặc điểm định, tính ưa rủi ro, hay không quan tâm đến sức khỏe - Tính đắn ngoại hàm (external validity): Kết nơi khó áp dụng cho nhóm đối tượng khác Ví dụ kết Tiền Giang chưa Bình Định Phương pháp 2: Khác biệt khác biệt (Difference-in-difference) Các bước: Sử dụng nhóm không tham gia làm đối chứng Thu thập số liệu nhóm tham gia nhóm không tham gia, trước sau sách Số liệu cho thấy thay đổi nhóm trước sau sách Khác biệt thay đổi hai nhóm (khác biệt khác biệt) tác động chương trình Hai lưu ý: - Giả thuyết quan trọng phương pháp này: Nếu sách, khác biệt hai nhóm thời điểm Nói cách khác, “xu hướng” hai nhóm hai đường song song sách - Giả thuyết lúc Phương pháp 3: Hồi quy cắt (Regression Discontinuity Design) Các bước: Phương pháp tận dụng quy chế lựa chọn đối tượng hưởng sách thông qua “điểm cắt” Ví dụ: Đinh Vũ Trang Ngân Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng a Đối tượng phải có điểm TOEFL từ 500 trở lên tham gia chương trình MPP b Xã phải có tỷ lệ hộ nghèo 40% trở lên hưởng sách giảm nghèo So sánh đối tượng sát điểm cắt Nếu sách có tác dụng, khác biệt thể rõ xung quanh điểm cắt Điều kiện quan trọng: - o Không có sách khác diễn đồng thời sử dụng điểm cắt o Điểm cắt phải tuân thủ khách quan nghiêm túc Ví dụ: Để đánh giá tác động chương trình MPP, so sánh người ngưỡng điểm chuẩn nhập học Hai nhóm người giống nhau, khác biệt nhóm học, nhóm không Nếu nhóm học sát điểm cắt có thu nhập cao hẳn nhóm không học, nói chương trình có tác động Tuy nhiên vấn đề cần lưu ý gồm có: 1) thi có nghiêm túc không, 2) tuyển chọn có theo điểm thi không, 3) người đỗ mà không học có đặc điểm khác biệt không, 4) có học bổng khác sử dụng điểm cắt không Phương pháp 4: Kết nối điểm xu hướng (Propensity-score matching) Phương pháp sử dụng thiết nhóm hưởng lợi từ sách nhóm đối chứng thông qua việc thực chương trình Thay vào đó, tự tạo nhóm đối chứng thông qua đặc trưng quan sát hộ dựa vào công cụ kinh tế lượng Phương pháp sử dụng sau sách hoàn thành, đòi hỏi phải có mẫu đủ lớn có số liệu hai nhóm Các bước: Cần số liệu đại diện cho nhóm sách nhóm không hưởng sách Nếu số liệu đến từ điều tra khác cần điều kiện điều tra so sánh Chọn vài đặc trưng quan sát để kết nối hai nhóm Đinh Vũ Trang Ngân Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Sử dụng mô hình probit logit để ước lượng xác suất tham gia vào chương trình (hoặc hưởng sách) với biến đặc trưng hộ Tính xác suất tham gia chương trình từ mô hình ước lượng, xác suất gọi điểm xu hướng (propensity score) Chúng ta có điểm xu hướng ước tính cho tất hộ, tham gia không tham gia vào chương trình So sánh hai nhóm: có tham gia không tham gia, có khoảng xác suất điểm xu hướng giống Ưu điểm phương pháp sử dụng số liệu sẵn có mà tiến hành thiết kế khảo sát, chi phí nghiên cứu thấp Nhược điểm phương pháp kết đo lường độ tin cậy cao, thường phải sử dụng phương pháp thống kê phức tạp có nhiều thiên lệch Phương pháp 5: Sử dụng biến công cụ (Instrument Variable) Biến công cụ gì? - Là yếu tố ảnh hưởng tới việc tham gia chương trình hay hưởng sách - Mà không ảnh hưởng tới kết đầu Z biến công cụ tốt nếu: Z biến công cụ không tốt nếu: Ví dụ: Z = “Tiếng Anh” Ví du: Z = “Hát hay” Hát hay  Dễ vào MPP  Thu nhập Hát dở  Khó vào MPP  Thu nhập Tiếng Anh tốt  Dễ vào MPP  Thu nhập Tiếng Anh  Khó vào MPP  Thu nhập Nhưng: Tiếng Anh  Thu nhập - Phương pháp sử dụng số liệu điều tra hộ mà phải giải vấn đề biến nội sinh - Để đo lường tác động sử dụng hàm hồi quy: Yi = βDi + εi Trong Yi thu nhập hộ i và: Di = hộ tham gia vào chương trình, Đinh Vũ Trang Ngân Chương trình Giảng dạy Kinh tế Fulbright Niên khóa 2013-2015 Nhập môn sách Công Ghi Bài giảng 13 Chính sách công dựa thực chứng Di = hộ không tham gia vào chương trình - Trong hàm hồi quy vấn đề Di biến ngẫu nhiên (Di biến nội sinh có tương quan đến thu nhập) Ví dụ Tiếng Anh ví dụ Di có tương quan đến việc tham gia chương trình lẫn thu nhập hộ - Nếu có biến công cụ có tương quan chặt chẽ đến biến D (ví dụ hát hay dễ nhận vào học hơn) lại không tương quan với biến Y (giả định hát hay không tác động đến thu nhập), đánh giá tác động hai bước: Bước 1: Chạy hàm hồi quy: Di = θZi + ui để tìm xác suất tham gia vào chương trình hộ i Bước 2: Lấy giá trị ước lượng Di từ kết để hồi quy phương trình: Yi = βDi + εi Giá trị β cho ta đo lường tác động chương trình Phương pháp 6: Phân tích định tính Mặc dù hiệu yếu (nhiều) so với phương pháp trên, việc phân tích định tính sử dụng việc đánh giá tác động Trọng tâm phân tích tìm hiểu quy trình, hành vi, điều kiện mà cá nhân nhóm quan sát nhận biết sách học hưởng lợi sách Các câu hỏi hướng nhận thức, ưu tiên, điều kiện địa lý, văn hóa, quy trình bên ảnh hưởng đến sách Phương pháp nghiên cứu định tính thường nên áp dụng với số liệu thống kê mô tả, phương pháp khác Ưu điểm phương pháp linh hoạt, cụ thể hóa nhu cầu đánh giá cho giai đoạn, sử dụng cách tiếp cận mở, thực nhanh, có tác dụng bổ trợ tốt cho hình thức nghiên cứu định lượng Nhược điểm phương pháp chứa đựng nhiều yếu tố chủ quan trình thu thập thông tin, nhóm đối chứng, kết tính đại diện Độ tin cậy nghiên cứu định tính phụ thuộc nhiều vào kỹ năng, độ nhạy cảm với điều kiện địa lý văn hóa, phong tục tập quán vùng, chất lượng đào tạo đội ngũ đánh giá Trên số sơ lược phương pháp đánh giá tác động sách Tùy thuộc vào nguồn lực, lực điều kiện hoàn cảnh, người nghiên cứu sách nên cố gắng tìm phương pháp phù hợp tối ưu cho để đánh giá sách Chính sách công thật cần xây dựng dựa nỗ lực liên tục không mệt mỏi để gom góp chứng cụ thể, vượt qua tiêu chuẩn khoa học khắt khe, với lý lẽ chặt chẽ, khả xử lý linh hoạt ràng buộc hạn chế Đinh Vũ Trang Ngân