Làm để xây dựng hệ thống giám sát theo kết Khái niệm thuật ngữ Ví dụ: Chỉ số đánh giá kết Làm để xây dựng hệ thống giám sát theo kết cho CCHC Bài trình bày cho cán chuyên trách CCHC, Việt Nam tháng năm 2006 NGười trình bày Klaus Kirchmann, VIE/01/024 Khái niệm thuật ngữ Khái niêm về: Lập kế hoạch, giám sát đánh giá Chúng ta đâu? Chúng ta muốn tới đâu? Làm để đến đó? Làm để biết đến đó? Phân tích tình Chúng ta đâu Lập KH chiến lược Làm để đến Giám sát Tầm nhìn Chúng ta muốn tới đâu Đánh giá Khái niệm thuật ngữ Định nghĩa Giám sát + Đánh giá Đo lường tiến độ diễn so với kế hoạch Nơi bắt đầu Tiến độ Giám sát Đo lường kết cuối so với kế hoạch Kết cuối Đánh giá Khái niệm thuật ngữ Mục đích việc Giám sát + đánh giá • Giúp lãnh đạo đưa định quản lý dựa số liệu thực tế khoa học • Trách nhiệm giải trình • Giúp quan tài trợ người phải nộp thuế biết chi tiêu công mang lại kết • Trách nhiệm giải trình Dữ liệu giám sát có ích sử dụng cho định quản lý thiết lập trách nhiệm giải trình Khái niệm thuật ngữ “Dựa theo kết quả”có nghĩa gì? • Có hiểu biết chung kết • Vậy, quan trọng nào? • Dường từ trước đến chưa giám sát theo kết quả? • Lưu ý phân biệt cấp độ loại kết khác nhau: Kết đầu – kết cuối – tác động Hiệu lực - hiệu - Giá trị tương xứng với đồng tiền Khái niệm thuật ngữ Các cấp độ mục tiêu (lập kế hoạch) kết (giám sát) Thuật ngữ lập kế hoạch Mục tiêu Thuật ngữ giám sát Là khái niêm chung bao gồm cấp độ sau Kết Đích (Tầm nhìn) Mục tiêu lớn mà chương trình giúp đạt Tác động Mục đích Tác động trực tiếp lợi ích có từ chương trình Kết cuối Kết cuối Những sản phẩm chương trình tạo với phương tiện sẵn có Kết đầu Khái niệm thuật ngữ Kết đầu Định nghĩa Những bạn sản xuất / đạt với phương tiện sẵn có Ví dụ Số lượng thẻ y tế phân phối đến hộ nghèo Cơ quan giao nhiệm vụ Trách nhiệm phải chịu trách nhiệm hoàn toàn việc phân phối thẻ Tính phù hợp đối Phù hợp dễ đo lường; với hệ thống nhiên cần tập trung nhiều giám sát vào kết cuối Khái niệm thuật ngữ Kết cuối Khái niệm Ví dụ Tính hữu dụng và/ giá trị kết đầu cho nhóm đối tượng mục tiêu Tỷ lệ hộ nghèo sử dụng thẻ y tế Lãnh đạo phụ trách phải gián tiếp Trách nhiệm chịu trách nhiệm kết cuối cùng; phải giải trình kết Tính phù hợp đối Hầu hết phù hợp với hệ thống Không phải luôn dễ đo lường giám sát Khó cân trách nhiệm giải trình Khái niệm thuật ngữ Tác động Định nghĩa Ví dụ Trách nhiệm Tính phù hợp hệ thống giám sát Tác động kết đầu kết cuối mục tiêu chung Tình tạng sức khỏe người nghèo Lãnh đạo phải gián tiếp chịu trách nhiệm tác động, khó giải trình tác động Đánh giá tổ chức Khái niệm thuật ngữ KQ đầu – KQ cuối – Tác động Các số sau thuộc cấp độ nào? Số Cơ quan cửa tỉnh Tăng GDP Thời gian cấp giấy chứng nhận quyền sở hữu đất đai Mức độ hài lòng người dân với dịch vụ Tỉ lệ bệnh nhân phải trả chi phí không thức Số hộ nghèo 10 Ví dụ: Chỉ số đánh giá kết Chỉ số đánh giá kết so sánh • Quản lý theo kết giám sát theo kết ngày chiếm phần quan trọng CCHC • Dự án VIE/01/024 đề xuất thử nghiệm sáng kiến „Chỉ số đánh giá kết so sánh“ – Đo lường kết hoạt động quyền địa phương nhà cung cấp dịch vụ – So sánh kết hoạt động tỉnh với theo thời gian • Mục tiêu – Liên tục nâng cao chất lượng dịch vụ – Minh bạch trách nhiệm giải trình quản lý công 15 Ví dụ: Chỉ số đánh giá kết Ví dụ quốc tế • Anh: „Đánh giá kết toàn diện “ quyền địa phương thông qua hệ thống tiêu số trung ương quản lý – – – – Chỉ số dịch vụ công Đánh giá tổ chức Tập trung vào giá trị tương xứng với đồng tiền Xếp hạng quyền địa phương • Canada: „Đo lường kết qủa cấp thành phố“ – Chỉ số dịch vụ công (tập trung vào hiệu quả) – So sánh kết tỉnh so với tỉnh khác theo thời gian 16 Ví dụ: Chỉ số đánh giá kết Nội dung: Đo lường kết qủa của: Dịch vụ công Hành • • • • • • • Dịch vụ nội quyền Giáo dục Y tế Kinh doanh Dịch vụ nông nghiệp Dịch vụ môi trường Trợ cấp an sinh xã hội • Dịch vụ hành (một cửa) – Nhân lực – Tài – Kiểm soát nội • Đánh giá tổ chức – Quản lý theo kết qủa – Thành tựu (tác động) 17 Ví dụ: Chỉ số đánh giá kết Đánh giá Tổ chức Tỉnh D Dịch vụ Nội Tỉnh C vv Tỉnh B 85 83 77 76 Y tế Tỉnh A Giáo dục Tổng Ví dụ số đánh giá kết thang điểm 100 90 81 83 89 91 85 81 84 79 79 70 76 81 78 72 76 18 Hướng dẫn bước Hướng dẫn bước xây dựng hệ thống giám sát theo kết Xây dựng khái niệm Xây dựng số cho câu hỏi then chốt Phân công nhiệm vụ Phân bổ ngân sách giám sát đánh giá Xác định thủ tục tiêu chuẩn báo cáo 19 Hướng dẫn bước 1) Xây dựng đề cương Giám sát đánh giá CCHC • Tài liệu đề cương làm rõ: – Mục tiêu chiến lược Giám sát sách kế hoạch nào? Tăng cường chất lượng thực CCHC cấp địa phương? Dịch vụ công hiệu quả, hiệu lực hơn? – Cơ cấu hệ thống giám sát đánh giá Giám sát lĩnh vực cấu phần nào? So sánh địa phương theo thời gian? Bao gồm đánh giá tổ chức? Liên hệ với khía cạnh quản lý khác: xác định tầm nhìn, lập kế hoạch chiến lược, lập dự toán ngân sách, chế phản hồi người – Trách nhiệm đạo trình tư vấn xác định số; xác định xử lý liệu; sử dụng thông tin giám sát • Đạt đồng thuận rộng rãi tài liệu đề cương20 Hướng dẫn bước 2a) Xác định câu hỏi then chốt • Đầu tiên, xác định câu hỏi then chốt cho lĩnh vực cần giám sát Hầu hết lĩnh vực có năm câu hỏi: • • • • • Cơ hội tiếp cận công cho tất cả? Chất lựợng? Mức độ hài lòng công dân? Chi phí đơn vị? Giá trị tương xứng với đồng tiền?? 21 Hướng dẫn bước 2b) Xây dựng số • Tìm kiếm số nhỏ phản ánh chất chủ đề • Nên tập trung vào kết cuối cùng, hiệu giá trị tương xứng với đồng tiền 22 Hướng dẫn bước 2b) Ví dụ số (GIÁO DỤC ) Cơ hội tiếp cận công • Tỉ lệ học • Khoảng cách giới giáo dục tiểu trung học Chất lượng • Tỉ lệ bỏ học • Số giáo viên 1000 sinh viên • Điểm trung bình kiểm tra cuối kỳ Mức độ hài lòng người dân • Mức độ hài lòng người dân với chất lượng, công bằng, kết qủa cuối (điều tra) Chi phí đơn vị • Chi tiêu công 1000 sinh viên Giá trị tương xứng với đồng tiền • Tỉnh tự đánh giá • Trung ương xếp hạng 23 Hướng dẫn bước 2c) Kiểm tra chất lượng số tiêu chí chất lượng quan trọng nhất: • Tính thích hợp (ứng dụng cụ thể?!) – Thông tin có thực thích hợp cho việc đưa định quản lý quan trọng cụ thể không? (tập trung vào kết cuối cùng, hiệu giá trị tương xứng với đồng tiền)? – Thông tin có hữu ích để thiết lập trách nhiệm giải trình không? • Chấp nhận – Tính sở hữu thực thể bị giám sát • Tính khả thi Nỗ lực, thời gian chi phí giám sát; nên nhớ giám sát chuẩn tốn kém! 24 Hướng dẫn bước 3) Phân công trách nhiệm • Phân công nhiệm vụ trách nhiệm cho • Nhóm công tác quản lý trình theo phương pháp tiếp cận tham khảo ý kiến • Chuyên gia thu thập liệu • Cơ quan nghiên cứu tổ chức điều tra (nếu cần) • Chuyên gia xử lý phân tích liệu • Báo cáo • Sử dụng báo cáo thông tin giám sát 25 Hướng dẫn bước 4) Phân bổ ngân sách cho Hệ thống giám sát đánh giá • Giám sát đánh giá tốn kém! • Nhiều lúc, hoạt động giám sát, đánh giá không tính đến lúc dự toán ngân sách • Chất lượng giám sát, đánh giá yếu không đủ nguồn lực • Đối với nhiều số, thông tin sở cần thiết Điều cần cân nhắc dự tóan ngân sách 26 Hướng dẫn bước 5) Xác định thủ tục tiêu chuẩn báo cáo Dữ liệu giám sát có ích sử dụng cho định quản lý thiết lập trách nhiệm giải trình • Chính vậy, trình bày kết giám sát liệu cần chỉnh sửa cho đối tượng sử dụng khác – Nhà quản lý cao cấp – Công chúng – 27 Hướng dẫn bước Một vài công cụ, lập KH, giám sát đánh giá • • • • • • • • Phân tích mô hình SWOT Phân tích vấn đề, vấn đề Phân tích bên liên quan Tầm nhìn Thứ tự mục tiêu Lập kế hoạch hành động chiến lược Phân tích rủi ro Khung lô gíc 28 29 [...]... Những bài học từ kinh nghiệm quốc tế 1 Tập trung vào giám sát kết quả cuối cùng Kinh nghiệm quốc tế cho thấy cấp quan trọng phải tập trung là kết quả cuối cùng • Là thông tin có ích nhất cho quản lý • Có ích cho việc xây dựng trách nhiệm giải trình 11 1 Khái niệm và thuật ngữ Loại kết quả Các mục tiêu chung trong quảnlý công là tăng cường hiệu lực, hiệu quả • Hiệu quả: chi phí đơn vị của kết quả đầu... Quản lý theo kết qủa – Thành tựu (tác động) 17 2 Ví dụ: Chỉ số đánh giá kết quả Đánh giá Tổ chức Tỉnh D Dịch vụ Nội bộ Tỉnh C vv Tỉnh B 85 83 77 76 Y tế Tỉnh A Giáo dục Tổng Ví dụ chỉ số đánh giá kết quả thang điểm 100 90 81 83 89 91 85 81 84 79 79 70 76 81 78 72 76 18 3 Hướng dẫn từng bước Hướng dẫn từng bước xây dựng một hệ thống giám sát theo kết quả 1 2 3 4 5 Xây dựng khái niệm Xây dựng chỉ số... sách giám sát và đánh giá Xác định các thủ tục và tiêu chuẩn báo cáo 19 3 Hướng dẫn từng bước 1) Xây dựng đề cương Giám sát và đánh giá trong CCHC • Tài liệu đề cương làm rõ: – Mục tiêu và chiến lược Giám sát chính sách và kế hoạch nào? Tăng cường chất lượng thực hiện CCHC của cấp địa phương? Dịch vụ công hiệu quả, hiệu lực hơn? – Cơ cấu của hệ thống giám sát và đánh giá Giám sát lĩnh vực và cấu phần nào? ... kết quả Chỉ số đánh giá kết quả so sánh • Quản lý theo kết quả và giám sát theo kết quả ngày càng chiếm phần quan trọng trong CCHC • Dự án VIE/01/024 đang đề xuất thử nghiệm một sáng kiến mới „Chỉ số đánh giá kết quả so sánh“ – Đo lường kết quả hoạt động của chính quyền địa phương và các nhà cung cấp dịch vụ – So sánh kết quả hoạt động của các tỉnh với nhau theo thời gian • Mục tiêu – Liên tục nâng... (ví dụ Chi phí thu rác thải tính theo đơn vị tấn) • Hiệu lực: mức độ đóng góp của kết quả đầu ra cho việc hoàn thành các kết quả cuối cùng dự kiến • Giá trị tương xứng với đồng tiền: giá trị của các kêt qủa (kết quả cuối cùng và tác động) trong mối tương quan với chi tiêu công 12 1 Khái niệm và thuật ngữ Khuôn khổ giám sát theo kết quả Mục tiêu Đầu vào hoạt động Hiệu quả Các tác động khác CCHC KQ Đầu... Nhóm công tác quản lý quá trình theo phương pháp tiếp cận tham khảo ý kiến • Chuyên gia thu thập dữ liệu • Cơ quan nghiên cứu tổ chức điều tra (nếu cần) • Chuyên gia xử lý và phân tích dữ liệu • Báo cáo • Sử dụng báo cáo và thông tin giám sát 25 3 Hướng dẫn từng bước 4) Phân bổ ngân sách cho Hệ thống giám sát và đánh giá • Giám sát và đánh giá là tốn kém! • Nhiều lúc, các hoạt động giám sát, đánh giá... thực sự thích hợp cho việc đưa ra các quyết định quản lý quan trọng và cụ thể không? (tập trung vào kết quả cuối cùng, hiệu quả và giá trị tương xứng với đồng tiền)? – Thông tin có hữu ích để thiết lập trách nhiệm giải trình không? • Chấp nhận – Tính sở hữu của thực thể bị giám sát • Tính khả thi Nỗ lực, thời gian và chi phí của giám sát; nên nhớ giám sát chuẩn rất tốn kém! 24 3 Hướng dẫn từng bước... sách • Chất lượng giám sát, đánh giá yếu vì không đủ nguồn lực • Đối với nhiều chỉ số, thông tin cơ sở là cần thiết Điều này cần được cân nhắc trong dự tóan ngân sách 26 3 Hướng dẫn từng bước 5) Xác định các thủ tục và tiêu chuẩn báo cáo Dữ liệu giám sát chỉ có ích khi nó được sử dụng cho các quyết định quản lý và thiết lập trách nhiệm giải trình • Chính vì vậy, trình bày kết quả giám sát và dữ liệu cần... Minh bạch và trách nhiệm giải trình trong quản lý công 15 2 Ví dụ: Chỉ số đánh giá kết quả Ví dụ quốc tế • Anh: „Đánh giá kết quả toàn diện “ về chính quyền địa phương thông qua một hệ thống chỉ tiêu và chỉ số do trung ương quản lý – – – – Chỉ số về dịch vụ công Đánh giá tổ chức Tập trung vào giá trị tương xứng với đồng tiền Xếp hạng chính quyền địa phương • Canada: „Đo lường kết qủa cấp thành phố“ – Chỉ... hiệu quả) – So sánh kết quả của tỉnh này so với tỉnh khác theo thời gian 16 2 Ví dụ: Chỉ số đánh giá kết quả Nội dung: Đo lường kết qủa của: Dịch vụ công Hành chính • • • • • • • Dịch vụ trong nội bộ chính quyền Giáo dục Y tế Kinh doanh Dịch vụ nông nghiệp Dịch vụ môi trường Trợ cấp và an sinh xã hội • Dịch vụ hành chính (một cửa) – Nhân lực – Tài chính – Kiểm soát nội bộ • Đánh giá tổ chức – Quản lý theo ... Hướng dẫn bước Hướng dẫn bước xây dựng hệ thống giám sát theo kết Xây dựng khái niệm Xây dựng số cho câu hỏi then chốt Phân công nhiệm vụ Phân bổ ngân sách giám sát đánh giá Xác định thủ tục... định quản lý thiết lập trách nhiệm giải trình Khái niệm thuật ngữ “Dựa theo kết quả có nghĩa gì? • Có hiểu biết chung kết • Vậy, quan trọng nào? • Dường từ trước đến chưa giám sát theo kết quả? ... tính theo đơn vị • Và ngày tập trung vào giá trị tương xứng với đồng tiền: chi tiêu công mang lại 14 Ví dụ: Chỉ số đánh giá kết Chỉ số đánh giá kết so sánh • Quản lý theo kết giám sát theo kết