CIPP là gì? Cách áp dụng mô hình CIPP trong luận văn

Mô hình CIPP là gì

CIPP là mô hình đánh giá chương trình theo bốn thành phần: Context, Input, Process và Product, lần lượt là Bối cảnh, Đầu vào, Quá trình và Sản phẩm hoặc Kết quả. Khi tìm kiếm “CIPP là gì”, bạn thường đang cần biết mô hình này dùng để đánh giá một chương trình đào tạo, chính sách công, dự án, dịch vụ hoặc hoạt động triển khai trong thực tế như thế nào.

Điểm đáng chú ý là CIPP không phải một mô hình hồi quy có sẵn các đường tác động cố định. Đây là khung tư duy để đặt câu hỏi đánh giá theo toàn bộ vòng đời của chương trình. Vì vậy, bạn có thể dùng CIPP để xây dựng bảng hỏi và mô hình định lượng, nhưng phải tự xác định biến quan sát, mối quan hệ giữa các khái niệm và biến kết quả phù hợp với đề tài.

Trong một luận văn định lượng, CIPP thường được chuyển thành bốn nhóm biến tiềm ẩn. Chẳng hạn, Context có thể đo mức độ phù hợp với nhu cầu, Input đo nguồn lực và thiết kế, Process đo chất lượng triển khai, còn Product đo kết quả cảm nhận hoặc kết quả đạt được. Cách chuyển đổi này cần bám vào chương trình cụ thể, không nên lấy bốn chữ CIPP làm bốn thang đo chung cho mọi đề tài.

Các thành phần trong mô hình

Bốn thành phần của CIPP trả lời bốn câu hỏi khác nhau. Context hỏi chương trình có phù hợp với nhu cầu và vấn đề thực tế không. Input hỏi chương trình có đủ nguồn lực, kế hoạch và phương án thực hiện không. Process theo dõi cách chương trình đang được triển khai. Product xem kết quả sau triển khai có đạt mục tiêu không.

Bạn nên tách rõ Product với mức độ hài lòng. Hài lòng có thể là một kết quả cảm nhận, nhưng chưa chắc đã phản ánh việc chương trình đạt mục tiêu chuyên môn. Ví dụ, người học có thể hài lòng với một khóa học vì lịch học thuận tiện, dù kết quả kiểm tra sau khóa học chưa cải thiện.

CIPP cũng không bắt buộc bốn thành phần phải là bốn biến độc lập cùng tác động trực tiếp đến Product. Có đề tài xem Context, Input và Process là các nhóm tiêu chí giải thích Product. Có đề tài dùng Process làm biến trung gian giữa Input và Product. Có đề tài chỉ dùng CIPP như khung phân loại để xây dựng bộ tiêu chí đánh giá, sau đó phân tích riêng từng nhóm.

Mô hình gốc và các mở rộng phổ biến

CIPP phù hợp với cách đánh giá liên tục. Bạn không chỉ xem chương trình có kết quả tốt hay không ở cuối kỳ, mà còn xem nhu cầu ban đầu, phương án chuẩn bị và quá trình thực hiện. Cách tiếp cận này giúp phát hiện một chương trình đạt kết quả thấp vì mục tiêu sai, nguồn lực thiếu, triển khai không đúng hoặc sản phẩm đầu ra chưa đạt.

Khi đưa CIPP vào luận văn, phần “mô hình gốc” nên trình bày bốn thành phần và chức năng đánh giá của từng thành phần. Nếu bạn dùng thêm biến khác như chất lượng dịch vụ, sự hài lòng, ý định tiếp tục hoặc hiệu quả cảm nhận, hãy nói rõ đó là phần mở rộng của đề tài, không gán cho CIPP một quan hệ mà tài liệu gốc không xác nhận.

Có ba hướng mở rộng thường gặp trong nghiên cứu định lượng. Hướng thứ nhất là mô hình trực tiếp, trong đó Context, Input và Process tác động đến Product. Hướng thứ hai là mô hình theo chuỗi, trong đó Context ảnh hưởng đến Input, Input ảnh hưởng đến Process, rồi Process ảnh hưởng đến Product. Hướng thứ ba là mô hình đánh giá kết quả, trong đó bốn thành phần được đo độc lập và so sánh điểm trung bình, thay vì kiểm định chúng như các biến nguyên nhân.

Bạn có thể tham khảo cách phân biệt một khung đánh giá với một mô hình chất lượng dịch vụ khi xem mô hình SERVQUAL, SERVQUAL, hoặc mô hình SERVPERF. SERVQUAL và SERVPERF tập trung vào chất lượng dịch vụ, còn CIPP tập trung vào đánh giá một chương trình hoặc quá trình can thiệp. Hai nhóm này có thể xuất hiện cùng một đề tài, nhưng không nên trộn tên gọi và thang đo của chúng.

Nếu đề tài của bạn đánh giá dịch vụ, hãy kiểm tra thêm mô hình 5 khoảng cách chất lượng dịch vụ và bài 5 khoảng cách chất lượng dịch vụ là gì. CIPP có thể giúp đánh giá toàn bộ chương trình cung cấp dịch vụ, trong khi mô hình khoảng cách giải thích những điểm lệch giữa kỳ vọng, cảm nhận và quá trình cung cấp dịch vụ.

Thang đo thường dùng cho từng khái niệm

CIPP không cung cấp một bộ biến quan sát duy nhất để bạn chép vào bảng hỏi. Bạn cần bắt đầu từ mục tiêu chương trình, đối tượng trả lời và kết quả cần đánh giá. Mỗi nhóm nên có các biến quan sát cùng đo một khái niệm, dùng câu chữ cụ thể và phù hợp với bối cảnh Việt Nam.

Bảng trên là khung phát triển, chưa phải thang đo đã được xác nhận. Bạn cần tìm nguồn gốc cho từng nhóm biến trong lĩnh vực của mình, dịch và điều chỉnh câu chữ, sau đó xin ý kiến giảng viên. Một biến như “chương trình có chất lượng tốt” quá rộng vì người trả lời có thể hiểu chất lượng theo tài liệu, giảng viên, kết quả hoặc sự thuận tiện.

Nếu dùng Likert, bạn có thể chọn thang năm hoặc bảy mức và ghi rõ ý nghĩa hai đầu thang đo. Cách đo thái độ bằng thang Likert bắt nguồn từ (Likert, 1932). Trong bảng hỏi, hãy dùng “biến quan sát” khi mô tả mô hình và dùng “bảng hỏi” khi nói về toàn bộ công cụ thu thập dữ liệu.

Sau khi có dữ liệu, bạn có thể kiểm tra độ tin cậy bằng Cronbach's Alpha. Alpha từ 0.7 trở lên thường được chấp nhận theo (Nunnally, 1978), còn thang đo mới hoặc mang tính khám phá có thể xem xét mức từ 0.6 theo (Hair và cộng sự, 2010). Corrected Item-Total Correlation từ 0.3 trở lên được dùng như một tiêu chí tham khảo theo (Nunnally và Bernstein, 1994). Đừng xóa biến chỉ vì một ngưỡng duy nhất. Hãy xem nội dung biến, tương quan giữa các biến và ý nghĩa lý thuyết.

Áp dụng vào đề tài của bạn

Giả sử bạn đánh giá một chương trình đào tạo kỹ năng số cho sinh viên. Bạn có thể xây dựng mô hình minh họa trong đó mức độ phù hợp của bối cảnh ảnh hưởng đến chất lượng đầu vào, chất lượng đầu vào ảnh hưởng đến quá trình triển khai, và quá trình triển khai ảnh hưởng đến kết quả chương trình.

Một mô hình khác gọn hơn là để Context, Input và Process tác động trực tiếp đến Product. Mô hình nào phù hợp phụ thuộc vào câu hỏi nghiên cứu và dữ liệu bạn thu thập. Nếu bạn chỉ khảo sát người học tại một thời điểm, hãy thận trọng khi dùng từ “tác động” hoặc kết luận quan hệ nhân quả. Có thể dùng “mối quan hệ” hoặc “khả năng giải thích” nếu thiết kế nghiên cứu không chứng minh được trình tự thời gian.

Bốn giả thuyết minh họa có thể viết như sau:

• H1: Context có mối quan hệ cùng chiều với Product của chương trình đào tạo.
• H2: Input có mối quan hệ cùng chiều với Product của chương trình đào tạo.
• H3: Process có mối quan hệ cùng chiều với Product của chương trình đào tạo.
• H4: Process có vai trò trung gian trong mối quan hệ giữa Input và Product.

Đây chỉ là cấu trúc minh họa, không phải giả thuyết mặc định cho mọi đề tài dùng CIPP. Nếu đề tài của bạn đánh giá một chính sách, Product có thể là hiệu quả thực hiện chính sách. Nếu đánh giá một khóa học, Product có thể là kết quả học tập, năng lực ứng dụng hoặc ý định tiếp tục học. Bạn cần định nghĩa biến phụ thuộc trước khi viết giả thuyết.

Cách viết vào luận văn: “Dựa trên mục tiêu đánh giá chương trình [tên chương trình], nghiên cứu đề xuất bốn nhóm khái niệm gồm Context, Input, Process và Product. Trong đó, [Context/Input/Process] được kỳ vọng có mối quan hệ cùng chiều với [Product hoặc biến kết quả], vì [lý do lý thuyết hoặc thực tiễn].”

Nếu bạn chỉ muốn xếp hạng các mặt mạnh yếu của chương trình, có thể không cần chạy mô hình nhân quả. Bạn có thể tính điểm trung bình từng nhóm, so sánh giữa các nhóm đối tượng và trình bày mức độ đánh giá. Nếu mục tiêu là kiểm định giả thuyết, bạn cần xác định mô hình đo lường, mô hình cấu trúc và cách xử lý dữ liệu trước khi chạy.

Cách kiểm định mô hình bằng SPSS hoặc SmartPLS

SPSS phù hợp khi bạn cần làm sạch dữ liệu, kiểm tra Cronbach's Alpha, chạy EFA, tính điểm trung bình và hồi quy. Với mô hình trực tiếp gồm các biến độc lập và một biến kết quả, SPSS thường đủ cho một luận văn cơ bản. Khi mô hình có biến trung gian, bạn có thể dùng hồi quy theo từng bước hoặc PROCESS nếu thiết kế nghiên cứu phù hợp.

SmartPLS phù hợp khi CIPP được xây dựng thành mô hình có biến tiềm ẩn, nhiều biến quan sát, quan hệ trung gian hoặc mô hình cấu trúc cần bootstrapping. Bạn phải phân biệt phần measurement model với structural model. Với PLS-SEM, outer loading từ 0.7 trở lên là một tiêu chí tham khảo theo (Chin, 1998) hoặc (Hair và cộng sự, 2022). CR từ 0.7 và AVE từ 0.5 trở lên thường được dùng để xem xét độ tin cậy và giá trị hội tụ theo (Fornell và Larcker, 1981).

Trong SmartPLS 4, bạn nhập dữ liệu .csv, tạo bốn construct CT, IN, PR và PO, kéo các biến quan sát vào đúng construct, sau đó nối các mũi tên theo giả thuyết. Chạy Calculate > PLS-SEM Algorithm để xem Outer Loadings, Cronbach's Alpha, Composite Reliability và AVE. Tiếp theo chạy Calculate > Bootstrapping, chọn số lần lặp theo thiết kế phân tích. Mốc 5.000 bootstrap subsamples được nêu trong (Hair và cộng sự, 2022).

Bảng dưới đây là số liệu minh họa, không phải kết quả của một nghiên cứu thật. Nó mô phỏng một phần bảng kết quả SmartPLS để bạn biết cần nhìn vào đâu.

số liệu minh họa

Bạn không được chép các con số minh họa này vào chương 4. Với file thật, hãy đối chiếu tên construct, số biến quan sát, outer loading, VIF, path coefficient, t-value và confidence interval. VIF dưới 5 là tiêu chí thường được báo cáo trong PLS-SEM theo (Hair và cộng sự, 2019). R² của Product cho biết mức độ các biến trong mô hình giải thích phương sai của Product; các mức 0.75, 0.50 và 0.25 được diễn giải lần lượt là đáng kể, trung bình và yếu theo (Hair và cộng sự, 2011).

Lỗi thường gặp khi dùng mô hình này

Lỗi đầu tiên là xem CIPP như bốn biến độc lập bắt buộc. Khung CIPP giúp bạn tổ chức nội dung đánh giá, còn đường dẫn trong mô hình phải xuất phát từ câu hỏi nghiên cứu và lập luận của đề tài.

Lỗi thứ hai là dùng các mục tiêu quá chung. “Chương trình đáp ứng tốt” có thể gom nhiều ý trong một biến quan sát. Hãy tách thành những nhận định cụ thể để người trả lời đánh giá được.

Lỗi thứ ba là gọi Product là “hiệu quả” nhưng chỉ đo sự hài lòng. Nếu muốn kết luận hiệu quả, bạn nên có các biến phản ánh kết quả mục tiêu, chẳng hạn mức độ đạt chuẩn đầu ra, khả năng áp dụng hoặc thay đổi sau chương trình.

Lỗi thứ tư là chạy EFA rồi xóa hàng loạt biến để bảng đẹp hơn. EFA có thể cho thấy biến tải lên nhóm khác, nhưng bạn cần xem nội dung và cơ sở lý thuyết trước khi loại. Nếu KMO từ 0.5 trở lên và Bartlett có ý nghĩa thống kê, đó là điều kiện tham khảo cho phân tích nhân tố theo (Kaiser, 1974), không phải giấy phép tự động xóa biến.

Lỗi thứ năm là dùng CFI, TLI hoặc RMSEA trong bài SmartPLS. Các chỉ số này thuộc nhóm đánh giá fit của CB-SEM, với ngưỡng thường được trích dẫn từ (Hu và Bentler, 1999). Khi chạy PLS-SEM, hãy tập trung vào measurement model, VIF, path coefficient, R², f², Q² và HTMT theo đúng logic của PLS-SEM.

Câu hỏi thường gặp

CIPP là viết tắt của những từ nào

CIPP là viết tắt của Context, Input, Process và Product. Tiếng Việt thường gọi là Bối cảnh, Đầu vào, Quá trình và Sản phẩm hoặc Kết quả. Bốn thành phần lần lượt xem xét nhu cầu, nguồn lực, cách triển khai và kết quả của chương trình.

CIPP có phải là mô hình hồi quy không

CIPP vốn là một khung đánh giá, không phải phương trình hồi quy cố định. Bạn có thể chuyển bốn thành phần thành các biến tiềm ẩn và xây dựng mô hình hồi quy hoặc PLS-SEM, nhưng phải tự lập luận về đường tác động và thang đo.

Có thể dùng CIPP cho đề tài khảo sát sinh viên không

Có thể, nếu sinh viên là người tham gia hoặc người thụ hưởng chương trình được đánh giá. Ví dụ, bạn có thể khảo sát sinh viên về bối cảnh, nguồn lực, quá trình triển khai và kết quả của một chương trình đào tạo. Bảng hỏi cần gắn với chương trình cụ thể, tránh hỏi các nhận định quá chung.

CIPP nên chạy SPSS hay SmartPLS

Chọn SPSS nếu bạn cần kiểm tra độ tin cậy, EFA, tính điểm nhóm và chạy hồi quy với mô hình tương đối đơn giản. Chọn SmartPLS nếu bạn có nhiều biến tiềm ẩn, biến trung gian hoặc cần đánh giá đồng thời measurement model và structural model. Phần mềm không thay thế cho việc xác định đúng khái niệm và giả thuyết.

CIPP có cần đủ cả bốn thành phần không

Nếu bạn gọi mô hình của mình là CIPP, nên trình bày đủ bốn thành phần và giải thích thành phần nào được đưa vào phân tích. Trong một nghiên cứu cụ thể, bạn có thể chỉ kiểm định một số quan hệ hoặc dùng một thành phần như biến kết quả, nhưng cần nêu rõ phạm vi và lý do trong chương phương pháp.

Khi file dữ liệu của bạn đã có các cột CT, IN, PR và PO, hãy kiểm tra lại định nghĩa từng biến, nguồn thang đo và giả thuyết trước khi chạy phân tích. Nếu cần xây dựng lại mô hình, thang đo và bảng hỏi cho đề tài CIPP, bạn có thể dùng M3 của DoThesis để đi từ khung nghiên cứu đến bảng hỏi định lượng.