Lựa chọn thời điểm đánh giá đào tạo phù hợp

Điểm quan trọng vì thế không phải là chọn một trong ba giai đoạn, mà là đặt phép đo vào thời điểm mà kết quả cần quan sát đã có cơ hội xuất hiện. Một bài kiểm tra ngay khi lớp học kết thúc có thể đo mức tiếp thu, nhưng chưa thể chứng minh người học sẽ áp dụng tốt sau một tháng. Ngược lại, đợi ba tháng mới kiểm tra kiến thức cơ bản sẽ làm mất cơ hội phát hiện và sửa những vấn đề xảy ra ngay trong quá trình học.

Logic này cũng tương thích với mô hình Kirkpatrick: phản ứng và mức học được thường có thể quan sát sớm hơn, trong khi thay đổi hành vi và kết quả tổ chức cần thêm thời gian để hình thành. Mô hình không tạo ra một mốc 30, 60 hay 90 ngày bắt buộc; khoảng chờ phải phụ thuộc vào mục tiêu đào tạo, tần suất người học có cơ hội áp dụng và tốc độ mà KPI liên quan có thể thay đổi.

Thời điểm đánh giá phải đi theo loại kết quả cần đo

Sai lệch phổ biến khi lựa chọn thời điểm đánh giá đào tạo là bắt đầu từ lịch: “đánh giá trước bao nhiêu ngày?” hoặc “sau khóa học bao lâu thì gửi khảo sát?”. Cách tiếp cận chính xác hơn là bắt đầu từ câu hỏi: đang muốn biết điều gì?

Mỗi kết quả đào tạo có một độ trễ khác nhau. Năng lực đầu vào tồn tại trước khi chương trình bắt đầu nên phải được đo trước khi người học tiếp xúc đáng kể với nội dung. Mức hiểu bài có thể xuất hiện ngay trong buổi học. Khả năng thực hiện một kỹ năng có thể kiểm tra khi kết thúc thực hành. Nhưng thay đổi hành vi tại nơi làm việc chỉ có thể quan sát sau khi người học quay lại công việc và thực sự có cơ hội sử dụng kỹ năng mới.

Có thể hình dung các cửa sổ đo lường như sau:

Các khoảng 30–90 ngày hay 3–6 tháng nên được hiểu là mốc tham chiếu vận hành, không phải tiêu chuẩn cố định. Nếu nhân viên sử dụng kỹ năng mới hằng ngày, 30 ngày có thể đã tạo đủ dữ liệu quan sát. Nếu kỹ năng chỉ được dùng vài lần mỗi quý, đo ở ngày thứ 30 có thể đơn giản là quá sớm.

Vì vậy, “thời điểm tốt nhất” là thời điểm kết quả cần đo đã hình thành nhưng dữ liệu vẫn còn đủ gần với chương trình để việc giải thích có ý nghĩa.

Đánh giá trước đào tạo: khi cần xác lập điểm xuất phát

Đánh giá trước đào tạo nên được thực hiện trước khi người học được tiếp xúc đáng kể với nội dung hoặc hoạt động can thiệp. Mục tiêu không chỉ là kiểm tra xem họ biết gì, mà còn tạo ra một điểm tham chiếu để sau này phân biệt năng lực vốn có với phần thay đổi xuất hiện sau chương trình.

Baseline có thể là điểm kiểm tra kiến thức, bài thực hành kỹ năng, dữ liệu chất lượng, tỷ lệ lỗi, thời gian xử lý công việc hoặc một KPI phù hợp với mục tiêu đào tạo. Nếu mục tiêu là nâng năng lực xử lý khiếu nại, chẳng hạn, số liệu trước đào tạo có thể bao gồm chất lượng xử lý tình huống hoặc chỉ số liên quan đến công việc thay vì chỉ hỏi người học tự đánh giá mức tự tin.

Đánh giá trước đặc biệt cần thiết khi tổ chức muốn trả lời các câu hỏi như:

·         Người học đang thiếu kiến thức hay kỹ năng nào

·         Có cần chia lớp hoặc phân nhóm theo trình độ không

·         Mức cải thiện sau đào tạo là bao nhiêu

·         KPI sau chương trình đã thay đổi bao nhiêu so với điểm xuất phát

Thời điểm thực hiện cần đủ gần với khóa học để baseline còn đại diện cho trạng thái thực tế, nhưng cũng phải đủ sớm để kết quả có thể được sử dụng. Nếu kiểm tra đầu vào chỉ được thực hiện vài phút trước giờ khai giảng nhưng mục đích là điều chỉnh nội dung khóa học, dữ liệu có thể đến quá muộn để tạo tác động.

Ngược lại, baseline được lấy quá sớm cũng có vấn đề. Năng lực, cơ cấu công việc hoặc KPI có thể đã thay đổi trước ngày đào tạo, khiến phép so sánh sau này kém tương thích.

Một điểm cần lưu ý là pre-test và post-test cho biết mức thay đổi, nhưng chưa tự động chứng minh đào tạo là nguyên nhân duy nhất của thay đổi đó. Hiệu suất sau chương trình còn có thể chịu ảnh hưởng từ quản lý, quy trình, công cụ, mùa vụ hoặc thay đổi thị trường. Khi yêu cầu chứng minh tác động ở mức cao, baseline cần được kết hợp với dữ liệu bổ sung hoặc thiết kế so sánh thích hợp.

Không phải chương trình nào cũng cần một hệ thống đánh giá trước phức tạp. Nếu mục tiêu chỉ là truyền đạt một thông tin đơn giản và tổ chức không cần tính mức cải thiện, baseline nhẹ hoặc thậm chí không có baseline chính thức có thể đủ. Nhưng nếu muốn tuyên bố “năng lực đã tăng bao nhiêu”, bỏ qua điểm xuất phát sẽ làm kết luận yếu đi đáng kể.

Đánh giá trong đào tạo: khi cần phát hiện và điều chỉnh sớm

Đánh giá trong đào tạo mang bản chất formative: dữ liệu được tạo ra khi quá trình học vẫn đang diễn ra, vì vậy giảng viên hoặc người học còn cơ hội điều chỉnh.

Giá trị của giai đoạn này không nằm ở việc tạo thêm một điểm số, mà ở vòng phản hồi. Người học thực hiện một bài tập, bài kiểm tra ngắn, mô phỏng hoặc tình huống; kết quả cho thấy họ đang hiểu đúng ở đâu và sai ở đâu; sau đó nội dung, tốc độ, mức hỗ trợ hoặc hoạt động thực hành được điều chỉnh trước khi khóa học kết thúc.

Với chương trình ngắn, không nhất thiết phải kiểm tra theo một số phút cố định. Điểm kiểm tra nên đặt sau những khái niệm hoặc kỹ năng có tính tiền đề, trước khi người học chuyển sang phần phụ thuộc vào chúng. Với chương trình kéo dài nhiều tuần, đánh giá có thể được thực hiện tại từng module, cột mốc thực hành hoặc giai đoạn chuyển cấp độ năng lực.

Các hình thức phù hợp gồm câu hỏi kiểm tra nhanh, bài tập tình huống, quan sát thực hành, mô phỏng, giải thích lại bằng lời hoặc sản phẩm do người học thực hiện. Việc chỉ hỏi “mọi người có hiểu không?” tạo ra bằng chứng yếu hơn nhiều so với yêu cầu người học thực sự thể hiện điều họ vừa học.

Đây cũng là lý do không nên đồng nhất mức hài lòng trong lớp với mức học được. Một buổi học có thể hấp dẫn nhưng người học vẫn mắc lỗi ở kỹ năng cốt lõi. Ngược lại, một hoạt động thực hành khó có thể tạo cảm giác không thoải mái nhưng lại bộc lộ chính xác khoảng trống cần được sửa.

Đánh giá trong đào tạo cũng có giới hạn. Kiểm tra quá dày có thể làm gián đoạn nhịp học và biến chương trình thành chuỗi bài thi. Vì vậy, tần suất nên tập trung vào các điểm mà dữ liệu có khả năng dẫn tới một quyết định: dạy lại, tăng thực hành, thay đổi tốc độ, hỗ trợ một nhóm người học hoặc cho phép chuyển sang nội dung tiếp theo.

Nếu dữ liệu được thu nhưng không còn khả năng thay đổi chương trình, chức năng formative của phép đánh giá gần như đã mất.

Đánh giá ngay sau đào tạo: khi cần xác nhận phản ứng và mức học được

Khoảng thời gian ngay khi chương trình kết thúc, thường trong 0–24 giờ, phù hợp nhất để đo những kết quả có thể xuất hiện ngay: phản ứng của người học và mức kiến thức hoặc kỹ năng họ vừa đạt được.

Theo logic của Kirkpatrick, đây là cửa sổ thuận lợi cho Level 1 – Reaction và một phần quan trọng của Level 2 – Learning. Tuy nhiên, hai loại dữ liệu này phải được tách biệt.

Khảo sát cuối khóa có thể cho biết người học đánh giá mức liên quan của nội dung, trải nghiệm học tập hoặc khả năng ứng dụng như thế nào. Dữ liệu đó hữu ích để cải thiện chương trình, nhưng điểm hài lòng cao không chứng minh rằng năng lực đã tăng.

Để xác nhận mức học được, cần bằng chứng trực tiếp hơn: post-test, bài thực hành, mô phỏng, giải quyết tình huống hoặc sản phẩm thể hiện năng lực. Nếu có baseline tương đương trước đào tạo, so sánh trước – sau còn cho biết mức thay đổi trong phạm vi năng lực đã đo.

Ví dụ, nếu điểm kiểm tra tăng từ 60% lên 85%, dữ liệu chứng minh người học thực hiện tốt hơn trên phép đo đó ở cuối chương trình. Nó không tự động chứng minh rằng sau hai tháng họ vẫn nhớ 85% nội dung, rằng họ sẽ thay đổi hành vi tại nơi làm việc hoặc KPI kinh doanh sẽ tăng.

Đó là giới hạn quan trọng của đánh giá ngay sau đào tạo: kết quả thường phản ánh acquisition – mức đạt được vừa hình thành, chứ chưa chắc phản ánh retention – khả năng duy trì hay transfer – khả năng chuyển giao sang công việc thực tế.

Vì thế, nếu mục tiêu chương trình dừng ở việc xác nhận người học đã nắm được một nội dung bắt buộc, phép đo ngay sau có thể rất quan trọng. Nếu mục tiêu là thay đổi cách làm việc, dữ liệu này mới là một điểm kiểm tra trung gian chứ chưa phải bằng chứng cuối cùng về hiệu quả.

Đánh giá sau một khoảng thời gian: khi cần đo chuyển giao và kết quả

Khi mục tiêu đào tạo là thay đổi hành vi hoặc tạo ra kết quả công việc, đánh giá phải được trì hoãn cho đến khi người học có đủ cơ hội áp dụng.

Đây là điểm khác biệt giữa việc “biết cách làm” và “thực sự làm”. Một nhân viên có thể hoàn thành xuất sắc bài mô phỏng cuối khóa nhưng trở lại môi trường làm việc cũ, thiếu công cụ, thiếu hỗ trợ từ quản lý hoặc không gặp tình huống cần sử dụng kỹ năng. Đo hành vi sau một tuần trong trường hợp đó có thể không phản ánh năng lực chuyển giao, đơn giản vì chưa có đủ cơ hội để quan sát.

Với kỹ năng được sử dụng thường xuyên, 30–90 ngày có thể là một khoảng tham chiếu hợp lý để kiểm tra hành vi. Có thể quan sát công việc, đánh giá sản phẩm đầu ra, xem dữ liệu hệ thống, thu nhận phản hồi của quản lý hoặc so sánh các chỉ số thực hiện trước và sau.

Nếu hành vi xuất hiện ít thường xuyên hoặc kết quả có độ trễ lớn, cửa sổ đánh giá phải dài hơn. Một số chương trình có thể cần 3–6 tháng hoặc ít nhất một chu kỳ công việc đầy đủ trước khi kết quả trở nên đủ ổn định để phân tích.

Theo Kirkpatrick, đây là khu vực của Level 3 – Behavior và Level 4 – Results. Càng đi lên các mức này, khoảng cách giữa đào tạo và kết quả càng lớn, đồng thời số yếu tố bên ngoài có thể ảnh hưởng tới dữ liệu cũng tăng.

Chẳng hạn, doanh số tăng sau chương trình bán hàng không đồng nghĩa toàn bộ phần tăng là do đào tạo. Giá bán, chiến dịch marketing, chất lượng lead, thị trường hoặc chính sách hoa hồng đều có thể thay đổi cùng lúc. Vì vậy, khi đánh giá kết quả kinh doanh, cần xem cả baseline, xu hướng trước đó và những biến động quan trọng xảy ra trong cùng giai đoạn.

Mốc 30–60–90 ngày không phải một tiêu chuẩn bắt buộc. Thay vì máy móc gửi cùng một khảo sát vào ngày thứ 90 cho mọi chương trình, nên đặt câu hỏi: “Đến lúc này người học đã có bao nhiêu cơ hội thực hiện hành vi cần đánh giá?” Nếu câu trả lời là gần như chưa có, phép đo vẫn còn quá sớm.

Cách chọn thời điểm đánh giá theo mục tiêu đo lường

Một hệ thống đánh giá tốt không cần đo mọi thứ ở mọi thời điểm. Nó cần đủ điểm đo để trả lời những câu hỏi quan trọng của chương trình mà không tạo thêm dữ liệu không được sử dụng.

Có thể lựa chọn theo bốn bước:

1.    Xác định kết quả cần chứng minh: Năng lực đầu vào, tiến bộ trong học tập, mức học được, hành vi hay KPI công việc

2.    Ước tính độ trễ của kết quả: Kết quả xuất hiện ngay hay cần nhiều lần áp dụng mới quan sát được

3.    Đặt phép đo vào cửa sổ sớm nhất mà kết quả đã có thể quan sát một cách hợp lý: Không đo hành vi trước khi có cơ hội hành động và không đợi nhiều tháng để phát hiện một lỗi học tập có thể sửa ngay

4.    Bổ sung baseline khi cần nói về mức thay đổi: Nếu muốn kết luận “tăng bao nhiêu”, cần biết điểm xuất phát

Ma trận lựa chọn thời điểm

Ba lịch đánh giá tham chiếu

Với khóa học kiến thức ngắn, có thể dùng baseline khi cần đo mức cải thiện, kiểm tra nhanh trong các phần quan trọng, post-test ngay sau khóa và chỉ bổ sung một điểm đo sau 30–60 ngày nếu khả năng ghi nhớ hoặc áp dụng thực tế thực sự quan trọng.

Với chương trình phát triển kỹ năng công việc, baseline nên thể hiện năng lực thực hiện trước đào tạo. Trong chương trình cần có các checkpoint thực hành, cuối chương trình có bài biểu diễn kỹ năng và khoảng 30–90 ngày sau mới quan sát khả năng chuyển giao vào công việc.

Với chương trình hướng tới KPI tổ chức, lịch đánh giá thường cần dài hơn: baseline trước đào tạo, kiểm tra quá trình học trong chương trình, xác nhận năng lực ngay sau và sau đó chờ đủ một hoặc nhiều chu kỳ vận hành trước khi đánh giá kết quả. Nếu KPI chỉ được tổng hợp theo quý, việc cố kết luận tác động sau hai tuần sẽ không tạo ra bằng chứng có ý nghĩa.

Như vậy, ba giai đoạn trước – trong – sau không phải ba lựa chọn cạnh tranh. Chúng tạo thành một chuỗi bằng chứng: baseline cho biết điểm xuất phát, formative assessment cho biết quá trình phát triển, đánh giá ngay sau xác nhận mức đạt được và đánh giá trì hoãn kiểm tra xem kết quả đó có tồn tại trong công việc hay không.

Lựa chọn đúng thời điểm đánh giá đào tạo bắt đầu từ kết quả cần đo, không bắt đầu từ một lịch cố định. Đánh giá trước phù hợp khi cần baseline hoặc chẩn đoán đầu vào; đánh giá trong phù hợp khi dữ liệu còn có thể giúp điều chỉnh quá trình học; đánh giá ngay sau phù hợp với phản ứng và mức học vừa đạt; còn đánh giá sau một khoảng thời gian cần thiết khi mục tiêu là khả năng áp dụng, thay đổi hành vi hoặc kết quả công việc.

Vì các kết quả này xuất hiện với độ trễ khác nhau, một phép đo duy nhất sau khóa học không thể đại diện cho toàn bộ hiệu quả đào tạo. Lịch đánh giá phù hợp là lịch đặt từng phép đo vào đúng thời điểm mà kết quả tương ứng đã có thể xuất hiện và được quan sát đáng tin cậy.