Chấm mù là cách giao bài cho giám khảo mà không kèm bất kỳ thông tin nào cho biết ai là tác giả, để điểm số chỉ phản ánh bài làm. Giám khảo dù công tâm đến đâu cũng khó gạt hẳn ra khỏi đầu những điều như tên một người quen, một đơn vị nổi tiếng hay một người từng đoạt giải. Chấm mù không đòi hỏi ai phải chống lại thiên kiến bằng ý chí; nó lấy đi chính thông tin gây ra thiên kiến.
Bài này đi qua cách tổ chức chấm mù trong cuộc thi người lớn: ai giữ bảng đối chiếu, mã hoá hồ sơ ra sao, những chỗ danh tính hay lọt qua mà ban tổ chức ít để ý, và cách xử lý khi giám khảo vẫn nhận ra tác giả. Phần cuối nói về những cuộc thi không thể chấm mù hoàn toàn và cách bù lại.
Chấm mù giải quyết được gì và không giải quyết được gì
Chấm mù chặn được nhóm thiên kiến dựa trên danh tính: thiên vị người quen, nể người có tiếng, ác cảm với một đơn vị, kỳ vọng sẵn vào người từng thắng. Nó cũng bảo vệ chính giám khảo. Khi kết quả bị nghi ngờ, ban tổ chức có thể chỉ ra rằng tại thời điểm chấm, không ai trong hội đồng biết bài nào của ai. Đó là lá chắn rất mạnh trước những lời đồn về chuyện sắp đặt giải.
Chấm mù không chặn được thiên kiến dựa trên chính bài làm: giám khảo thích phong cách quen thuộc, bị ảnh hưởng bởi bài vừa đọc trước đó, ưu ái chủ đề mình quan tâm. Những thiên kiến này cần rubric rõ, thứ tự chấm xáo trộn và buổi thống nhất trước khi chấm. Nó cũng không thay được quy định về xung đột lợi ích: giám khảo vẫn phải khai báo quan hệ với người dự thi khi biết, vì trong nhiều cuộc thi nhỏ, phong cách của một người quen là thứ nhận ra ngay.
Nói cách khác, chấm mù là một lớp bảo vệ, không phải toàn bộ hàng rào. Nhưng là lớp rẻ nhất và hiệu quả nhất trong các lớp, vì nó chỉ đòi hỏi kỷ luật hành chính, không đòi hỏi giám khảo phải thay đổi cách suy nghĩ.
Quy trình mã hoá hồ sơ từng bước
Nguyên tắc cốt lõi: người biết danh tính thì không chấm, người chấm thì không biết danh tính. Quy trình dưới đây áp dụng được cho cuộc thi nộp bài trực tuyến lẫn nộp bản giấy.
- Chỉ định một thư ký hồ sơ không thuộc ban giám khảo và không dự thi. Người này giữ bảng đối chiếu giữa mã số và thông tin thí sinh, và là người duy nhất được mở bảng đó cho đến khi công bố.
- Thiết kế mẫu nộp bài tách hai phần: phần thông tin cá nhân (họ tên, liên hệ, đơn vị, cam kết) và phần bài dự thi. Hai phần lưu ở hai nơi khác nhau ngay từ khi nhận.
- Cấp cho mỗi bài một mã ngẫu nhiên, không theo thứ tự nộp. Mã theo thứ tự như 001, 002 làm lộ ai nộp sớm, mà ai nộp sớm đôi khi là thông tin giám khảo biết qua trò chuyện.
- Kiểm tra phần bài dự thi để tìm dấu vết danh tính: tên trong bài, chữ ký trên ảnh, tên tệp, thông tin tác giả trong thuộc tính tệp. Che hoặc xoá trước khi chuyển.
- Chuyển bài cho giám khảo chỉ kèm mã số. Giám khảo ghi điểm theo mã.
- Sau khi điểm đã chốt và ký biên bản, thư ký mới ghép mã với danh tính để lập danh sách kết quả.
Biên bản chấm nên ghi rõ thời điểm ghép danh tính, có chữ ký của trưởng ban giám khảo và thư ký. Một dòng như vậy trong biên bản có giá trị hơn mọi lời giải thích sau này khi có người thắc mắc.
Những chỗ danh tính hay lọt qua
Phần lớn sự cố chấm mù không đến từ việc ai đó cố ý tiết lộ, mà từ những dấu vết nhỏ trong bài. Bảng dưới liệt kê các chỗ hay gặp theo loại bài.
| Loại bài | Dấu vết hay lọt | Cách xử lý |
|---|---|---|
| Ảnh | Chữ ký hoặc dấu bản quyền in trên ảnh; thông tin máy ảnh, tên chủ máy, toạ độ trong dữ liệu kèm tệp; tên tệp mang tên người chụp | Yêu cầu nộp ảnh không chữ ký; thư ký xoá dữ liệu kèm tệp và đổi tên tệp theo mã trước khi chuyển |
| Bài viết | Tên tác giả ở đầu hoặc cuối bài; nhắc tên đơn vị, tên đồng nghiệp; thông tin tác giả trong thuộc tính tệp văn bản | Dặn thí sinh không ghi tên trong bài; thư ký chuyển nội dung sang tệp mới trước khi chuyển |
| Thiết kế | Chữ ký góc bản vẽ; tên xưởng thiết kế; phong cách trình bày bìa hồ sơ quen thuộc | Quy định khung trình bày chung cho mọi bài |
| Ý tưởng, kế hoạch | Tên công ty, phòng ban, sản phẩm nội bộ làm lộ người viết | Thay bằng mô tả chung khi không ảnh hưởng nội dung; ghi nhận trong biên bản |
| Video ngắn | Mặt và giọng người dự thi; phần giới thiệu đầu hoặc cuối video | Chấp nhận không chấm mù hoàn toàn; cắt phần giới thiệu nếu thể lệ cho phép |
Nên ghi các yêu cầu này vào thể lệ, kèm hậu quả nếu thí sinh cố tình để lại dấu hiệu nhận dạng. Thể lệ có thể quy định bài cố ý ghi danh tính bị loại, hoặc ít nhất bị thư ký che trước khi chuyển. Điều quan trọng là áp dụng như nhau cho mọi người.
Khi giám khảo vẫn nhận ra tác giả
Khai báo ngay, không im lặng chấm tiếp. Quy chế nên yêu cầu giám khảo báo cho trưởng ban hoặc thư ký khi tin rằng mình nhận ra tác giả một bài, dù chỉ là đoán. Khai báo không phải là thừa nhận sai, mà là thực hiện đúng quy chế.
Có quan hệ thì rút khỏi bài đó. Nếu giám khảo nhận ra bài của người thân, học trò, đồng nghiệp trực tiếp hay đối tác, giám khảo không chấm bài đó. Điểm của bài được tính từ các giám khảo còn lại theo cách quy chế đã định trước.
Không có quan hệ thì ghi nhận và chấm tiếp. Nhận ra phong cách của một người có tiếng mà mình không quen biết không phải là xung đột lợi ích. Ghi nhận trong biên bản để minh bạch, giám khảo vẫn chấm.
Tính điểm khi một giám khảo rút. Quy chế cần nói trước bài thiếu một giám khảo thì tính trung bình của số còn lại, hay mời giám khảo dự bị. Đặc biệt lưu ý nếu cuộc thi có quy tắc loại điểm cao nhất và thấp nhất, vì số điểm còn lại thay đổi.
Chấm mù trong cuộc thi nội bộ doanh nghiệp
Cuộc thi nội bộ là nơi chấm mù khó nhất và cũng cần nhất. Giám khảo thường là trưởng các phòng ban, người dự thi là nhân viên của họ, và ai cũng biết phòng nào đang làm dự án gì. Một bài cải tiến quy trình kho gần như chắc chắn đến từ phòng kho; một bộ ảnh chụp ở nhà máy dễ đoán là của ca nào.
Vẫn có cách làm tốt hơn không làm gì. Thứ nhất, phân công chấm chéo: trưởng phòng không chấm bài của phòng mình, kể cả khi không biết chắc bài nào của ai. Thứ hai, mời một hoặc hai giám khảo từ bên ngoài công ty để có ít nhất một góc nhìn không bị chi phối bởi quan hệ nội bộ. Thứ ba, yêu cầu người dự thi viết bài theo khung chung, thay tên sản phẩm, khách hàng và đồng nghiệp bằng mô tả, để giảm dấu hiệu nhận dạng.
Cuối cùng, nói thẳng với mọi người rằng chấm mù trong nội bộ không hoàn hảo, và ban tổ chức đã làm những gì để bù lại. Sự thẳng thắn đó thường được đón nhận tốt hơn là tuyên bố chấm mù tuyệt đối trong khi ai cũng biết là không phải.
Khi không thể chấm mù hoàn toàn
Một số vòng thi về bản chất không thể ẩn danh: thuyết trình trực tiếp, phỏng vấn đội thi, biểu diễn tại chỗ, hay cuộc thi nội bộ mà mọi người đều biết ai làm dự án nào. Trong các trường hợp đó, vẫn có cách giảm thiên kiến.
- Chấm mù ở vòng hồ sơ, chỉ mở danh tính từ vòng thuyết trình. Như vậy ít nhất việc chọn ai vào vòng trong không bị ảnh hưởng bởi danh tính.
- Tăng số giám khảo và áp dụng quy tắc loại điểm cao nhất, thấp nhất để giảm ảnh hưởng của một người thiên vị.
- Chọn một phần giám khảo từ bên ngoài đơn vị tổ chức, không quen biết người dự thi.
- Yêu cầu giám khảo viết lý do cho điểm số ở mỗi tiêu chí. Viết lý do buộc giám khảo dựa vào điều thấy được, và để lại căn cứ khi có khiếu nại.
- Yêu cầu khai báo quan hệ trước buổi chấm, dựa trên danh sách thí sinh đã công khai, thay vì chờ giám khảo tự nhận ra.
Với vòng thuyết trình, nhiều cuộc thi dùng cách lai: hồ sơ dự án đã được chấm mù chiếm một phần điểm, phần trình bày trực tiếp chiếm phần còn lại. Tỷ lệ giữa hai phần phản ánh mức độ cuộc thi muốn thưởng cho kỹ năng trình bày so với chất lượng bản thân dự án.
Bảng đối chiếu và dữ liệu cá nhân thí sinh
Bảng đối chiếu mã số với danh tính là tài liệu nhạy cảm nhất của cuộc thi. Nó chứa thông tin cá nhân của mọi người dự thi, và nếu lọt ra trước khi chấm xong thì toàn bộ công sức chấm mù trở nên vô nghĩa. Nên lưu ở một nơi chỉ thư ký có quyền mở, không gửi qua nhóm trò chuyện chung của ban tổ chức, không in ra để trên bàn chấm.
Về dữ liệu cá nhân, nguyên tắc chung là chỉ thu những gì thật cần cho cuộc thi, nói rõ trong thể lệ thông tin được dùng vào việc gì và lưu trong bao lâu, và xoá hoặc hạn chế truy cập khi hết mục đích. Quy định cụ thể về bảo vệ dữ liệu cá nhân có thể thay đổi; ban tổ chức nên tra văn bản hiện hành, và với cuộc thi lớn có thể hỏi luật sư trên AI Cố Vấn trước khi mở cổng nhận bài.
Sau khi công bố, bảng đối chiếu vẫn cần giữ lại trong một thời gian để phục vụ phúc khảo và khiếu nại. Thời gian giữ nên ghi trong quy chế, và khi hết hạn thì xoá theo cách có ghi nhận. Một cuộc thi làm tốt việc này cho thấy sự tôn trọng người dự thi, điều mà họ thường nhớ lâu hơn cả tên người đoạt giải.
Câu hỏi thường gặp
Cuộc thi nhỏ vài chục bài có cần chấm mù không?
Nên có, vì cuộc thi càng nhỏ, khả năng giám khảo quen người dự thi càng cao. Chấm mù cho vài chục bài chỉ tốn thêm một buổi làm việc của thư ký, nhưng tránh được rất nhiều nghi ngờ khi công bố kết quả.
Ai không được làm thư ký giữ bảng đối chiếu?
Giám khảo, người dự thi, người thân của người dự thi và người có quyền quyết định giải thưởng. Lý tưởng là một người làm hành chính, không có quan hệ lợi ích với kết quả, và được ghi tên trong quy chế.
Chấm mù hai chiều là gì và cuộc thi có cần không?
Đó là cách mà cả thí sinh cũng không biết giám khảo nào chấm bài mình. Trong cuộc thi, danh sách ban giám khảo thường được công bố, nhưng có thể giữ kín việc giám khảo nào chấm bài nào, để tránh thí sinh tìm cách tác động riêng.
Thí sinh cố tình ghi tên trong bài thì xử lý sao?
Làm theo thể lệ. Nếu thể lệ quy định loại, thì loại và thông báo lý do. Nếu thể lệ chỉ yêu cầu không ghi tên mà không nói hậu quả, thư ký nên che phần đó và ghi nhận, rồi bổ sung hậu quả vào thể lệ mùa sau.
Có nên công khai mã số của bài đạt giải không?
Có thể công bố cùng kết quả để thí sinh đối chiếu được với điểm từng vòng nếu cuộc thi công khai điểm. Không cần thiết công bố mã của mọi bài, đặc biệt khi mã có thể giúp suy ra danh tính người không đạt giải.
Chấm trên nền tảng trực tuyến có tự động đảm bảo chấm mù không?
Không tự động. Nền tảng chỉ ẩn những trường được cấu hình ẩn; tên tệp, nội dung bài và dữ liệu kèm tệp vẫn có thể làm lộ danh tính. Thư ký vẫn cần kiểm tra bài trước khi mở cho giám khảo.