Các bước đánh giá phản hồi mở
Trong bài làm của mình, bạn cũng nêu rõ các bước đánh giá. Bạn có thể đặt nhiệm vụ bao gồm một số kết hợp của các bước sau.
- Bước đào tạo người học
- Bước đánh giá đồng nghiệp
- Bước tự đánh giá
- Bước đánh giá nhân viên
Ghi chú
Nếu bạn bao gồm bước đào tạo người học, bạn cũng phải bao gồm bước đánh giá đồng nghiệp. Bước đào tạo người học phải đến trước bước đánh giá ngang hàng hoặc tự đánh giá. Nếu bạn bao gồm cả hai bước đánh giá ngang hàng và tự đánh giá, chúng tôi khuyên bạn nên đặt đánh giá ngang hàng trước khi tự đánh giá. Nếu bạn bao gồm bước đánh giá nhân viên, thì đó phải là bước cuối cùng trong công việc.
Bạn có thể thấy loại và thứ tự của các bài đánh giá khi bạn xem bài tập. Trong ví dụ sau, sau khi người học gửi câu trả lời của họ, họ hoàn thành bước đào tạo người học (“Học cách đánh giá câu trả lời”) , hoàn thành đánh giá đồng nghiệp về câu trả lời của người học khác (“Người đồng cấp đánh giá”) và sau đó hoàn thành tự đánh giá (“Đánh giá Phản hồi của bạn ”).
Bước đào tạo người học
Các bước đào tạo người học dạy người học thực hiện các đánh giá của chính họ. Đánh giá đào tạo học viên bao gồm một hoặc nhiều câu trả lời mẫu mà bạn viết, cùng với điểm số mà bạn sẽ cung cấp cho câu trả lời mẫu. Người học xem lại các câu trả lời này và cố gắng cho điểm theo cách bạn đã chấm.
Ghi chú
Nếu bạn bao gồm bước đào tạo người học, bạn cũng phải bao gồm bước đánh giá đồng nghiệp. Bước đào tạo người học phải đến trước bất kỳ bước đánh giá đồng cấp và tự đánh giá nào.
Trong đánh giá đào tạo người học, bước Tìm hiểu để Đánh giá Phản hồi sẽ mở ngay sau khi người học gửi phản hồi. Người học thấy một trong những câu trả lời mẫu mà bạn đã tạo, cùng với phiếu đánh giá. Điểm mà bạn đã trả lời sẽ không xuất hiện. Người học cũng thấy số lượng câu trả lời mẫu mà họ sẽ đánh giá.
Người học chọn một tùy chọn cho mỗi tiêu chí của bài tập, sau đó chọn So sánh lựa chọn của bạn với lựa chọn của người hướng dẫn. Nếu tất cả các lựa chọn của người học khớp với các lựa chọn được xác định bởi nhóm khóa học, câu trả lời mẫu tiếp theo sẽ tự động mở ra. Nếu bất kỳ lựa chọn nào của người học khác với lựa chọn do nhóm khóa học chỉ định, người học sẽ nhìn thấy phản hồi một lần nữa, với thông báo cho biết rằng đánh giá của anh ta khác với đánh giá của người hướng dẫn. Người học tiếp tục thử cho điểm câu trả lời mẫu cho đến khi điểm của anh ta cho tất cả các tiêu chí phù hợp với điểm do nhóm khóa học xác định. Để biết thêm thông tin, hãy xem Đào tạo Người học.
Bước đánh giá đồng nghiệp
Trong bước đánh giá ngang hàng , người học xem xét phản hồi của những người học khác trong khóa học. Đối với mỗi câu trả lời, họ chọn một tùy chọn cho mỗi tiêu chí trong phiếu đánh giá của bạn dựa trên câu trả lời. Người học cũng có thể cung cấp phản hồi văn bản hoặc nhận xét về mỗi câu trả lời.
Nếu bạn bao gồm cả hai bước đánh giá ngang hàng và tự đánh giá, chúng tôi khuyên bạn nên đặt đánh giá ngang hàng trước khi tự đánh giá.
Để biết thông tin về cách đánh giá đồng đẳng ảnh hưởng đến điểm bài tập của người học, hãy xem Cách tính điểm cho các bài đánh giá phản hồi mở.
Số câu trả lời và đánh giá
Khi bạn bao gồm bước đánh giá ngang hàng, bạn chỉ định số câu trả lời mà mỗi người học phải đánh giá (Phải cho điểm) và số lượng đánh giá đồng đẳng mà mỗi câu trả lời phải nhận được (Xếp loại theo) trước khi bước này được coi là hoàn thành.
Ghi chú
Vì một số người học có thể gửi câu trả lời mà không thực hiện bất kỳ đánh giá đồng cấp nào, một số câu trả lời có thể không nhận được số lượng đánh giá cần thiết. Để tăng khả năng tất cả các câu trả lời nhận được đủ số lượng đánh giá, bạn phải đặt số lượng câu trả lời mà người học phải đánh giá cao hơn số lượng bài đánh giá mà mỗi câu trả lời phải trải qua. Ví dụ, nếu bạn yêu cầu mỗi câu trả lời nhận được ba lần đánh giá, bạn có thể yêu cầu mỗi người học đánh giá năm câu trả lời.
Nếu tất cả các câu trả lời đã nhận được đánh giá, nhưng một số người học chưa hoàn thành số lượng đánh giá đồng đẳng cần thiết, những người học đó có thể thực hiện đánh giá đồng cấp đối với các câu trả lời đã được đánh giá bởi những người học khác. Người học đã gửi câu trả lời sẽ thấy các đánh giá bổ sung của đồng nghiệp khi thấy điểm của mình. Tuy nhiên, các đánh giá đồng cấp bổ sung không được tính vào điểm mà phản hồi nhận được.
Tùy chọn phản hồi
Theo mặc định, trong các bước đánh giá ngang hàng, người học có thể cung cấp phản hồi bằng văn bản cho toàn bộ phản hồi, sử dụng một trường nhận xét bên dưới toàn bộ phiếu đánh giá. Bạn cũng có thể thêm trường nhận xét vào một tiêu chí riêng lẻ hoặc một số tiêu chí riêng lẻ. Trường nhận xét này có thể chứa tối đa 300 ký tự.
Các trường nhận xét cho tiêu chí riêng lẻ xuất hiện bên dưới các tùy chọn cho tiêu chí.
Để biết thêm thông tin, hãy xem Bước 3. Thêm Phiếu tự đánh giá và Chỉ cung cấp Trường Nhận xét cho Tiêu chí Cá nhân.
Đánh giá các phản hồi bổ sung
Người học có thể đánh giá nhiều hơn số câu trả lời được yêu cầu. Sau khi người học hoàn thành bước đánh giá ngang hàng, bước này “thu gọn lại” để chỉ có tiêu đề Đánh giá đồng đẳng được hiển thị.
Nếu người học chọn tiêu đề Đánh giá ngang hàng, bước này sẽ mở rộng trở lại. Sau đó, người học có thể chọn Tiếp tục Đánh giá Đồng đẳng để thực hiện đánh giá đồng đẳng bổ sung.
Bước tự đánh giá
Trong các bước tự đánh giá, người học thấy phản hồi của chính mình, sau đó là phiếu tự đánh giá. Giống như đánh giá ngang hàng, người học đánh giá phản ứng bằng cách sử dụng phiếu đánh giá, chọn một tùy chọn cho mỗi tiêu chí.
Nếu bạn bao gồm cả đánh giá ngang hàng và tự đánh giá, chúng tôi khuyên bạn nên bao gồm đánh giá ngang hàng trước khi tự đánh giá.
Bước đánh giá nhân viên
Trong các bước đánh giá nhân viên, một thành viên của nhóm khóa học thực hiện đánh giá phản ứng của người học. Các thành viên trong nhóm khóa học chấm điểm câu trả lời bằng cách sử dụng phiếu đánh giá của vấn đề, giống như cách thực hiện đánh giá bản thân và đồng nghiệp và có thể bao gồm nhận xét trong bài đánh giá của họ.
Ghi chú
Nếu một bước đánh giá nhân viên được bao gồm trong một bài tập, người học sẽ không nhận được điểm cuối cùng cho đến khi bước đánh giá nhân viên đã hoàn thành. Điểm số mà bạn cung cấp cho người học trong các bước đánh giá nhân viên sẽ ghi đè điểm số từ bất kỳ loại đánh giá nào khác trong bài tập, bao gồm cả đánh giá đồng cấp được hoàn thành sau khi đánh giá nhân viên.
Bao gồm một bước đánh giá nhân viên trong bài tập ORA là tốt nhất cho các khóa học có nhóm người học nhỏ hơn. Ví dụ: trong một khóa học có nhóm thuần tập, bạn có thể tạo một bài tập ORA có cả các bước đánh giá đồng nghiệp và đánh giá nhân viên và chỉ cung cấp cho các thành viên của một hoặc nhiều nhóm thuần tập cụ thể. Đối với các thành viên của các nhóm còn lại, bạn tạo một bài tập ORA chỉ có bước đánh giá đồng đẳng. Để biết chi tiết về cách tạo trải nghiệm khóa học khác nhau cho người học trong các nhóm khác nhau, hãy xem Tạo nội dung khóa học cụ thể theo nhóm.
Để biết thông tin chi tiết về việc thực hiện xếp loại trong các bước đánh giá nhân viên, hãy xem Thực hiện Đánh giá Nhân viên trong Nhiệm vụ ORA.
Cách tính điểm cho các bài đánh giá phản hồi mở
Trong đánh giá phản hồi mở có chứa đánh giá nhân viên, đánh giá nhân viên có thể được thực hiện nhiều lần và điểm đánh giá nhân viên gần đây nhất tương đương với điểm cuối cùng của nhiệm vụ. Điểm đánh giá ngang hàng và tự đánh giá không được tính đến, mặc dù người học có thể thấy điểm số và nhận xét từ tất cả các bài đánh giá đã được thực hiện đối với câu trả lời của họ.
Trong các bài đánh giá phản hồi mở không bao gồm đánh giá nhân viên nhưng có cả đánh giá đồng nghiệp và tự đánh giá, chỉ điểm đánh giá của đồng nghiệp được tính vào điểm cuối cùng của bài tập. Điểm số tự đánh giá không được tính đến. Không có lựa chọn nào để tính điểm các phần đánh giá ngang hàng và tự đánh giá một cách độc lập.
Trong các bài đánh giá phản hồi mở chỉ bao gồm các bài tự đánh giá, điểm cuối cùng của bài tập tương đương với điểm tự đánh giá.
Ghi chú
Với mức độ chủ quan cao trong các bài đánh giá đồng nghiệp,__chúng tôi khuyên bạn chỉ nên thực hiện các bài tập ORA chỉ được tính vào một tỷ lệ phần trăm nhỏ trong điểm tổng kết của khóa học.
Các chủ đề sau đây trình bày chi tiết cách tính điểm cho các bài đánh giá ngang hàng và tự đánh giá.
Chấm điểm đánh giá ngang hàng
Ghi chú
Nếu đánh giá phản hồi mở bao gồm đánh giá đồng nghiệp và tự đánh giá nhưng không phải đánh giá nhân viên, thì chỉ điểm đánh giá đồng cấp được tính vào điểm cuối cùng của bài tập. Điểm tự đánh giá không được tính đến.
Đánh giá ngang hàng được cho điểm theo tiêu chí. Một số người đánh giá ngang hàng đánh giá phản ứng của người học theo từng tiêu chí bắt buộc. Điểm của người học cho một tiêu chí cụ thể là điểm trung bình của tất cả các điểm mà mỗi người đánh giá ngang hàng đã cho tiêu chí đó. Ví dụ: nếu tiêu chí Ý tưởng trong đánh giá ngang hàng nhận được điểm 10 từ một người học, điểm 7 từ người học thứ hai và 8 điểm từ người học thứ ba, thì điểm của tiêu chí Ý tưởng là 8.
Điểm số cuối cùng của người học đối với một câu trả lời là tổng điểm trung bình từ tất cả những người đánh giá ngang hàng cho tất cả các tiêu chí bắt buộc.
Chấm điểm Tự đánh giá
Ghi chú
Nếu đánh giá phản hồi mở bao gồm cả đánh giá đồng nghiệp và tự đánh giá, điểm của bản thân không được tính vào điểm tổng kết.
Nếu bài đánh giá phản hồi mở chỉ bao gồm các bài tự đánh giá thì điểm cuối cùng của bài tập tương đương với điểm tự đánh giá.
Tự đánh giá được cho điểm theo tiêu chí. Mỗi người học tự đánh giá về từng tiêu chí, sử dụng phiếu đánh giá. Điểm cuối cùng của người học đối với một câu trả lời là tổng số điểm kiếm được, trong tổng số điểm có thể có.
Chấm điểm Đánh giá Nhân viên
Nếu đánh giá phản hồi mở bao gồm bước đánh giá nhân viên, thì điểm được đưa ra trong bước đánh giá nhân viên sẽ ghi đè lên tất cả các điểm khác trong nhiệm vụ.
Câu trả lời hàng đầu
Bạn có thể bao gồm phần Câu trả lời hàng đầu hiển thị các câu trả lời cho điểm cao nhất mà người học đã gửi cho bài tập, cùng với điểm cho những câu trả lời đó. Phần** Câu trả lời Hàng** đầu xuất hiện bên dưới thông tin điểm của người học sau khi người học hoàn thành mọi bước trong bài tập.
Bạn có thể cho phép phần Câu trả lời hàng đầu hiển thị từ 1 đến 100 câu trả lời. Tuy nhiên, hãy nhớ rằng mỗi phản hồi có thể có chiều cao tối đa 300 pixel trong danh sách. (Đối với các câu trả lời dài hơn, người học có thể cuộn để xem toàn bộ câu trả lời.) Chúng tôi khuyên bạn nên chỉ định từ 20 câu trả lời trở xuống để tránh trang quá dài.
Ghi chú
Có thể mất đến một giờ để phản hồi đạt điểm cao xuất hiện trong danh sách Câu trả lời hàng đầu. Nếu một câu trả lời cho điểm cao bị xóa khỏi đánh giá ngang hàng thì câu trả lời đó cũng bị xóa khỏi danh sách Câu trả lời hàng đầu.
Các phương pháp hay nhất để đánh giá phản hồi mở
Đánh giá phản hồi mở có thể là một công cụ giảng dạy mạnh mẽ, nhưng chúng hiệu quả hơn trong một số tình huống so với những tình huống khác. Nhìn chung, đánh giá phản hồi mở phù hợp nhất với các bài tập kết thúc mở hoặc dựa trên dự án với các câu trả lời và thảo luận bài luận chủ quan. Ví dụ: đánh giá phản ứng mở hoạt động tốt trong các bài tập về nhân văn, nơi người học được khuyến khích đưa ra các đánh giá chủ quan về văn bản, hình ảnh hoặc các đóng góp khác, nhưng chúng có thể không phải là công cụ lý tưởng trong các bài tập hóa học khi có câu trả lời chính xác hoặc không chính xác cho các câu hỏi.
Ghi chú
Không thêm nhiều hơn một thành phần ORA trong một đơn vị khóa học. Nhiều bài tập ORA trong một bài gây ra lỗi khi người học nộp bài đánh giá của họ.
_ _Chúng tôi khuyên bạn nên tuân theo các nguyên tắc và phương pháp hay nhất trong các phần sau khi bạn sử dụng đánh giá phản hồi mở trong các khóa học của mình.
Thiết kế Nhiệm vụ
- Không thêm nhiều hơn một thành phần ORA trong một đơn vị khóa học. Nhiều bài tập ORA trong một bài gây ra lỗi khi người học nộp bài đánh giá của họ.
- Không bao gồm quá nhiều đánh giá ORA trong khóa học của bạn. Đánh giá ngang hàng là công việc khó khăn đối với người học và việc phải thực hiện quá nhiều đánh giá đồng đẳng có thể có tác động tiêu cực đến tỷ lệ hoàn thành khóa học của người học.
- Để có trải nghiệm quản lý cho nhân viên khóa học, chỉ sử dụng các bước đánh giá nhân viên trong các bài tập dành cho một số lượng hạn chế người học. Ví dụ: trong các khóa học đã bật nhóm thuần tập, hãy đặt bài tập có chứa bước đánh giá nhân viên chỉ dành cho các thành viên của một hoặc nhiều nhóm.
Chấm điểm và đánh giá
- Đảm bảo rằng bạn có một phiếu đánh giá được thiết kế tốt và rõ ràng cho bài tập.
- Một phiếu đánh giá tốt là rất quan trọng trong việc giúp loại bỏ sự mơ hồ trong quá trình chấm điểm ngang hàng.
- Làm cho bài tập ORA chỉ được tính vào một tỷ lệ phần trăm nhỏ của điểm cuối khóa học hoặc làm cho chúng không được xếp hạng.
- Trong các bài tập ORA đã chấm điểm, hãy cân nhắc đặt điểm thấp nhất có thể thành một số cao hơn 0, để người học có thể kiếm được một số tín dụng cho công việc họ đã làm, ngay cả khi người đánh giá đồng cấp cho họ điểm thấp.
- Cung cấp bài tập ORA thực hành không được phân loại trước khi thực hiện bài tập ORA được chấm điểm đầu tiên trong khóa học, để người học có thể hiểu quy trình chấm điểm ngang hàng và tận dụng tối đa bài tập ORA được xếp loại cuối cùng.
- Cân nhắc sử dụng các bài tập ORA chưa được phân loại để tạo ra sự tương tác và phản hồi của người học mà không ảnh hưởng đến điểm số.
Ư** ớc định tương đương**
- Đặt số Phải cho điểm cao hơn số Xếp loại theo để giảm thiểu khả năng một số câu trả lời sẽ không được đánh giá ngang hàng. Chúng tôi đề xuất một cài đặt chẳng hạn như Phải xếp hạng = 4 và Xếp hạng theo = 3.
- Để có đủ thời gian thực hiện đánh giá ngang hàng sau khi người học đã gửi câu trả lời của chính họ, hãy đặt ngày và giờ trả lời ít nhất một tuần trước ngày và giờ đến hạn đánh giá đồng đẳng.
Nếu thời gian đến hạn trả lời và thời gian đến hạn đánh giá ngang hàng quá gần nhau và một người học gửi câu trả lời ngay trước khi câu trả lời đến hạn, những người học khác có thể không có thời gian để thực hiện đánh giá ngang hàng trước khi đến hạn đánh giá đồng đẳng.
- Sử dụng các bài đăng thảo luận về khóa học để cung cấp hướng dẫn cho việc chấm điểm ngang hàng đối với các bài tập ORA.
- Cân nhắc kéo dài ngày đến hạn để cho phép nhóm kiểm duyệt cuộc thảo luận theo dõi các cuộc thảo luận trong khóa học để biết các câu hỏi hoặc phản ứng đối với việc chấm điểm đồng đẳng và giải quyết các vấn đề khi cần thiết.
Nếu người học nêu quan ngại về bài tập ORA trong các cuộc thảo luận về khóa học, các thành viên trong nhóm khóa học có thể thực hiện các hành động như xóa lịch sử của người học hoặc "trạng thái" cho một vấn đề để anh ta có thể gửi lại bài tập của mình, ghi đè điểm của người học hoặc xóa phản hồi của người học từ phân loại ngang hàng. Nếu có nhiều vấn đề phổ biến hơn với việc chấm điểm đồng đẳng, nhóm khóa học có thể giảm trọng lượng của đánh giá đồng cấp trong lớp cuối khóa học hoặc cho phép người học bỏ bài tập bị xếp loại thấp nhất so với điểm của họ.
Yêu cầu người học tải lên tệp trong câu trả lời
Trong bài tập ORA, bạn có thể yêu cầu người học tải lên hình ảnh, tệp .pdf hoặc các loại tệp khác như một phần trong câu trả lời của họ. Những người học khác đánh giá các câu trả lời và các tệp đi kèm của họ trong quá trình đánh giá ngang hàng. Cung cấp tùy chọn tải tệp lên ngoài phản hồi bằng văn bản có thể mang lại cho người học cơ hội sử dụng các công cụ và phát triển các kỹ năng phù hợp với khóa học của bạn. Tuy nhiên, trước khi bạn quyết định yêu cầu người học tải lên tệp cùng với phản hồi bằng văn bản của họ, hãy lưu ý các hạn chế và phương pháp hay nhất sau đây:
- Trong bước đánh giá ngang hàng, người học tải xuống các tệp mà những người học khác đã tải lên. Để giảm khả năng gặp sự cố từ các tệp có nội dung độc hại, người học không thể tải lên các tệp có phần mở rộng tệp nhất định. Để có danh sách đầy đủ, hãy xem Phần mở rộng tệp bị cấm.
- Các nhóm khóa học chỉ có thể truy cập các tệp đã tải lên cho một người học tại một thời điểm. Nội dung tệp đã tải lên không được bao gồm trong báo cáo về các bài nộp câu trả lời có sẵn từ bảng điều khiển của người hướng dẫn và các gói dữ liệu khóa học không bao gồm bất kỳ tệp nào được tải lên.
- Kích thước tích lũy của tất cả các tệp đã tải lên phải nhỏ hơn 500 MB.
- Tệp hình ảnh phải ở định dạng .jpg, .gif hoặc .png.
Để biết thêm thông tin, hãy xem Chỉ định loại phản hồi.