Bồi dưỡng chuyên môn · Lãnh đạo, Chuyên viên hỗ trợ, Giảng viên · 60 phút
Đọc Bảng điều khiển Trước khi Nó "Đọc" Bạn
Các nhà lãnh đạo mổ xẻ tám ô dữ liệu mô phỏng trên bảng điều khiển (dashboard), bao gồm một "nhận định" do AI tạo ra, để luyện cách đặt câu hỏi: dữ liệu cho thấy gì, không thể cho thấy gì, và ai có thể bị tổn hại bởi một kết luận vội vàng.
Bảng điều khiển dữ liệu luôn xuất hiện đầy tự tin: màu sắc, mũi tên, và ngày càng nhiều những "nhận định" được tạo tự động bằng ngôn ngữ dễ hiểu. Các nhà lãnh đạo được kỳ vọng sẽ hành động dựa trên chúng. Trong buổi này, các nhóm đọc tám ô dữ liệu hư cấu với con mắt phản biện giống như khi dạy học sinh đọc một bản đồ họa thông tin (infographic): kiểm tra trục, mốc so sánh, cỡ mẫu, chỉ số thực sự đo cái gì, và những gì dữ liệu không thể cho biết. Các nhóm cũng xem xét mỗi ô để lộ dữ liệu cá nhân nào và cho ai thấy. Cuối buổi, các nhóm vẽ lại một cách trung thực một ô gây hiểu lầm và viết một bản tóm tắt ba câu mà một buổi họp nhân viên có thể tin cậy.
Trong bộ tài liệu này
- Phiếu A: Thẻ Ô Dữ liệu (thẻ cắt rời)
- Phiếu B: Sơ đồ Biết được / Không biết được (sơ đồ tổ chức)
- Phiếu C: Danh mục Kiểm tra Sử dụng Dữ liệu và Quyền riêng tư trên Bảng điều khiển (danh sách kiểm tra)
- Đáp án cho người điều phối (trang cuối)
Chỉ báo ELE của TCEA
- L3.2 Tôi có thể diễn giải các bộ dữ liệu số phức tạp và truyền đạt phát hiện một cách hiệu quả bằng các công cụ trực quan hóa dữ liệu.
- L3.1 Tôi biết cách sử dụng các công cụ dữ liệu kỹ thuật số để thúc đẩy các nỗ lực cải tiến nhà trường.
- L3.3 Tôi nhận thức được các công cụ đánh giá kỹ thuật số khác nhau và cách sử dụng phù hợp của chúng trong giáo dục.
- AI1.3 Tôi nhận thức được những hạn chế hiện tại và các thiên kiến tiềm ẩn trong hệ thống AI.
Hướng dẫn đầy đủ cho người điều phối: mglearn.github.io/eles/vi/activities/dashboard-critical-read.html
Phiếu A cho Đọc Bảng điều khiển Trước khi Nó "Đọc" Bạn
Thẻ Ô Dữ liệu
Tất cả dữ liệu đều là hư cấu, thuộc Pecan Creek ISD. Mỗi thẻ mô tả một ô dữ liệu trên bảng điều khiển. Mặt sau là đáp án cho người điều phối; in riêng.
Ô 1 · Chuyên cần
Biểu đồ cột có tiêu đề "Khủng hoảng Chuyên cần tại Oakview Middle." Năm cột từ tháng Tám đến tháng Mười hai: 94%, 93%, 93%, 92%, 91%. Trục tung chạy từ 80% đến 95%, nên cột tháng Mười hai trông chỉ cao khoảng một phần ba cột tháng Tám. Các cột chuyển sang màu đỏ khi dưới 93%.
Ô 2 · Tiến bộ đọc
"Tiến bộ Đọc theo Giáo viên" xếp hạng tám giáo viên lớp 3 theo điểm tiến bộ trung bình của bài sàng lọc từ mùa thu đến mùa đông. Cô Tran đứng cuối với +2. Sĩ số lớp và tên học sinh hiện ra khi rê chuột vào.
Ô 3 · Hiệu quả nền tảng
Biểu đồ đường có tiêu đề "Ứng dụng Toán Hiệu quả!" Hai đường: số phút dùng ứng dụng toán mỗi tuần (tăng) và điểm kiểm tra định kỳ (tăng) từ tháng Chín đến tháng Hai. Chú thích ghi: "Dùng ứng dụng nhiều hơn = điểm cao hơn."
Ô 4 · Kỷ luật
Biểu đồ tròn: "Số lần Chuyển lên Xử lý Kỷ luật theo Khối lớp." Lớp 6: 50%, lớp 7: 30%, lớp 8: 20%. Không hiển thị số lượng. Dòng tóm tắt ghi: "Học sinh lớp 6 là vấn đề hạnh kiểm của chúng ta."
Ô 5 · Nhận định của AI
Một ô có nhãn "Nhận định của AI" ghi: "Học sinh Lớp 4 môn Đại số I đang thiếu gắn kết và có nguy cơ trượt môn. Hành động đề xuất: liên hệ phụ huynh." Một đường dẫn nhỏ ghi "Dựa trên hoạt động trên nền tảng."
Ô 6 · Mượn thiết bị
Bảng hiển thị tên từng học sinh, địa chỉ nhà, số sê-ri thiết bị và "Số ngày kể từ lần cuối kết nối Wi-Fi tại nhà." Được sắp xếp để hiện những học sinh chưa kết nối ở nhà từ 30 ngày trở lên. Toàn bộ nhân viên trong trường đều xem được.
Ô 7 · Khảo sát
Con số nổi bật bằng chữ lớn màu xanh lá: "92% gia đình hài lòng với việc liên lạc của nhà trường!" Chữ nhỏ: "Dựa trên 48 câu trả lời cho một khảo sát trực tuyến."
Ô 8 · Công cụ đánh giá
"Bản đồ Nhiệt Thành thạo" từ một bài kiểm tra năm câu hằng tuần: hàng là học sinh, cột là chuẩn kiến thức, tô màu từ đỏ đến xanh lá. Nhiều chuẩn được đánh dấu "đã thành thạo" chỉ dựa trên một câu hỏi.
Phiếu B cho Đọc Bảng điều khiển Trước khi Nó "Đọc" Bạn
Sơ đồ Biết được / Không biết được
Mỗi ô dữ liệu một dòng. Ghi chữ P ở cột đầu tiên nếu ô đó hiển thị thông tin cá nhân cho những người có thể không cần đến.
| Ô dữ liệu (P = lo ngại về quyền riêng tư) | Nhận định mà ai đó có thể đưa ra | Điều nó thực sự cho thấy | Điều nó không thể cho chúng ta biết | Câu hỏi hoặc dữ liệu cần có tiếp theo |
|---|---|---|---|---|
| 1 · Chuyên cần | ||||
| 2 · Tiến bộ đọc | ||||
| 3 · Hiệu quả nền tảng | ||||
| 4 · Kỷ luật | ||||
| 5 · Nhận định của AI | ||||
| 6 · Mượn thiết bị | ||||
| 7 · Khảo sát | ||||
| 8 · Công cụ đánh giá |
Phiếu C cho Đọc Bảng điều khiển Trước khi Nó "Đọc" Bạn
Danh mục Kiểm tra Sử dụng Dữ liệu và Quyền riêng tư trên Bảng điều khiển
Hãy nghĩ đến một bảng điều khiển quý thầy cô thường xuyên sử dụng. Đánh giá một cách trung thực.
| Có | Một phần | Không | |
|---|---|---|---|
| Tôi biết mỗi chỉ số trên bảng điều khiển này thực sự đếm cái gì (ví dụ, số lần đăng nhập so với số bài đã hoàn thành). | |||
| Các biểu đồ hiển thị số lượng hoặc cỡ mẫu, không chỉ tỷ lệ phần trăm. | |||
| Trục và mốc so sánh của biểu đồ được hiển thị và không phóng đại sự thay đổi. | |||
| Có sẵn số liệu so sánh với các năm trước hoặc các nhóm tương đồng trước khi chúng tôi rút ra kết luận. | |||
| Chỉ những nhân viên có nhu cầu giáo dục chính đáng mới xem được thông tin của từng học sinh. | |||
| Tôi biết nhãn hay đề xuất nào do AI tạo ra, và chúng dựa trên dữ liệu gì. | |||
| Các nhãn về học sinh do AI tạo ra được một người xem xét trước khi có ai hành động dựa trên đó. | |||
| Chúng tôi kết hợp số liệu trên bảng điều khiển với bài làm của học sinh hoặc hiểu biết của giáo viên trước khi ra quyết định. | |||
| Khi chia sẻ dữ liệu với nhân viên hoặc gia đình, chúng tôi nói rõ điều dữ liệu không thể cho biết. | |||
| Tôi biết dữ liệu này được lưu giữ bao lâu và ai ở phía nhà cung cấp có thể truy cập. |
Ghi chú
Chỉ dành cho người điều phối, Đọc Bảng điều khiển Trước khi Nó "Đọc" Bạn
Đáp án và ghi chú
Phiếu A: Thẻ Ô Dữ liệu
- Ô 1 · Chuyên cần
- Trục bị cắt bớt làm phóng đại mức giảm 3 điểm. Chữ "khủng hoảng" là một cách diễn giải, không phải dữ liệu. Không thể cho biết: những học sinh nào, những ngày nào (mùa cúm? tuần nghỉ lễ?), tình trạng vắng mặt kéo dài có thay đổi không. Tiếp theo: so sánh với cùng các tháng của những năm trước.
- Ô 2 · Tiến bộ đọc
- Không thể cho biết: lớp của cô Tran chỉ có 9 học sinh (mẫu nhỏ) và có chương trình dành cho học sinh mới nhập cư. Xếp hạng công khai giáo viên dựa trên một bài sàng lọc dễ dẫn đến lạm dụng. Quyền riêng tư: tên học sinh hiện ra khi rê chuột, bất kỳ ai có quyền truy cập bảng điều khiển đều thấy. Tiếp theo: ai cần chế độ xem này?
- Ô 3 · Hiệu quả nền tảng
- Tương quan được trình bày như nhân quả. Cả hai có thể cùng tăng vì đã về cuối năm học và học sinh đã được dạy nhiều hơn. Không thể cho biết: liệu học sinh dùng ứng dụng nhiều hơn có tiến bộ hơn những học sinh tương tự dùng ít hơn hay không. Tiếp theo: so sánh các nhóm tương đồng.
- Ô 4 · Kỷ luật
- Không có số lượng: 50% của 10 lần khác với 50% của 300 lần. Dán nhãn cả một khối lớp là một sự khái quát hóa gây tổn hại. Không thể cho biết: liệu có phải chỉ vài học sinh chiếm phần lớn số lần, hay cách chuyển xử lý kỷ luật khác nhau giữa các tổ khối. Tiếp theo: số lượng và khuôn mẫu theo lý do bị chuyển xử lý.
- Ô 5 · Nhận định của AI
- Mô hình suy ra "thiếu gắn kết" từ một chỉ số đại diện, có lẽ là số phút đăng nhập hoặc số lần nhấp chuột. Lớp 4 có thể làm nhiều bài trên giấy hơn. Một nhãn do AI gán có thể khiến người lớn nhìn học sinh một cách thiên lệch. Không thể cho biết: điểm số thực tế, chất lượng bài làm, hoặc bối cảnh. Tiếp theo: hỏi giáo viên trước khi bất kỳ ai gọi điện cho gia đình.
- Ô 6 · Mượn thiết bị
- Hữu ích để xác định học sinh cần hỗ trợ kết nối mạng, nhưng để lộ thông tin nhạy cảm về gia đình cho nhiều người hơn mức cần thiết. Không thể cho biết: vì sao thiết bị chưa kết nối (không có internet? dùng chung thiết bị? để quên ở trường?). Tiếp theo: giới hạn quyền truy cập và liên hệ riêng.
- Ô 7 · Khảo sát
- Mẫu nhỏ, tự chọn, từ những gia đình đã nhận và mở khảo sát trực tuyến. Những gia đình ít được nhà trường liên lạc tới nhất lại là những gia đình ít có khả năng trả lời nhất. Tiếp theo: bao nhiêu gia đình được mời tham gia, và bằng những ngôn ngữ nào?
- Ô 8 · Công cụ đánh giá
- Sử dụng công cụ đánh giá phù hợp: một câu hỏi cho mỗi chuẩn là quá ít để gọi là thành thạo. Không thể cho biết: học sinh có vận dụng được kỹ năng hay không. Tiếp theo: kết hợp bài kiểm tra với các mẫu bài làm của học sinh trước khi chia lại nhóm.