Đánh giá và đánh giá là một phần không thể thiếu của Chương trình Mô-đun Thế giới Vật liệu. MWM tự hào trong việc tùy chỉnh các sản phẩm của chúng tôi để phù hợp với người dùng về sự đa dạng, văn hóa, ngôn ngữ và cấp lớp, bằng cách liên tục xem xét và nâng cao nội dung, dịch vụ và giao tiếp của chúng tôi. Dịch vụ duy nhất này đạt được thông qua các phương pháp đánh giá và đánh giá định tính và định lượng. Các ví dụ sau đây minh họa cách thức đánh giá và đánh giá đã được thực hiện ở nhiều nơi khác nhau trên thế giới.
Nghị định thư Đánh giá Thử nghiệm Hiện trường Quốc gia Hoa Kỳ
Một thử nghiệm thực địa ngẫu nhiên trên toàn quốc đã được thực hiện từ năm 2002 đến năm 2006 để đánh giá hiệu quả của các mô-đun MWM như là tài liệu bổ sung cho chương trình ngoại khóa. Trước các hoạt động đánh giá thực tế, một nhóm các nhà giáo dục khoa học trung học có nhiều kinh nghiệm và các nhà phát triển nội dung MWM đã viết và xác nhận các mục đánh giá học sinh cho một ngân hàng mục sẽ đi kèm với các mô-đun được đánh giá. “Nhóm xác thực” đã giải quyết tính hợp lệ của nội dung, tính hợp lệ của cấu trúc, tính hợp lệ về mặt cũng như các vấn đề liên quan đến giới tính và thành kiến văn hóa, kiểu cú pháp, thứ bậc của câu hỏi, v.v. Mỗi mô-đun bao gồm một bộ từ 60 đến 80 mục đánh giá, bao gồm câu hỏi trắc nghiệm, câu trả lời ngắn và câu trả lời dài.
Các giáo viên kiểm tra thực địa đã sử dụng ngân hàng các mục đánh giá đã được xác thực để soạn các bài kiểm tra trước và sau lớp học độc đáo phù hợp với mục tiêu của họ. Chúng tôi cũng giới hạn nghiên cứu trong một lớp học khoa học cho mỗi trường. Tám mô-đun MWM đã được thử nghiệm thực địa tại 118 trường học được lựa chọn ngẫu nhiên ở 42 tiểu bang trên sáu (6) vùng địa lý của đất nước. Thực tế, mỗi địa điểm trong số 118 địa điểm thử nghiệm thực địa được chọn ngẫu nhiên đã trở thành một thực thể nghiên cứu riêng biệt. Mẫu thử nghiệm thực địa được phát hiện là đại diện về mặt thống kê cho toàn quốc về phân bố địa lý Hoa Kỳ, mã dân số NCES, giới tính của học sinh, giới tính của giáo viên, trình độ chuẩn bị học tập của giáo viên và số năm kinh nghiệm của giáo viên. Tổng cộng có 2297 sinh viên tham gia vào nghiên cứu kéo dài 40 đầu sách của các lớp khoa học, (khoa học vật lý, hóa học AP, công nghệ sinh học, vật lý, giới thiệu về kỹ thuật, v.v.) Từ tổng số sinh viên mẫu, chúng tôi đã nhận được các gói dữ liệu hoàn chỉnh từ năm 2026 trong số họ, dẫn đến tỷ lệ trả lại lớp học có thể sử dụng là 88,2%. Nghiên cứu sử dụng thiết kế bán thực nghiệm trước khi hậu kỳ và sau đó tổng hợp các kết quả bằng cách sử dụng các kỹ thuật phân tích tổng hợp.
Hoa Kỳ
 Nghiên cứu này được báo cáo trong “ Mô-đun Thế giới Vật liệu – 2002: Đánh giá Đại diện Quốc gia về Mức tăng Lớp học ” của Barbara J. Pellegrini, trên Tạp chí Giáo dục Vật liệu, 32 (5–6) 185, 2010. Nghiên cứu cho thấy mức tăng tương tự bất kể học sinh. giới tính hoặc tình trạng kinh tế xã hội, số năm kinh nghiệm của giáo viên hoặc trình độ lớp học |
Bất cứ nơi nào MWM được giới thiệu, sinh viên đều hưởng ứng nhiệt tình, sáng tạo và đạt được thành tích cao. Các giáo viên kiểm tra thực địa từ 118 trường học và trên 42 bang của Hoa Kỳ đã sử dụng Mô-đun Thế giới Vật liệu như một phần bổ sung thiết kế trong hai tuần cho chương trình giảng dạy điển hình về khoa học. Trung bình, các lớp học có độ lệch chuẩn là 2,66, hoặc trung bình là 31,8% so với mức độ đẹp nhất của chúng (xem hình kèm theo). Trẻ em gái đạt được nhiều hơn đáng kể so với trẻ em trai cả về khả năng tiếp thu nội dung và thành tích thiết kế. Tuy nhiên, các cậu bé đã đạt được nhiều hơn về lòng tôn trọng khoa học. Giáo viên và học sinh đã báo cáo việc tiếp thu các quy trình khoa học và kỹ năng thiết kế được cải thiện, đồng thời cả giáo viên và học sinh đều cho biết họ hài lòng ở mức độ vừa phải với trải nghiệm học phần.
Đánh giá kiểm tra kết quả của các bài kiểm tra thực địa trong lớp học theo vị trí địa lý của họ trên sáu khu vực của đất nước (NE, SE, NC, SC, NW, SW). Kết quả cho thấy không có sự khác biệt có ý nghĩa về kích thước ảnh hưởng (p <.061); độ lợi chuẩn hóa (p <.549); phần trăm giá trị gia tăng (p <.279) và điểm thiết kế (p <.123). Các lớp học trên khắp mọi miền đất nước cũng có thể làm được như vậy.
Đánh giá cũng kiểm tra kết quả của các bài kiểm tra thực địa trong lớp học ở tám ngôn ngữ của môi trường trường học được Trung tâm Thống kê Giáo dục Quốc gia (NCES) mô tả theo các mã mật độ dân số (ví dụ: thành phố lớn, thành phố cỡ vừa, ngoại ô, thị trấn nhỏ, nông thôn, vv) Kết quả đánh giá cho thấy không có sự khác biệt đáng kể giữa tám loại ngôn ngữ NCES về quy mô ảnh hưởng (p <.983); độ lợi chuẩn hóa (p <.895); phần trăm giá trị gia tăng (p <.462) và điểm thiết kế (p <.905.) Các lớp học ở tất cả các loại cài đặt ngôn ngữ dường như cũng hoạt động tốt.
Tóm lại, dữ liệu kiểm tra thực địa quốc gia của Hoa Kỳ cho thấy rằng các mô-đun đã cung cấp thành công cho sinh viên cảm giác hứng thú về thiết kế khoa học và kỹ thuật. Dữ liệu cũng hỗ trợ sự gia tăng đáng kể về mức độ coi trọng khoa học lớp học cũng như việc triển khai thành công các mô-đun dưới dạng chương trình khoa học bổ sung với những lợi ích đáng kể, bất kể bối cảnh lớp học, thời gian kinh nghiệm của giáo viên hoặc nền tảng kinh tế xã hội của sinh viên.
Mexico
Chương trình MWM được áp dụng tại Chihuahua, Mexico từ năm 2005. Kết quả thống kê từ các nghiên cứu đánh giá trong vài năm qua được cung cấp trên Tạp chí Giáo dục Vật liệu Vol. 32 (5-6): 245 – 254 (2010) bởi Fuentes và cộng sự. Một số kết quả phù hợp được liệt kê dưới đây:
Thống kê về sự tham gia
Dự án MWM đã phát triển ổn định kể từ khi bắt đầu vào năm 2005.
Số lượng giáo viên mới được đào tạo về phương pháp MWM mỗi năm, từ năm 2005 đến năm 2010:
 Số lượng sinh viên đã hoàn thành các mô-đun MWM mỗi năm kể từ năm 2005. |
||
| Số lượng sinh viên đã hoàn thành các mô-đun MWM mỗi năm kể từ năm 2005. | Phân phối Chương trình trên khắp Bang Chihuahua. Phần Bang không nhìn thấy logo “MWM” là sa mạc Chihuahua nổi tiếng. Phần phía tây của Bang là Sierra Tarahumara, quê hương của Hẻm núi Đồng nổi tiếng. | Chihuahua. Các đánh giá của sinh viên trước và sau khi tham dự các mô-đun MWM trong thời gian 5 năm. |
Một cuộc khảo sát về những sinh viên đã hoàn thành các Mô-đun đã cho thấy những điều sau:
- 68% sinh viên đồng ý rằng chương trình MWM đã cải thiện sự tiến bộ của họ trong giáo dục STEM.
- 74% sinh viên đồng ý rằng chương trình MWM đã thúc đẩy họ đánh giá lại kiến thức khoa học và công nghệ.
- 62% sinh viên đồng ý rằng MWM đã truyền cảm hứng cho họ xem xét sự nghiệp trong lĩnh vực khoa học hoặc công nghệ.
Qatar
Vào mùa thu năm 2011, nhóm nghiên cứu của chúng tôi đã thực hiện một thí nghiệm thử nghiệm khác sử dụng mô-đun MWM tại 13 trường trung học độc lập ở Qatar trong khoảng thời gian hai tháng từ tháng 10 đến tháng 11 năm 2011. Tổng cộng tám mô-đun đã được sử dụng với khoảng 300 học sinh ở bảy nam sinh. ‘trường học và sáu trường nữ sinh’. Mỗi mô-đun được thực hiện tại địa điểm trường địa phương và được giảng dạy bởi một nhân viên MWM từ Đại học Northwestern, được hỗ trợ bởi một nhân viên Đại học Qatar (cũng là một giáo viên khoa học trung học Qatar) cũng như giáo viên đứng lớp và kỹ thuật viên. Thông thường, học sinh ở mỗi trường dành cả tuần cho một học phần được xác định trước cho trường. Tổng thời gian sinh viên tham gia vào các hoạt động của mô-đun trung bình khoảng 10-12 giờ, khoảng 2,5-3 giờ mỗi ngày trải dài trong khoảng thời gian bốn ngày. Trong hai ngày đầu tiên, sinh viên làm việc theo nhóm từ 3-5 sinh viên và tham gia vào một loạt 4-5 thí nghiệm khám phá thực hành, tập trung vào các tính chất và khái niệm vật liệu trọng tâm của chủ đề mô-đun. Sau đó, học sinh dành ngày thứ ba và thứ tư để tham gia vào hai trải nghiệm thiết kế. Đầu tiên là thử thách thiết kế “có cấu trúc”, cung cấp cho sinh viên một mục tiêu rõ ràng và một mục tiêu để gắn kết những kinh nghiệm học tập trước đây của họ. Trong suốt quá trình “tìm hiểu thông qua thiết kế” này, sinh viên được yêu cầu đặt câu hỏi để cung cấp thông tin cho các quyết định thiết kế của họ, cân nhắc những đánh đổi không thể tránh khỏi, tranh luận về các giá trị và giới hạn của phương pháp thiết kế cụ thể, kết nối các quyết định thiết kế này với các nguyên tắc khoa học, tạo và thử nghiệm nguyên mẫu thiết kế và tạo dữ liệu để xác nhận các quyết định của họ. Thử thách thiết kế thứ hai là một “kết thúc mở” thiết kế sản phẩm, phù hợp với chủ đề mô-đun, trong đó sinh viên được thử thách để đổi mới và tạo ra một sản phẩm hoàn toàn mới hoặc một thiết kế sản phẩm cải tiến dựa trên các khái niệm mà họ đã học. Vào ngày thứ năm và ngày cuối cùng, sinh viên có cơ hội trình bày kết quả của các dự án thiết kế của họ và chia sẻ kinh nghiệm học phần của họ với các nhân viên tại Đơn vị Công nghệ Vật liệu của Đại học Qatar.
Dựa trên ba bộ dữ liệu hoàn chỉnh (trong số 13 lớp học) được thu thập cho đến nay, các đánh giá trước khi đăng ký cho thấy học sinh đã đạt được những kết quả tích cực trong các khái niệm chính được dạy trong cả ba học phần: Công nghệ nano, Polyme và Vật liệu tổng hợp. Mặc dù kích thước mẫu nhỏ, nhưng có một xu hướng rõ ràng là học sinh đang tiến dần đến điểm sau bài kiểm tra cao hơn. Kích thước ảnh hưởng trung bình tổng hợp từ trước đến sau thử nghiệm là 1,12. Kết quả đáng khích lệ này khiến nhóm MWM tiếp tục nỗ lực triển khai trong mùa xuân năm 2012.
Kết quả về thái độ của sinh viên, đặc biệt là hiệu quả của bản thân cũng được nghiên cứu. Những kết quả này cho thấy sự cải thiện trong thái độ của sinh viên đối với nghiên cứu và phát minh. Tỷ lệ sinh viên đồng ý mạnh mẽ rằng họ có khả năng phát minh tăng từ 12% lên 24% và những người đồng ý tăng từ 40% lên 60%. Tỷ lệ sinh viên đồng ý cao với tuyên bố về tầm quan trọng của công việc hợp tác tăng từ 40% lên 48% trong khi sinh viên đồng ý mạnh mẽ rằng kỹ năng của họ đã tăng lên sau khi tham gia các thí nghiệm khoa học tăng từ 48% lên 72%.
Tóm lại, ngay từ những tập dữ liệu sơ bộ này, chúng tôi đã thấy sự chuyển biến tích cực trong việc học sinh tiếp thu kiến thức khoa học mới. Các dự án thiết kế cũng đã củng cố kiến thức này khi họ thể hiện khả năng hoàn thành thử thách thiết kế, cũng như thể hiện sự khéo léo của họ trong việc tạo ra các sản phẩm mới hoặc cải tiến.
Trung Quốc
Vào tháng 7 năm 2012, một hội thảo MWM kéo dài hai tuần đã được tổ chức tại Trung Quốc. Ba mô-đun MWM được chọn đã được sử dụng bởi 30 giáo viên và 120 học sinh từ 6 trường trung học Tây An Metropolitan. Đánh giá trước sau hội thảo của giáo viên mang lại kích thước hiệu quả là 2,7 cho điểm tổng hợp của ba mô-đun, trong khi kích thước hiệu quả tổng hợp là 1,3 được thu được bởi học sinh. Mức tăng của sinh viên thấp hơn là do trình độ ngôn ngữ, có thể được giải quyết bằng cách dịch.
Dựa trên những kết quả tích cực ban đầu này, MWM đang phối hợp với Bộ Giáo dục địa phương tỉnh Thiểm Tây để mở rộng chương trình đào tạo giáo viên để học sinh trong tỉnh bắt đầu sử dụng chương trình MWM.