Mosaic™ by ACT® 社交与情感技能评估有效性证据
评估背景
- 参与者:来自美国全国范围内2023年2月参加ACT考试的学生,共邀请了50,000名学生参与后续调查,最终有5,533名(约11%)完成。
- 样本分布:
- 年级:6-7年级(0.5%),8年级(0.8%),9年级(2.6%),10年级(7.8%),11年级(48.2%),12年级(35.1%),大学(2.0%),其他(3.0%)
- 性别:女性(67.2%),男性(31.0%),其他(0.4%)
- 种族/民族:白人(58.9%),拉丁裔(12.8%),非裔美国人(12.8%),亚裔(6.1%),两个或多个种族(4.3%),阿拉斯加原住民/美洲印第安人(0.9%),夏威夷人/其他太平洋岛民(0.1%)
- 家庭收入:低于$24,000(6.2%),$24,000-$36,000(5.1%),$36,000-$50,000(5.7%),$50,000-$60,000(4.3%),$60,000-$80,000(7.0%),$80,000-$100,000(7.4%),$100,000-$120,000(7.9%),$120,000-$150,000(7.5%),超过$150,000(21.8%)
测试内容
- Mosaic评估:包含五项社交与情感技能(Sustaining Effort, Getting Along with Others, Maintaining Composure, Keeping an Open Mind, Social Connection),每项技能通过三种类型题目(Likert量表,情境判断题,强制选择题)评估。
- Big Five Inventory (BFI):用于评估五大人格特质。
结果分析
- 收敛效度:Mosaic各项技能得分与对应的人格特质得分高度相关(0.44至0.63之间),平均为0.52。
- 区分效度:Mosaic各项技能得分与其他技能得分的相关性较低(-0.03至0.34之间),平均为0.17。
- 测试-标准效度:Mosaic各项技能得分与相应的行为指标显著相关。例如:
- Sustaining Effort:挑战自我工作努力(r=0.60)、检查作业错误(r=0.55)
- Getting Along with Others:与不同学生相处(r=0.42)、尊重不同观点(r=0.53)
- Maintaining Composure:感到紧张(r=-0.37)、受挫折影响情绪(r=-0.38)
- Keeping an Open Mind:阅读书籍学习(r=0.42)、尝试新方法(r=0.34)
- Social Connection:参与课外活动(r=0.30)、课堂讨论发言(r=0.58)
结论
这些结果进一步验证了Mosaic评估的有效性,并强调了社交与情感技能对于学业、人际交往和情绪管理的重要性。通过社交与情感学习项目的培养,可以对这些及其他结果产生积极影响。