An Assessment Tool for Learner Profile: The Development and Verification of Students' Learning to Learn Questionnaire
-
摘要: 作为学习分析技术之一,学习者画像可以通过多元化数据收集对学生的学习效果与学习过程进行全面深描。然而,并非所有类型的数据都可以通过信息技术直接采集,学习者的能力与素养就是其中之一。为解决这一难题,本研究针对中小学生核心素养——学会学习能力,设计了面向学习者画像的评估工具。通过分析主要国家与地区的学会学习能力评估工具,本研究总结出了认知、情感、元认知三大维度,并在此三大维度下构建了中小学生学会学习能力问卷。为验证问卷的信效度,研究者向上海市M区16所学校中4-9年级的学生发放了网络问卷,共收回有效回答2879份。通过对问卷进行统计分析和修正后,最终得到了具有高信效度的问卷版本。经过修正和验证后的问卷具有以下两个特点:一是问卷独立于学科知识之外,适用于多年龄段的学生;二是面向学习者画像,从中小学生学业学习的角度出发。Abstract: As a learning analysis technique, learner profile can comprehensively and deeply depict students' learning effect and learning process through diversified data collected. However, not all types of data can be directly collected through information technology, and learners' ability and accomplishment is just one of them. To solve this problem, this paper designed an assessment tool for learner profile targeting core learning abilities of the primary and middle school students. It summarizes the three dimensions of cognition, emotion and metacognition by analyzing the learning ability assessment tools of major countries and regions, and constructs the learning ability questionnaire for primary and middle school students under these three dimensions. To verify the reliability and validity of the questionnaire, the researchers sent an online questionnaire to students in grades 4-9 in 16 schools in the M District of Shanghai, and 2, 879 valid responses were collected. By statistically analyzing the responses, the researchers found that the questionnaire had high reliability and validity. The questionnaire has the following two characteristics:first, the questionnaire is independent of subject knowledge and applicable to students of various ages; second, it is designed for learner profile and from the perspective of academic learning of primary school and middle students.
-
Key words:
- learning to learn /
- learner profile /
- questionnaire design /
- learning analysis
-
表 1 世界主要国家与地区学会学习测量指标维度
学会学习评估 认知维度 情感维度 元认知维度 芬兰学会学习测试 学习领域;
推理领域;
学习管理和情感自我控制。社会框架;
认知的学习;
学习支持。自我相关的能力。 荷兰跨学科技能测试 进行观察;
选择和整理信息;
总结和得出结论;
形成见解;
区分观点和事实。在他人和自己的行动和意见当中识别出信仰和价值;
合作完成任务;
对自己任务质量的要求。欧盟学会学习测试 识别命题;
使用规则;
检验规则和命题;
使用智识工具。学习动机;
学习测量和面向变革的学习取向;
学业上的自我概念和自尊;
学习环境。问题解决;
元认知准确度;
元认知信心。英国终身学习测试 制造意义;
创造性。成长方向;
批判性的好奇心;
依赖和脆弱性;
关系与独立性。策略意识。 中国学生发展核心素养 信息意识:有效地获取、鉴别、评估、使用信息的能力。 乐善好学:学习态度、学习兴趣、学习习惯。 勤于反思:对学习状态的审视、对学习进程评估调控。 表 2 中小学生学会学习调查问卷
一级指标 二级指标 三级指标 认知维度:认知策略与认知过程 认知策略 A1当我想学习课程内容时,我会反复阅读我的笔记。 A2当我想学习课程内容时,我会反复阅读课本。 A3我会记住某门课程的一些关键词,来提醒我这个课程中的重要概念。 A4在我开始学习前,我会把最重要的内容先挑选出来。 A5我会通过总结来帮助自己组织和学习知识。 认知过程 A6我深入研究新课程材料之前,我常会先去浏览去看看这些材料是如何组织的。 A7我会通过问自己问题来检查自己是否真的理解所学的内容。 A8在学习这个课程的时候,我为自己设定目标,以指导我之后的学习活动。 A9我通常会提前做好学习计划,这样我学的更好。 A10我通常在一个可以安静的地方学习。 A11我试图改变我的学习方式,以适应课程要求和教师的教学风格。R 情感维度:学习动机与意愿 自我效能感 B1我相信自己在学习中能获得好成绩。 B2掌握所学课程中的基础概念对我来说很简单。 B3我自信能掌握课堂上所学的知识点。 B4我确信自己能掌握所学课程中的重难点。 学习态度 B5我觉得自己是个学习的料。 B6我相信自己能解决学习中的难题。 B7学习是愉快的。 B8当我解决一个问题后,我感到满足。 学习投入度 B9我在课堂上非常努力。 B10我在课堂上会集中注意力。 B11如果我出错误了,我会找出错在哪。 B12如果我不确定答案的时候,我会查资料。 B13随堂测试时,我会深入思考后再回答。 元认知:自我调节与学习习惯 自我调节 C1在任务截止时间前,我经常浪费时间做其他事情。R C2考试前,我会临时抱佛脚。R C3我总是拖到最后才开始学习。R C4我经常发现自己时间不够用。R C5我经常不能按时完成任务。R C6遇到挫折我不会气馁。 C7我觉得自己是一个努力的人。 C8我总是轻易改变我的学习目标。R C9我很难把精力集中在长时间段的学习任务上。R 学习习惯 C10我在课堂上,但我通常闲混,做白日梦,或睡觉。R C11我没有及时复习课堂笔记。R C12我的课堂笔记有时很难理解。R 注:R表示问题为反向设置。 表 3 问卷信度系数
一级指标 二级指标 问题序号(数量) 克隆巴赫Alpha 认知维度 认知策略 A1-A5(5) 0.91 认知过程 A6-A11(6) 0.78 情感维度 自我效能感 B1-B4(4) 0.90 学习态度 B5-B8(4) 0.80 学习投入度 B9-B13(5) 0.88 元认知 自我调节 C1-C9(9) 0.85 学习习惯 C10-C12(3) 0.72 表 4 修正后问卷信度系数
一级指标 二级指标 问题序号(数量) 克隆巴赫Alpha 认知维度 认知策略 A1-A5(5) 0.91 认知过程 A6-A10(5) 0.89 情感维度 自我效能感 B1-B4(4) 0.90 学习态度 B5-B8(4) 0.80 学习投入度 B9-B13(5) 0.88 元认知 自我调节 C1-C7(7) 0.86 学习习惯 C8-C10(3) 0.72 表 5 修正因子矩阵模型
矩阵模式 要素 1 2 3 我相信自己在学习中能获得好成绩。 0.895 -0.001 -0.078 我确信自己能掌握所学课程中的重难点。 0.875 -0.032 -0.016 掌握所学课程中的基础概念对我来说很简单。 0.849 -0.011 -0.094 我觉得自己是个学习的料。 0.838 -0.012 -0.024 我相信自己在学习中能获得好成绩。 0.833 -0.026 -0.024 我相信自己能解决学习中的难题。 0.832 0.002 -0.022 我在课堂上非常努力。 0.709 0.037 0.114 我在课堂上会集中注意力。 0.689 0.096 0.076 随堂测试时,我会深入思考后再回答。 0.630 0.011 0.166 如果我出错误了,我会找出错在哪。 0.618 0.064 0.159 当我解决一个问题后,我感到满足。 0.563 -0.026 0.012 学习是愉快的。 0.525 0.137 0.075 如果我不确定答案的时候,我会查资料。 0.469 0.029 0.153 我总是拖到最后才开始学习 -0.034 0.861 0.001 在任务截止时间前,我经常浪费时间做其他事情。R -0.063 0.839 0.032 我经常不能按时完成任务。R 0.065 0.773 -0.044 我在课堂上,但我通常闲混,做白日梦,或睡觉。R -0.010 0.765 -0.019 我总是轻易改变我的学习目标。R 0.004 0.751 -0.048 考试前,我会临时抱佛脚。R -0.021 0.739 0.012 我很难把精力集中在长时间段的学习任务上。R 0.028 0.721 0.000 我经常发现自己时间不够用。R 0.047 0.717 -0.001 我的课堂笔记有时很难理解。R -0.036 0.664 0.176 我没有及时复习课堂笔记。R 0.053 0.662 -0.038 在我深入研究新课程材料之前,我常会先去浏览去看看这些材料是如何组织的。 -0.058 -0.033 0.860 当我想学习课程内容时,我会反复阅读我的笔记。 -0.050 0.010 0.845 在我开始学习前,我会把最重要的内容先挑选出来。 0.017 -0.034 0.830 我会通过问自己问题来检查自己是否真的理解所学的内容。 0.022 -0.018 0.827 我会通过总结来帮助自己组织和学习知识。 0.039 0.026 0.817 当我想学习课程内容时,我会反复阅读课本。 0.004 0.003 0.813 我会记住某门课程的一些关键词,来提醒我这个课程中的重要概念。 0.051 0.014 0.799 在学习这个课程的时候,我为自己设定目标,以指导我之后的学习活动。 0.052 0.029 0.788 我通常会提前做好学习计划,这样我学的更好。 0.047 0.054 0.771 我通常在一个可以安静的地方学习。 0.085 0.037 0.568 注:因子负荷数值大于0.40的问题用加粗显示; 旋转方式采用了Oblimin with Kaiser Normalization。 表 6 修正后问卷主成分分析特征值
要素 初始特征值 总数 方差% 累计% 1(情感) 14.807 44.871 44.871 2(认知) 3.191 9.670 54.541 3(元认知) 1.971 5.974 60.515 -
[1] 陈海建, 戴永辉, 韩冬梅, 冯彦杰, 黄河笑. (2017).开放式教学下的学习者画像及个性化教学探讨.开放教育研究, 23(3), 105-112. http://d.old.wanfangdata.com.cn/Periodical/kfjyyj201703012 [2] 陈嘉琪(2007).聚焦香港课程改革发展历程:香港特区课程改革十年回顾.网络科技时代, (13), 6-11. [3] 郭翠兰(2008).校本课程开发对教师的要求.中国教育学刊, (9), 63-65. doi: 10.3969/j.issn.1002-4808.2008.09.020 [4] 高丙成, 刘儒德, 王丹, 和美君, 袁稹. (2011).初中生自我调节学习的类型及对学习的影响.心理发展与教育, 27(1), 76-82. http://d.old.wanfangdata.com.cn/Periodical/xlfzyjy201101011 [5] 顾小清, 舒杭. (2016).信息技术的作用发生了吗——用学习分析技术刻画学习行为印记.现代远程教育研究, (5), 10-19. doi: 10.3969/j.issn.1009-5195.2016.05.002 [6] 核心素养研究课题组.(2016).中国学生发展核心素养.中国教育学刊, (10), 1-3. http://d.old.wanfangdata.com.cn/Periodical/shsfdxxb-zxsh201706011 [7] 刘霞, 胡清芬, 刘艳, 方晓义, 陈英和, 莫雷, 张文新, 赵国祥, 李红, 辛涛. (2016).我国学生发展核心素养的实证调查.中国教育学刊, (6), 15-22. http://www.wanfangdata.com.cn/details/detail.do?_type=perio&id=669055047 [8] 李允, 李如密.(1999).培养元认知能力教学生学会学习.中国教育学刊, (4), 32-36. http://d.old.wanfangdata.com.cn/Thesis/Y560783 [9] 李小平, 郭江澜. (2005).学习态度与学习行为的相关性研究.心理与行为研究, 3(4), 265-267. http://d.old.wanfangdata.com.cn/Periodical/xlyxwyj200504005 [10] 孙妍妍, 祝智庭. (2018)以深度学习培养21世纪技能——美国《为了生活和工作的学习:在21世纪发展可迁移的知识与技能》的启示.现代远程教育研究, (3), 9-18. doi: 10.3969/j.issn.1009-5195.2018.03.002 [11] 师曼, 刘晟, 刘霞, 周平艳, 陈有义, 刘坚, 魏锐.(2016). 21世纪核心素养的框架及要素研究.华东师范大学学报(教育科学版), (3), 29-37. http://hdxk.cbpt.cnki.net/WKE/WebPublication/paperDigest.aspx?paperID=31c129ae-0065-4d47-ae5e-fab33c207cb7 [12] 申仁洪.(2007).学习习惯:概念、构成与生成.重庆师范大学学报(哲学社会科学版), (2), 112-118. doi: 10.3969/j.issn.1673-0429.2007.02.019 [13] 夏雪梅, 杨向东. (2017).核心素养中的"学会学习"意味着什么.课程·教材·教法, (4), 106-112. http://www.wanfangdata.com.cn/details/detail.do?_type=perio&id=kcjcjf201704017 [14] 肖君, 乔惠, 许贞, 徐颖. (2017).泛在学习环境下基于活动理论的移动MOOC设计及实证研究.中国电化教育, (11), 87-94. doi: 10.3969/j.issn.1006-9860.2017.11.013 [15] 朱京, 孙倚娜. (2012).英语听力学习动机与元认知策略相关性研究.现代教育技术, 22(12), 61-65. http://d.old.wanfangdata.com.cn/Periodical/xdjyjs201212012 [16] 周文霞, 郭桂萍.(2006).自我效能感:概念, 理论和应用.中国人民大学学报, (1), 91-97. http://d.old.wanfangdata.com.cn/Periodical/zgdhjy201206005 [17] 张娜.(2015).联合国教科文组织的核心素养研究及其启示.教育导刊, (7), 93-96. doi: 10.3969/j.issn.1005-3476.2015.07.021 [18] Bonnet, G., Svecnik, E., Hautamäki, J., Trosseille, B., Fischer, C., Meijer, J., Grønmo, L.S., Cercadillo, L., Wiren, E., Söderberg, S., James, M., Jakobsen, L.B., Fredriksson, U. and Hoskins, B. (2006).Final report of the learning to learn expert group to the European commission, dgeac a6. Paris/Brussels/Ispra. [19] Cattell, R. B. (1966). The scree test for the number of factors. Multivariate Behavioral Research, 1, 245-276. doi: 10.1207/s15327906mbr0102_10 [20] Carl, A., & Strydom, S. (2017). E-Portfolio as reflection tool during teaching practice: The interplay between contextual and dispositional variables. South African Journal of Education, 37(1), 1-10. http://cn.bing.com/academic/profile?id=dc8451c0559b7f622953a9001d445a1a&encoded=0&v=paper_preview&mkt=zh-cn [21] Crick, R. D., Broadfoot, P., & Claxton, G. (2004). Developing an effective lifelong learning inventory: The ELLI project. Assessment in Education: Principles, Policy & Practice, 11(3), 247-272. doi: 10.1080/0969594042000304582 [22] DeVellis, R. F. (2003).Scale development: Theory and applications (2nd ed.). Thousand Oaks, CA: Sage Publications. [23] Education Council. (2006). Recommendation of the European Parliament and the Council of 18 December 2006 on key competencies for lifelong learning. Brussels: Official Journal of the European Union, 30(12), 10-18. [24] Fredriksson, U. (2003). Changes of education policies within the European Union in the light of globalization. European Educational Research Journal, 2(4), 522-546. doi: 10.2304/eerj.2003.2.4.3 [25] Hoskins, B., & Fredriksson, U. (2008). Learning to Learn: What is it and can it be measured? European Commission JRC. [26] Hautamäki, J., Arinen, P., Eronen, S., Hautamäki, A., Kupianien, S., Lindblom, B., Niemivirta, M., Pakaslahti, L., Rantanen, P. and Scheinin, P. (2002). Assessing learning-to-learn: A framework. Helsinki: Centre for Educational Assessment. Helsinki University / National Board of Education. [27] Kline, R. B.(2005).Principles and practice of structural equation modeling (2nd ed.).New York: Guildford. [28] Meijer, J. (2007) Cross-curricular skills testing in the Netherlands. The Curriculum Journal, 18 (2), 155-173. doi: 10.1080/09585170701445996 [29] Moreno, A. (2002) La evaluación de las habilidades metacognitivas. In A. Marchesi & E. Martín (Eds.). Evaluación de la educación secundaria. Madrid: Fundación Santa María. [30] Pintrich, P. R., Smith, D. A. F., Garcia, T., & McKeachie, W. J. (1991). A manual for the use of the Motivated Strategies for Learning Questionnaire (MSLQ). The Regents of the University of Michigan. [31] Sharifi, M., Soleimani, H., & Jafarigohar, M. (2017). E-portfolio evaluation and vocabulary learning: Moving from pedagogy to andragogy. British Journal of Educational Technology, 48(6), 1441-1450. doi: 10.1111/bjet.12479 [32] Tabachnik, B.G., & Fidell, L. S. (2007).Using multivariate statistics. Boston: Pearson Education. [33] Zimmerman, B. J. (2000). Self-efficacy: An essential motive to learn. Contemporary Educational Psychology, 25(1), 82-91. doi: 10.1006/ceps.1999.1016