产学合作协同育人教学内容和课程体系改革项目申报书-面向虚拟孪生的跨学科教学设计与科教融合实践

2023年美丽软件科技有限公司教育部产学合作协同育人项目申请书项目名称：面向虚拟孪生的跨学科教学设计与科教融合实践负责人：联系电话：工作邮箱：学校名称：通信地址：二○二三年七月制填表说明(1)全日制本科高校在职教师或在校学生；(2)原则上不接受之前已获得过同类项目资助的重复2.有关项目内容、具体要求和说明请参考项目申报指3.项目负责人填写的内容由所在单位负责审核，所填内容必须真实、可靠。4.申请书由项目负责人填写并手写签名，报送所在高校主管部门审查、签署意见并盖章后，将扫描文件上传到项目平台()。项目概况(单选)项目负责人(主要教学及科研工作)获得蓝桥杯软件设计大赛省赛二等奖2020.10操作系统慕课设计和制作的探究2024.6疫情下教师在线教学能力提升的探究项目主要成员(不含项目负元宇宙是依托互联网存在的平行于现实的数字世界。2021年被称为“元宇宙元年”，增强/虚拟现实、人工智能、云计算、区块链、5G等众多技术高速发展，也为新冠疫情下的在线教学模式提供了从数字化到智能化的全新转型思路。随着元宇宙逐渐从概念演变为现实，如何推进元宇宙相关技术的教育教学以及利用元宇宙的特点促进教育方式变革成为人们关心的问题。本期特开辟“元宇宙教学”专题，邀请多位该领域专家深入探讨元宇宙相关技术与计算机领域教育教学融合的可行性。虚拟孪生是实现元宇宙的重要技术系统，其概念衍生于数字孪生，数字孪生出现于20世纪90年代，目前在制造业已经被广泛接受。数字孪生作为一种实现物理产品向信息空间映射的关键技术，通过充分利用布置在产品各部分的传感器，对产品进行数据分析与建模，将产品在不同真实场景中的全生命周期过程反映出来，近乎实时地呈现产品的实际情况。数字孪生的目标仅仅是物理实体，其定义并不涵盖对智能实体行为、人类组织形态、人工系统演化等领域的描述，也缺乏虚实动态实时互动。随着元宇宙概念被广泛关注以及人工智能、大数据、虚拟现实等相关技术的飞速发展，一个脱胎于数字孪生、更加细分的概念——虚拟孪生被提出。虚拟孪生是以真实世界中物理实体、智能实体和组织实体为对象，集成运用物理机理建模、智能行为建模、认知情感建模等建模仿真技术以及传感器、物联网、移动互联网等数字技术，对真实世界中各类实体的特征、行为、形成过程和性能等进行描述和建模，构建具有空间精确映射、虚实全息互联、自我演化学习、持续调整优化等特点的高逼真性仿真系统。虚拟孪生将“孪生”的对象从物理产品扩展到了智能制造、智慧城市等更宏大、更丰富的场景，成为构建元宇宙真实感和效率的重要手段

[1]。虽然目前元宇宙和虚拟孪生都处于发展初期阶段，但是相关产业的广阔前景已经毋庸置疑。在此背景下，高校在响应社会重大需求、培养面向未来的高水平创新型人才方面，肩负重要历史使命和社会责任。1.2面向虚拟孪生的教学挑战性虚拟孪生是多种技术交叉、融合、延伸的创新领域，高校在教育中通过跨学科、跨领域方式培养复合型人才已经成为共识，形成了教育改革的发展趋势

[2]。虚拟孪生关键技术涉及建模与仿真、VR/AR/MR、物联网、人工智能等，技术的复杂性只是一方面，另一方面是虚拟孪生作为一个复杂的虚实融合空间，人机交互也是关键的环节，涵盖了人、机、物、环境多种要素，交互技术和设计决定了人在虚拟孪生世界中的体验感受和能力边界。面对这一具有前瞻性、创新型和复杂性的学科领域，如何在教学内容、资源建设、教学实施等各个教学环节中将多学科交叉融合的教学理念落在实处，实现培养顺应时代和社会发展要求的高水平人才目标，是一个极具挑战的问题。为此，以专业人才培养目标为方向指引，建设面向虚拟孪生的跨学科课程体系，并将科教融合作为行动框架，在教学中进行探索和实践，希望以此为虚拟孪生相关方向人才培养、教育教学提供一种新的思路。本次项目的实施为后续企业与高校的合作搭建了平台，具有桥梁的作用，项目实施的意义较大。2.项目培训方式：本项目培训的方式更加多元化，采用线上线下、理论+实践相结合的培训方式。大数据分析相关师资培训研议报告及大数据分析技术相关学习资料等，。在进行线下培训时，采用理论+实践的培训方式，不仅要注重理论知识，还要注重实战锻炼，在实学习成效。为了提高教师的学习效率，以及更好地掌握教师培训情况，本项目采用以任务为导向，将培训内容分解成每天的学习任务，最后以学习日志和课程设计的形式提交。除进行线下培训外，还可以带领高校教师参观企业，组织专任教师去企业顶中去。项目实施的途径和方式更加多元化，更具有趣味性，可以训。3.项目培训内容：本项目实施目的是提高教师专业技能、教学能力和课程建设水平。本项目对教师专业技能的培训更注重教师实践能力的提升，培训内容不拘泥于课本理论，侧重于大数据分析技术在企业中的实际应用。通过实际项目演练，加深教师对所学知识点的理解和掌握，使得教师通过培训达到大数据专业的能力要求。虚拟孪生的目标是解决数字系统与物理系统间无缝连接，智能生命体的行为与情感表达，社会群体智能的建模与仿真，人机之间、虚实之间自然交互等问题，在现实世界和虚拟世界之间建立交互共融的桥梁，其核心是构建人、虚拟世界和现实世界三者之间的自然交互与融合，涉及信息技术、设计理论、社会科学与认知科学的多学科交叉。我校数字媒体与虚拟现实方向属于设计学和计算机技术的交叉学科，因此制订人才培养目标为：面向数字媒体与虚拟现实领域，培养具有新的科技、人文、艺术观念和素质的高端创新设计与专业设计人才，教学内容体系建设的重点是多学科知识要素的交叉融合。在面向虚拟孪生的教学体系设计中，针对人、虚拟世界和现实世界3个研究对象，提炼构成教学内容的知识要素，如图1所示，主要包含两个维度：构建虚拟世界及虚实融合计算的技术范畴和可直接感知、交互、反馈及认知的设计范畴。（1）针对虚拟孪生中的人，主要从实体人和虚拟人两个角度展开教学内容设计。①在技术范畴，对于实体人，其核心是对人体行为的感知计算；对于虚拟人，其核心是对人体行为的建模与仿真。包括如何获取人的外观、姿态等宏观表现，人的表情、手势等微观表现以及虚拟人智能体仿真等。②在设计范畴，对于实体人，其核心是对人行为方式与情感表现的理解；对于虚拟人，其核心是对虚拟人呈现的衍生设计。包括交互行为设计与评估、情感化设计与评估、虚拟形象设计、虚拟人动画设计、虚拟人社交设计等。（2）针对虚拟孪生中的虚拟世界，主要从虚拟内容生成和呈现两个角度展开教学内容设计。①在技术范畴，对于虚拟内容生成，其核心包括物理实体的建模及虚拟物体的建模计算，包括基于视觉的三维物体及场景建模、基于程序的虚拟物体及场景建模、基于人工智能的虚拟内容生成、流体的仿真与建模等；对于虚拟内容的呈现，其核心是虚拟场景的渲染计算，包括实时全局光照渲染技术、风格化渲染技术、有限计算资源条件下的渲染优化等。②在设计范畴，虚拟内容生成和呈现合为一体，其核心是虚拟世界观的构造，包括空间设计、造型设计、材质与色彩肌理设计、光照设计、渲染风格设计等。（3）针对虚拟孪生中的现实世界，主要从现实世界的智能感知与虚实融合两个角度展开教学内容设计。①在技术范畴，对于现实世界的智能感知，其核心是现实世界场景特征的实时计算与语义理解，包括基于视觉的现实世界场景地图实时构建、场景元素的识别、场景地图的语义分割等；对于现实世界与虚拟世界的虚实融合，其核心是虚实融合一致性计算，涵盖几何一致性、外观一致性和行为一致性，包括基于视觉的相机位姿的实时计算、场景遮挡计算、场景光照计算、虚拟内容的自适应分布计算等。②在设计范畴，现实世界的智能感知与虚实融合密切结合，其核心是人与虚实世界的融合与交互，包括情境感知的智能交互设计、场景感知的虚拟内容智能呈现策略设计、虚实对象融合的交互模式与界面设计、虚实融合场景的导航设计、虚实融合系统界面设计等。人、虚拟世界、现实世界3个对象构成了虚拟孪生虚实交互的框架，从中提炼构建面向虚拟孪生的跨学科本研一体化教学内容体系，按照知识要素的逻辑关系、不同学习阶段学生的认知水平，将其科学合理地配置至课程中，包括三维建模基础、三维动画基础、虚拟现实技术基础、VR交互设计、VR内容生成、VR影像创作、人机交互与用户体验设计研究、VR/AR创新设计等多门课程，形成贯穿学生大一到大四乃至研究生学习阶段的完整课程体系，见表1。3科教融合的教学实践模式

跨学科的教学内容设计，为面向虚拟孪生的教学实践构建了兼具基本理论体系的完整性、前瞻性和开放性的多元化知识体系。为了真正实现创新型人才的培养目标，跨学科内容的教学不是简单将跨学科知识要素进行叠加，在教学实施过程中要以问题为视角，使各学科知识形成有机整体，彼此不可或缺、相互联系。教学不能停留在单向向学生输出知识内容，而要将科教融合作为行动框架具体指导教学实践，让跨学科知识为学生真正掌握并能转化运用于实践、融会贯通，实现浅层学习向深层学习的转化。依托我校虚拟现实技术与系统国家重点实验室和数字媒体北京市重点实验室，将所承担的国家级科研项目引入教学，通过多种教学实践模式使教学与科研形成良性互动，提升育人效果。将科教融合的教学实践模式分为课内的研究型教学和课外环节的本科生科研两大类，具体的实施路径如图2所示。3.1研究型教学实践研究型教学强调的是打破传统被动接受式教学，以学生为中心，充分调动和激活其创新意识和探究能力，通过科研与教学的有机结合，形成以探索知识和发现、分析、解决问题为导向的教学模式。在面向虚拟孪生的教学实践中具体采取微课题驱动教学的模式以及组建跨学科课程作为实施路径。3.1.1

微课题驱动教学在面向大三、大四高年级的教学中，以教师承担的重要科研项目为背景，根据课程内容设置若干微课题，学生自主选题，在微课题的研究过程中完成课程学习。在具体实施中，以微课题任务为驱动、以问题为导向开展课堂教学，以设计方案和作品原型为最终产出。课堂采用模块化教学方式，即将课程内容划分成几个模块，在每一个教学模块中教师将相应的理论知识打碎、重新整合并融入实践，学生学习后立刻应用于微课题的研究和实践中。在教师的指导下，学生以组队、分工合作的形式提出问题，利用各种研究方法分析问题并找到解决方案，在序列化的教学模块中完成整个学习过程和大作业。教学过程充分体现了以学生为中心，学生通过每一个具体的目标实现有意义的产出，主动学习、思考，从而更深层次地理解和掌握知识内容，最大限度激发主动性和创新能力。同时，微课题都来源于科研项目，科研成果能够反映虚拟孪生领域前沿成果和进展，真实的项目情境可以激发学生的科研创新意识。以大三的VR内容生成课程为例，课程面向虚拟孪生中虚拟世界的内容生成与呈现及其与现实世界的融合，主要教学内容包含技术层面的虚实融合一致性计算，设计层面的虚拟内容生成、虚实对象融合的交互模式和界面设计。针对课程内容和教学目标，引入“基于华为河图平台的虚拟孪生创新设计”项目，连续两年分别在北京798艺术区、北航校园，以不同场景下的真实需求为导向开展教学实践。具体来说，把物理世界的场景按照功能分割成若干子区域，比如北航校园划分成教学区、科研区、生活区等，以此形成若干微课题，以不同区域中人的真实需求为导向，开展模块化教学，并指导学生开展基于现实世界场景的虚实融合设计。为了降低大作业实现的技术挑战性，将行业内领先的虚实融合内容创作与发布平台——华为河图引入教学，将项目资源转化为教学资源，学生在平台上开展研究和创作，可以更专注于课程本体知识和学习目标。学生在完成学习任务的过程中，始终以问题视角进行知识的建构，并学会站在设计和技术的顶层，以产品的高度把握整个研究过程，按照科学规律开展设计实践，将设计和技术更有效地融合。通过设计作品也能够外化学习的成果，激发学习动力。总之，微课题驱动的教学有助于将跨学科的教学理念真正落实在教学实践中，对教师而言，科研成果反哺教学，实现以研促教，形成良性互动。3.1.2

跨学科课程实践面向虚拟孪生这样一个技术与设计交织的复杂数字体系，跨学科内容的设计是在计算机技术与设计学交叉领域范畴内，领域外的知识壁垒很难打破，比如人工智能、大数据、计算机图形学、微电子等专业的知识。在以科研项目为背景的实践过程中，这一方面给学生微课题设计实现带来了局限，往往最终只能以概念方案的形式来展示成果，无法真正技术实现，不利于对设计的验证；另一方面，缺乏多学科人员分工合作的真实科研情境还原，学科间的隔阂与封闭限制了对学生创新能力的培养

[3]。为了解决此问题，探索打通培养机制，在本专业研究生课程“VR/AR创新设计研究”中，将选课权限同步向本校计算机学院、人文学院的学生开放，并将来自3个学科方向的学生按照1:1:1的比例组成跨学科研究小组共同完成课程学习和实践。以2022年的课程为例，以数字会展的VR/AR体验设计为命题，以数字会展中用户的真实需求为切入点开展研究型教学，小组中来自不同专业的学生进行分工协作，从自身专业视角积极主动设计完善解决方案。人文学院的学生来自社会学、心理学、教育学等专业方向，在小组中侧重通过社会科学的研究方法，以人为中心发现问题和需求，引导项目研究形成正确的科技观，展现元宇宙科技下的人文关怀；数字媒体专业方向的学生侧重用设计学的方法和视角将发现的问题转化为创意方案，将整个设计流程规范化，成为设计和技术之间的桥梁；计算机学院的学生来自虚拟现实技术、人工智能方向，更侧重用技术的视角验证设计是否成立，并将方案进行技术实现。总的来看，不同专业的学生通过协作和共创，互相启发，完成群体性的知识建构过程以及从设计方案到技术实现的转化，提高了综合分析解决问题能力，学生普遍认为这是一次非常珍贵的学科交叉学习和实践的机会。未来，将通过对培养机制的研究和改革，将跨学科课程模式进一步实施运用于本科课程中。通过本课题的研究，力求达到以下预期目标：（1）对区域代表性企业进行调查走访，通过调查结果分析得到围绕软件工程专业人才培养方案要求及毕业要求的解决复杂工程问题的创新能力需求报告；（2）校企双方教师尝试在嵌入式核心课程的实践教学中将OBE教学模式进行应用，包括共同进行项目选择、案例设计、场景设计及实施过程；（3）校企双方教师在课程设计中加入师生协同创新，制定过程化考核机制，完善软件工程专业课程体系；（4）形成带有实践效果的应用研究报告；（5）发表教学改革论文1-2篇。2023年8月-2023年1月：开展性工科产教融合、校企合作模式相关外政策及文献的整理，并对相关文献和法规进行研究探索，深入理解国家对新工科专业人才需求的具体标准和方向，并以此为基础对国内知名高校新工科专业建设现状进行调研，收集整理