香港科技大学(广州)元宇宙联合创新实验室1ヾ(•ω•`)o
香港科技大学(广州)与广东移动广州分公司共建的元宇宙联合创新实验室,由信息枢纽院长陈雷教授牵头,联合数据科学与分析、人工智能、物联网、计算媒体与艺术等学域的硕博团队,围绕产品创新、教学创新、科研创新三条主线,推动「元宇宙 + 教育」从技术研发走向场景落地。
研究方向ヾ(•ω•`)o
- 基于大规模模型智能体的数字人技术
- 虚拟空间中的多感官人机交互技术
- 基于人体数据实时采集的虚拟体现技术
- 基于人工智能的元宇宙内容生成技术
- 元宇宙教育的社会适应性研究
功能和产品ヾ(•ω•`)o
空地协同低空仿真平台AirGroundLAB2ヾ(•ω•`)o
面向物流巨头与城市规划者的空地协同配送数字孪生平台。支持高保真物理仿真、城市风场模拟、无人机与骑手协同配送策略优化。
实验室工具库元宇宙联合创新实验室工具库(Beta)2ヾ(•ω•`)o
实验室面向 Unity 与 Blender 生态的工具产品集合,包含 SceneForge 场景生成平台和 DeepOwl AI 动作生成系统。
Unity轻量级无人机仿真系统2ヾ(•ω•`)o
VR无人机虚拟仿真和培训2ヾ(•ω•`)o
本项目基于Unity引擎开发了一个多无人机遥操作界面系统,旨在通过模拟和研究无人机的协同运输任务,解决单无人机在载重、续航和抗风能力等方面的局限性。系统实现了单无人机和多无人机的飞行控制、绳索连接的货物运输功能,并设计了用户交互界面以提升操作体验。此外,项目还开发了丰富的用户界面功能,包括实时数据可视化、控制信号反馈以及虚拟环境中的任务模拟,为无人机协同运输的研究和应用提供了高效、直观的实验平台。可训练用户的无人机操作能力和方向感并帮助学习无人机及其飞控知识
一星期用 Unity 实现四轴无人机飞行模拟_哔哩哔哩_bilibili,两星期用 Unity 实现四轴无人机飞行模拟_哔哩哔哩_bilibili,https://youtu.be/UpD6_7_Ckxw?si=qQFGNS5B1RbOUib6
虚拟现实无人机环游世界和航拍2ヾ(•ω•`)o
在上述无人机架构的基础上,使用VR Engine | Unity 框架搭建了一套基于PICO 虚拟现实 的虚拟现实无人机遥控操作系统,同时接入Bing和Google地图(Cesium: The Platform for 3D Geospatial)实现沉浸式无人机遨游的体验亦可训练用户的无人机操作能力和方向感
虚拟现实无人机灭火2ヾ(•ω•`)o
在上述基础上,增加无人机灭火功能,探索潜在的无人机应用场景
VR多人农场经济学博弈实验ヾ(•ω•`)o
多人联机的农场经济学博弈实验,供教学与行为经济学研究使用。
VR虚拟沙盘讲解3ヾ(•ω•`)o
用虚拟沙盘替代实体沙盘进行讲解与演示。
VR虚拟现实拼抢3和射击训练2ヾ(•ω•`)o
VR 拼抢游戏,以及基于前述无人机框架的射击靶场训练场景。
AI全息以及多终端数字人框架2ヾ(•ω•`)o
大语言模型驱动的数字人,可部署在全息柜、移动端、网页端与桌面端等终端。
多人网络框架3ヾ(•ω•`)o
支撑多终端同步接入的联机基础框架。
VR多人军事无人机活动2ヾ(•ω•`)o
基于多人网络框架的 VR 多人无人机活动与演练场景。
论文2ヾ(•ω•`)o
实验室成员的代表性论文。
Cognitive Load as a Hidden Cost of Empathy: Tradeoffs in Using VR for Inclusive Design
International Journal of Human–Computer Interaction,2026 · 第一作者 熊大卫(Dawei Xiong),创新创业与公共政策学域博士生
VR 常被用来弥合包容性设计中的「共情差距」,但这种情绪化模拟是否真能改善设计产出,此前并不清楚。研究以低视力人群的出行障碍为题材,经访谈与共创打磨原型后,对比被动视频与「无情绪/有情绪」两种交互式 VR 模拟:两种 VR 都提升了共情,但情绪强度并未带来额外增益;反而是无情绪 VR 产出了更贴合用户优先需求的方案。作者借认知负荷理论提出工作假设——情绪线索会在构思阶段引入额外负担,并据此给出校准 VR 情绪强度的设计建议。
Hierarchical Reinforcement Learning for Cooperative Air-Ground Delivery in Urban System
arXiv 2602.12913,2026 · 作者 Songxin Lei 等(含陈李政和)
无人机与地面运力协同的城市配送,需同时应对飞行与道路动力学异构、大规模机队决策变量爆炸两个难题。论文提出分层强化学习框架 HRL4AG:高层 manager 分解联合动作空间以控制规模,底层 worker 分别建模飞行与道路动力学,并以内部奖励缓解稀疏奖励下的信用分配问题。在两个真实数据集与评测平台上,配送成功率最高提升 26%,计算效率提升约 80 倍。
arXiv 2408.08018,VINCI 2024 · 第一作者 熊大卫(Dawei Xiong)
用真实物体代理虚拟物体时,「看到的」与「摸到的」尺寸是否一致,直接决定沉浸感的真伪。研究考察用户如何确认并调整虚拟物体尺寸,发现虚拟方块越大,用户判断正确的概率越低、需要的调整越多,为 VR 视觉—触觉错觉的设计提供了依据。
媒体曝光ヾ(•ω•`)o
| 时间 · 媒体 | 报道 | 内容摘要 |
|---|---|---|
| 2025-06 · 中新网 | 中欧高等教育科技与艺术论坛在布鲁塞尔举行 | 中欧建交 50 周年之际,港科大(广州)与布鲁塞尔自由大学联合主办论坛,150 余位嘉宾聚焦艺术与科技融合的高等教育创新。 |
| 2025-06 · 港科大(广州) | 港科大(广州)与布鲁塞尔自由大学主办中欧高等教育科技与艺术论坛 | 校方视角的论坛纪实;信息枢纽院长、实验室负责人陈雷教授主持开幕致辞环节。 |
| 2025-01 · 港科大(广州) | 闪耀!港科大(广州)师生创业公司荣获CES创新奖 2025 | 实验室孵化的元惑科技凭「大语言模型驱动的个性化数字伙伴与社群」获 CES 2025 创新奖(人工智能赛道),是唯一获奖的中国大陆企业。 |
| 2024-05 · 广州日报新花城 | 让青春乐聚湾区!粤港澳大湾区(南沙)青年生活+联盟启动 | 实验室博士生马春鸣作为港科大(广州)代表受访;实验室的联合项目在 N+ 聚所展示。 |
| 2024-05 · 广州日报新花城 | “独角兽”可能就在他们之中 | 走访 N+ 天地与首场青年科创交流会,重点报道实验室「元莱飞训」的无人机灭火训练、元宇宙课堂与长征主题红色教育。 |
| 2024-04 · 搜狐(南沙部落) | 南沙迎来吃喝玩乐新地标 越秀地产N+天地正式启幕 | 越秀 N+ 天地启幕当天同场举办「N+ 青年科创交流会」,实验室团队路演「元莱飞训 超越现实」VR 无人机训练项目。 |
| 2024-04 · 百家号(金融界) | 南沙迎来吃喝玩乐新地标 越秀地产N+天地正式启幕 | 前述搜狐报道的转载版本。 |
| 2023-10 · 港科大(广州) | 这群港科广人,在元宇宙里开展爱国主义教育 | 国庆专题报道:实验室启用(2023-09-08)后,自研的三大军事实训课程首次把元宇宙技术引入思政与爱国主义教育。 |
应用证明ヾ(•ω•`)o
- 元宇宙联合创新实验室-证明
- 附件08-2023年元宇宙军事实训思政中心应用证明
- 附件09-2024年元宇宙军事实训思政中心应用证明
- 附件11-2023年广州番禺博萃德学校科创研学活动应用证明
- 附件18-2024年第二届粤港澳大湾区研究生创新创业大赛优胜奖







