“数据要素×”全国总决赛奖杯
10月25日,2024年“数据要素×”大赛全国总决赛在北京中关村国际创新中心落下帷幕。在这场聚焦数据要素开发应用的全国性大赛中,由甬江实验室牵头,联合温州医科大学附属眼视光医院、万有引力(宁波)电子科技有限公司的项目《万“眼”合一,助力虚拟现实新交互》经过市赛、省赛层层突围,作为浙江省科技创新赛道唯一一支晋级全国总决赛线下路演的队伍,最终夺得科技创新赛道技术创新奖。
2024年“数据要素×”大赛,是由国家数据局会同有关部门举办的全国首个聚焦数据要素开发应用的大赛,分为地方分赛和全国总决赛,围绕国家“数据要素×”三年行动计划部署的工业制造、现代农业、商贸流通、交通运输等12个行业领域,对应设置12个赛道,旨在通过以赛促用、以数聚力,挖掘一批数据要素开发利用的好技术、好方案,让更多数据“动起来、用起来、活起来”。历时5个多月,累计超1.9万支队伍、近10万人参赛,全国参与评审的专家超过千人,线上评审与线下路演答辩相结合……一批应用成效显著、创新性强、引领效应好的数据要素开发应用解决方案从大赛中脱颖而出。
项目核心成员梅光行(左8)领奖
《万“眼”合一,助力虚拟现实新交互》项目的核心成员,来自甬江实验室新型显示与感知研究中心(以下简称新显中心)。该中心是实验室首个筹建的研究中心,聚焦元宇宙核心XR技术,重点突破感知追踪系统方案、先进光学显示、眼动追踪为基础的系统方案和前沿技术。
眼动追踪是创建元宇宙不可或缺的一环。近年来,通过优化成本效益,该技术已在虚拟现实、医疗健康、心理学研究及交通安全等多个领域有了广泛应用。然而,过去各大厂商在进行AI眼动追踪训练时多依赖真人实测法,这种方法存在成本高昂、精度较低、难以复现、主观性强以及隐私风险等弊端。“鉴于眼图数据生成过程中存在的采集耗时费力、人工标注准确性差、数据多样性不足等问题,2023年我们正式启动了《万‘眼’合一,助力虚拟现实新交互》项目。”新显中心副主任赵蕾研究员称。
项目负责人赵蕾和梅光行在全国总决赛颁奖现场
项目启动以来,甬江实验室与温州医科大学附属眼视光医院合作通过利用人眼脱敏数据、公开数据库、真人采集眼图等数据资源,运用多维数据融合、数字孪生、AI模型、PCCR自动标注等关键使能技术,打造高精度精细化的虚拟数据集,成功构建了虚拟眼图生成式大模型——Eye-2大模型,实现数据采集成本降低80%以上,人力投入降低75%以上,极大地提高了标注效率,单位时间内数据标注量增加250倍。
相较国际上普遍的真人采集法或单一数据集获取方案,Eye-2大模型允许用户自定义设置眼球参数、人头特征参数、眼图光源及角度等多个维度,从而能够生成全面覆盖、高度多样化且精确度高的虚拟眼图数据集。截至目前,Eye-2大模型的生成数据量已达到2000万个。
上述数据集经过高水平数据治理,已完成脱敏与匿名化处理,形成可流通、交易及应用的数据产品,专供扩展现实技术研发企业和相关科研机构用于算法训练,展现出低成本、高通用性及高精度等诸多优势。
梅光行在浙江分赛路演现场
此外,新显中心还自主研发了全球首套高精度人眼模拟设备,可高效检测眼动算法精度,并给出优化反馈方向。今年上半年,该设备连续摘得国际显示技术大会(ICDT 2024)、国际显示周(SID Display Week 2024)I-Zone创新区唯一的一等奖,实现“双冠”荣誉。
新显中心研发的大模型及产品已经为OPPO等头部公司的产品进行了检测,并输出了有效报告,有效克服了数据集采集成本高、通用性差及眼动算法精度难以量化的难题,显著推动了全球眼动追踪技术的创新发展,为新型人机交互方式的未来应用奠定了坚实基础。
宁波站(三等奖)、浙江分赛(二等奖)颁奖现场
“我们以学习和交流的心态参加了这次数据要素大赛,毕竟项目从启动到参赛,积累的时间相对有限。然而,正是整个团队对眼动技术的执着追求,让我们在比赛中不断突破,最终脱颖而出,成功晋级收获奖项。这不仅是对我们项目技术实力的认可,更是对团队凝聚力和创新精神的鼓舞。”项目核心成员、新显中心工程师梅光行说。
赵蕾研究员称,接下来团队将深入分析并总结此次大赛中的宝贵经验,并以此为基础,持续聚焦XR领域的尖端技术研发。同时,将进一步拓宽技术应用的广度与深度,与高校、科研机构及企业伙伴紧密合作,共同开发更多具有代表性的应用场景,力求探索出多元化且可持续的价值实现路径。