点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:多视角4D人脸扫描系统 给AI装一双“慧眼”
首页> 科技频道> 综合新闻 > 正文

多视角4D人脸扫描系统 给AI装一双“慧眼”

来源:中国科学报2024-05-08 10:38

  图像识别、智能助手、虚拟人、文生视频……技术的发展和创新让人们进一步向智能时代迈进。然而,目前运用人工智能(AI)技术呈现的图像画面大多是二维效果,在空间、时间和细节方面仍有较大上升空间。

  如何为AI装一双“慧眼”,让画面更清、更细、更自然?

  近日,《中国科学报》记者从中国科学院深圳先进技术研究院(以下简称深圳先进院)了解到,该院集成技术研究所(以下简称集成所)机器视觉研究中心研究员宋展团队自主研发出多视角4D高精度人脸三维成像系统。相较传统的3D人脸扫描技术,该系统在精度、分辨率和速度上均实现大幅提升,可应用领域包括但不限于人脸识别、医疗诊断、影视特效等。

  人脸扫描更快、更清、更细

  据介绍,研究团队开发的多视角4D人脸扫描系统,由3个不同近红外波段的结构光相机构成,底层算法采用团队提出的高频条纹位移编码三维重建方法,可以实现1080P(1920×1080像素)分辨率下超过100帧每秒的三维扫描速度,基于GPU的高并行三维重建算法可实现高达300赫兹的实时重建速度,且深度成像误差小于0.05毫米。

  “每个深度相机都由一个近红外结构光投影光栅和一个工业相机组成。深度相机每重建一次,投影仪都要向被测物体投射一组预设高频条纹图案,并用相机拍下它们在被测物体上产生变形的图案。最终,根据相机拍到的变形图案分析得到深度信息,即3D信息。深度相机实现连续扫描,增加了时间轴信息,由此得到4D信息。”深圳先进院集成所在读硕士生吴迪解释说。

  此外,为实现多角度更为完整的三维人脸动态成像,该系统采用3种不同波段的近红外光作为光源,既能避免人脸产生炫目,又能避免3套设备投影仪投射的图案相互干扰,大大改善了成像完整性。

  “近红外光对人眼友好,但对皮肤具有一定的穿透性,使得投射的高频光栅图案模糊,降低了三维重建精度。”宋展表示。对此,研究团队采用了创新的图像增强算法,结合高鲁棒性的条纹编解码算法突破,提高了解码投射图案的相位计算精度,从而提高了三维重建精度。与此同时,研究团队还要考虑算法的实时性和并行性,为3D动态模型获取、头部姿态估计和面部表情迁移等基础工作的研究提供高精度数据支持。

  支撑AI生成更高质量三维数据

  宋展介绍,该系统在多个领域应用前景广阔。例如,在新型显示技术领域,有望为全息投影、空气成像等新型显示技术以及AR显示终端,提供三维数据采集设备;在影视领域,可实时捕捉演员的高精度面部表情,结合表情迁移技术,实现从真人的表情到卡通形象的表情迁移;在游戏领域,可捕捉用户面部信息,结合视线追踪技术,实现人机交互;在医疗领域,可帮助提供患者面部表情信息,助力医疗诊断等;在人形机器人领域,可为机器人提供更加精确、敏锐的4D视觉感知方法,让其从只能干粗活变成干更多精细活。

  AI技术的发展,很大程度上依赖于数据驱动。

  “二维平面上生成的图像或视频往往难以呈现真实世界的三维结构,未来,AI技术生成的视频将逐渐从二维向三维发展。想要生成更高质量的三维视频,离不开三维数据的支撑。”宋展说。

  该系统可以为“3D+AI”研究提供真实、精细的高质量三维数据,解决目前该研究领域高精度三维数据不足的问题,为AI模型生成更高质量的视频提供实时、高精度、高分辨率的数据支撑。

  据了解,目前,研究团队已将该技术运用于电影特效、特种加工、面部3D诊疗、动态3D视觉引导装配等方面,并取得了良好的效果。

  未来,研究团队将进一步加强底层算法研究,提高编码效率成像速度,降低硬件成本,研制模块化高时空分辨率4D成像器件,并将其应用于工业和信息通信等更多领域,为新质生产力发展提供锐利的视觉成像技术支撑。(记者 刁雯蕙)

  《中国科学报》 (2024-05-08 第3版 领域)

[ 责编:焦子原 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 地质灾害防治·北京在行动

  • 庆祝香港回归祖国28周年活动在维园举行

独家策划

推荐阅读
近日,四川乐山一小伙感觉身体不适独自乘出租车前往医院就诊,途中开启“超强自救”模式:联系妈妈告知情况、打110报警求助、打120告知医院准备急救。如果长期处于焦虑引起的躯体化障碍状态,患者会反复出现头痛、心慌、呼吸急促、胃肠紊乱、肢体疼痛、睡眠问题等。
2025-07-02 10:06
使用人工智能大模型时,不少人或许都遇到过类似问题:它们有时会捏造细节,甚至“一本正经地胡说八道”。当“喂给”大模型的训练数据包含虚假信息时,它就会产生“幻觉”、给出错误答案。
2025-07-02 10:05
中国国际航空公司所属的国产C909客机平稳降落在蒙古国乌兰巴托成吉思汗国际机场,标志着国航首条C909国际航线正式开通。早8时许,这架C909客机从呼和浩特起飞,经过1个多小时飞行抵达乌兰巴托。
2025-07-02 10:03
农业是国民经济的基础,农业领域形成新质生产力是国民经济形成和发展新质生产力的基础和“底盘”。 农业新质生产力是通过提升劳动者素质、优化劳动资料和创新利用劳动对象,实现全要素生产率的显著提高。
2025-07-02 10:01
团队基于卫星遥感数据构建了1988年至2021年青藏高原30米分辨率人工草地数据集,明确了青藏高原主要的人工草地类型及其时空分布特征,并揭示了青藏高原人工草地的迅速扩张及其驱动机制。
2025-07-02 09:59
屠光绍认为,金融机构在应用人工智能时必须在服务投资人与消费者之间寻求平衡,避免AI鸿沟,坚守金融服务大众的初心。鲍建敏倡导构建产学研深度融合、开放共赢的人工智能金融生态体系,搭建跨机构、跨领域的协同创新平台。
2025-07-01 10:13
6月30日,2025温布尔登网球锦标赛在英国伦敦拉开大幕,引发球迷关注。在草地球场,球的速度更快且弹跳不规则,比赛回合较短,发球就成为球员们的重要“武器”。红土球场并不是天然土壤,而是分层分布着碎砖粉、白色碎石灰石、碎石等。
2025-07-01 10:09
7月1日起,医保定点医药机构在销售药品时,必须按要求扫药品追溯码后方可进行医保基金结算;2026年1月1日起,所有医药机构都要实现药品追溯码全量采集上传。步,进入国家医保局微信公众号主页,点击服务、药品追溯信息查询,进入查询页面;或进入国家医保局微信公众号消息对话页,点击医保服务、药品追溯信息查询,进入查询页面。
2025-07-01 10:09
记者从国家航天局获悉,7月1日,该局发布行星探测工程天问二号探测器在轨获取的地月影像图。(国家航天局供图)  月球全色图,由天问二号探测器的窄视场导航敏感器于2025年5月30日15时拍摄,经辐射校正处理后制作而成。
2025-07-01 10:08
龙芯中科近日正式发布基于国产自主指令集龙架构研发的服务器处理器龙芯3C6000系列芯片、工控领域及移动终端处理器龙芯2K3000/3B6000M芯片以及相关整机和解决方案。
2025-07-01 10:06
四大家鱼,即青鱼、草鱼、鲢鱼、鳙鱼,是我国重要的经济鱼类,占淡水鱼类养殖总量的“半壁江山”,尤以长江流域所产鱼品质最优。但人工养殖久了,鱼类品质逐渐下降,需要捕捞野生鱼种来更换,确保鱼类种质“基因库”稳定。
2025-06-30 04:50
FAST如今每天观测时长接近24小时,每年总观测时长超过5300小时,持续不断地为科学家提供宝贵的数据。
2025-06-30 09:52
华南农业大学积极探索应用大数据、人工智能等技术加速育种创新,“华航香银针”就是创新成果之一。
2025-06-30 09:51
在近日落下帷幕的第十五届全国周培源大学生力学竞赛中,一位特殊的“考生”吸引了人们目光。
2025-06-30 09:51
6月29日,在海南文昌卫星超级工厂项目建设现场,各方正全力以赴加快工厂投产进程。
2025-06-30 09:51
作为一所工科见长的大学,近年来,山东科技大学涌现出一批热衷文化艺术的学生:材料学院研究生庄英赞受邀参加《声声入戏——中央广播电视总台首届京剧票友大会》节目;
2025-06-30 04:50
今年“三夏”生产,该农场配备无人驾驶系统的收割机和拖拉机、气吸播种机、精准水肥轮灌系统、自动巡田无人机等智能化装备大显身手。
2025-06-27 10:25
6月24日,国家重大科研仪器研制项目“2.5米大视场高分辨率太阳望远镜”(WeHoST)在四川稻城启动建设配套项目,预计2027年望远镜完成装调并投入试运行。
2025-06-27 10:24
古生物研究表明,包括早期犬齿兽在内的一些远古动物,脑袋为一个没有左右脑半球区分的整体,而现生哺乳动物和典型的进步颌兽类则有左右两个脑半球。
2025-06-27 10:18
6月26日21时29分,经过约6.5小时的出舱活动,神舟二十号乘组航天员陈冬、陈中瑞、王杰密切协同,在空间站机械臂和地面科研人员的配合支持下,圆满完成既定任务。
2025-06-27 10:17
加载更多