点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:多视角4D人脸扫描系统 给AI装一双“慧眼”
首页> 科技频道> 综合新闻 > 正文

多视角4D人脸扫描系统 给AI装一双“慧眼”

来源:中国科学报2024-05-08 10:38

  图像识别、智能助手、虚拟人、文生视频……技术的发展和创新让人们进一步向智能时代迈进。然而,目前运用人工智能(AI)技术呈现的图像画面大多是二维效果,在空间、时间和细节方面仍有较大上升空间。

  如何为AI装一双“慧眼”,让画面更清、更细、更自然?

  近日,《中国科学报》记者从中国科学院深圳先进技术研究院(以下简称深圳先进院)了解到,该院集成技术研究所(以下简称集成所)机器视觉研究中心研究员宋展团队自主研发出多视角4D高精度人脸三维成像系统。相较传统的3D人脸扫描技术,该系统在精度、分辨率和速度上均实现大幅提升,可应用领域包括但不限于人脸识别、医疗诊断、影视特效等。

  人脸扫描更快、更清、更细

  据介绍,研究团队开发的多视角4D人脸扫描系统,由3个不同近红外波段的结构光相机构成,底层算法采用团队提出的高频条纹位移编码三维重建方法,可以实现1080P(1920×1080像素)分辨率下超过100帧每秒的三维扫描速度,基于GPU的高并行三维重建算法可实现高达300赫兹的实时重建速度,且深度成像误差小于0.05毫米。

  “每个深度相机都由一个近红外结构光投影光栅和一个工业相机组成。深度相机每重建一次,投影仪都要向被测物体投射一组预设高频条纹图案,并用相机拍下它们在被测物体上产生变形的图案。最终,根据相机拍到的变形图案分析得到深度信息,即3D信息。深度相机实现连续扫描,增加了时间轴信息,由此得到4D信息。”深圳先进院集成所在读硕士生吴迪解释说。

  此外,为实现多角度更为完整的三维人脸动态成像,该系统采用3种不同波段的近红外光作为光源,既能避免人脸产生炫目,又能避免3套设备投影仪投射的图案相互干扰,大大改善了成像完整性。

  “近红外光对人眼友好,但对皮肤具有一定的穿透性,使得投射的高频光栅图案模糊,降低了三维重建精度。”宋展表示。对此,研究团队采用了创新的图像增强算法,结合高鲁棒性的条纹编解码算法突破,提高了解码投射图案的相位计算精度,从而提高了三维重建精度。与此同时,研究团队还要考虑算法的实时性和并行性,为3D动态模型获取、头部姿态估计和面部表情迁移等基础工作的研究提供高精度数据支持。

  支撑AI生成更高质量三维数据

  宋展介绍,该系统在多个领域应用前景广阔。例如,在新型显示技术领域,有望为全息投影、空气成像等新型显示技术以及AR显示终端,提供三维数据采集设备;在影视领域,可实时捕捉演员的高精度面部表情,结合表情迁移技术,实现从真人的表情到卡通形象的表情迁移;在游戏领域,可捕捉用户面部信息,结合视线追踪技术,实现人机交互;在医疗领域,可帮助提供患者面部表情信息,助力医疗诊断等;在人形机器人领域,可为机器人提供更加精确、敏锐的4D视觉感知方法,让其从只能干粗活变成干更多精细活。

  AI技术的发展,很大程度上依赖于数据驱动。

  “二维平面上生成的图像或视频往往难以呈现真实世界的三维结构,未来,AI技术生成的视频将逐渐从二维向三维发展。想要生成更高质量的三维视频,离不开三维数据的支撑。”宋展说。

  该系统可以为“3D+AI”研究提供真实、精细的高质量三维数据,解决目前该研究领域高精度三维数据不足的问题,为AI模型生成更高质量的视频提供实时、高精度、高分辨率的数据支撑。

  据了解,目前,研究团队已将该技术运用于电影特效、特种加工、面部3D诊疗、动态3D视觉引导装配等方面,并取得了良好的效果。

  未来,研究团队将进一步加强底层算法研究,提高编码效率成像速度,降低硬件成本,研制模块化高时空分辨率4D成像器件,并将其应用于工业和信息通信等更多领域,为新质生产力发展提供锐利的视觉成像技术支撑。(记者 刁雯蕙)

  《中国科学报》 (2024-05-08 第3版 领域)

[ 责编:焦子原 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 迎接助残日

  • 阿富汗西部洪水灾害致50人死亡

独家策划

推荐阅读
金塘海底隧道是甬舟铁路全线控制性工程,位于宁波与舟山之间金塘水道下方,全长16.18公里,其中盾构段长11.21公里。
2024-05-17 10:14
据估算,每辆新能源汽车每年减碳约1.66吨,中国2023年出口120万辆新能源车,每年可减碳约200万吨。
2024-05-17 10:10
5月15日,由载人航天工程投资建设、我国首个液体火箭发动机垂直高空模拟试验台考台点火试验成功,试验台发动机具备在千帕级以下真空工作环境中持续千秒的高空模拟试验能力
2024-05-17 10:08
4月29日11时08分,随着世界最大直径高铁盾构机“领航号”刀盘缓缓转动,南通的崇太长江隧道正式进入盾构掘进阶段,这条深潜地底的机械巨龙,将在长江水下掘进11.325千米,崇明岛不通高铁的历史即将终结。
2024-05-17 10:07
立足“三地一区”的战略定位,安徽正在将承东启西、连南接北的区位优势,转化为通江达海、左右逢源的发展优势。
2024-05-17 10:03
在建设现代装备制造及高技术产业基地方面,江西将立足自身特色,发挥比较优势,不断推动制造业的高端化、绿色化、智能化发展。
2024-05-17 10:01
伴随螺旋桨的轰鸣,一辆“空中的士”——旅航者X2正展翅翱翔。看完飞行表演,步入小鹏汇天展示厅,大家对这辆“会飞的汽车”充满好奇。
2024-05-16 10:29
近日,国家卫健委发布了2023年全国健康素养监测结果。结果显示,2023年我国居民健康素养水平达到29.70%,比2022年提高1.92个百分点,继续呈现稳步提升态势。
2024-05-16 10:26
这对宇宙线粒子的传播、星系气体的动力学和宇宙磁场演化等研究领域提供了至关重要的观测结果
2024-05-16 09:36
近日,前往月球探索的中国嫦娥六号探测器成功实施近月制动,顺利进入环月轨道飞行。
2024-05-16 09:08
《自然》杂志审稿人对此给予高度评价,认为“他们的成果开启了量子互联网研究的新篇章”,“为未来大规模量子网络铺平了道路”。
2024-05-16 09:02
日前,广东省科技厅党组成员、副厅长梁勤儒带队上线“广东民声热线”节目,拎着一篮“冻眠”荔枝上台“带货”。
2024-05-16 08:59
既然有“小时”,那么是否也有“大时”?东西方的历法计时方法有何异同?如何看待不同文明之间历法计时的交流与发展?
2024-05-15 17:04
微生物合成天然产物时,大量合成基因仍处于沉默状态,限制了更多新天然产物的合成,这些产物被称为微生物“生命暗物质”。”罗小舟介绍,团队将持续推进菌株的开发改造工作,探索链霉菌在生产抗生素和天然产物等方面的产业应用。
2024-05-15 10:18
十四次全国助残日来临之际,中国残联14日在京召开新闻发布会,公布今年全国助残日活动的主题为“科技助残,共享美好生活”,并介绍科技助残工作进展和科技助残创新案例。
2024-05-15 10:16
为促进数字经济规范健康持续发展,市场监管总局近日发布《网络反不正当竞争暂行规定》,将自2024年9月1日起施行。在着力规范竞争方面,《规定》顺应我国数字经济发展新特点、新趋势、新要求,完善各类网络不正当竞争行为认定标准及规制要求。
2024-05-15 10:15
研究团队经过大量研究论证过程,为仿萤火虫通信无人机装备了多项先进智能算法及技术,充分确保了无人机集群的智能化和稳定性。”团队负责人介绍,未来,团队将继续在仿萤火虫通信无人机通信距离、速率、稳定性和环境适应性等方面进行深入研究。
2024-05-15 10:14
近日,合肥市城市生命线工程安全监测中心预警了一起因施工作业导致的供水泄漏三级风险事件:在人流量较大的蜀山区金寨路与南二环交口附近,管道长期暗漏,很可能导致路面塌陷。
2024-05-15 10:13
据近期《自然·通讯》杂志报道,美国俄亥俄州立大学的研究人员使用机器学习工具创建了一个表现出混沌行为的电子电路的数字孪生模型。结果表明,新方法与线性方法相比,实现了更高的准确度,且比以前基于机器学习的控制器的计算复杂性显著降低。
2024-05-14 10:36
中国科学院高能物理研究所物理学家、HEPS工程副总指挥李煜辉表示,HEPS不是在现有设施的基础上建造,而是从头开始建造。
2024-05-15 10:17
加载更多