更进一步,这个AI能让照片或图片中人像做各种表情和动作

AI百科5个月前更新 快创云
57 0

  在科技飞速发展的今天,让静态照片“动”起来,通过视频形式展现图片中的人物,已不再令人惊奇。几年前,AI技术就已在复活老照片和制作娱乐短视频方面大放异彩,如AI“复活”故人、名人唱歌等,这些都已深入人心。近期,一个由清华大学团队研发的新开源AI技术——Thin-Plate Spline Motion Model for Image Animation,更是将这一领域推向了新的高度。这项技术不仅能驱动人像做表情,还能让人像进行各种动作,这无疑将引发广泛关注。

  该技术的核心在于对现有Image Animation技术的改进。传统的Image Animation虽然能驱动人脸做出表情,但常面临背景缺失、修复困难等问题。而新算法则有效解决了这些问题,使得动画效果更加逼真。此外,这项技术不仅能驱动人像表情,还能驱动身体动作,这无疑为用户提供了更广阔的创作空间。无论是制作表情丰富的视频还是动作多样的动画,都能得心应手。

  尽管目前搭建环境需要一定时间,且使用demo算法对显卡算力有一定要求,但这一技术前景广阔,非常适合应用于视频直播、视频特效、娱乐内容等领域。当然,在搭建环境时可能会遇到一些版本兼容等问题,但通常通过修改代码或调整依赖库即可解决。在demo测试中,可以使用自己的素材进行测试。从运行效果来看,该技术的确令人眼前一亮。当然,也需要注意一些限制条件,如视频素材运动不能过于激烈、幅度不能过大等。此外,生成的result视频中可能会出现人体扭曲、截断或撕裂等问题,这需要在视频后期合成软件中进行进一步调整。由于时间和算力限制,目前尚未测试更多素材。但随着技术的不断进步和完善,相信这些问题都将得到更好的解决。

© 版权声明

相关文章