基于单幅图像的三维动物自动建模项目(The SMAL Model)学习笔记1
The SMAL Model为马普所在2017年CVPR上发表的一项工作,用于解决基于单幅图像的三维动物模型自动生成问题。
项目链接:http://smal.is.tue.mpg.de/
该项目比较大的亮点是定义了一个分块的标准动物模型模板,基于母狮子作为参考,并包含一组动作。设计了分块优化的配准方法,对一组动物雕塑建立了拓扑一致的表示,并实现了对姿态与形状的优化框架。这样就有了一组动作数据和一组动物形状数据。基于这两组数据建立特征空间,得到一个数据规模小但功能强大的动物建模工具。
全文共包括三个核心部分:
Step1:初始化配准;Step2:SMAL 模型建立;Step3:图像匹配
对于SMAL模型建立与图像匹配来说,个人觉得没啥新鲜的,但是初始化配准确实值得关注。对于动物模型来说,其差异性远远大于人类模型,因此配准难度比较大。从结果来看,SMAL项目的配准方法对于不同动物的配准结果确实很好。
目前正在开发的项目涉及到相关技术,因此开始尝试对该项目进行研究,未来会将具体细节记录并分享。