mad吧 关注:78,641贴子:662,870
  • 12回复贴,共1

[技术]已经可以用AI算法直接从视频生成MMD的动作

只看楼主收藏回复

目前已经在我的集群实现了用AI算法实现识别宅舞视频:
从每一帧导出人的所有关节的动作值,和镜头位置,然后转换成mmd人物模型的数据.
这样动作就不用手推了,手机拍一段视频,转换一下,就能用mmd里的模型复现视频里的动作.
不知道这个功能有没有用?


IP属地:重庆1楼2019-10-24 10:59回复
    真正的一键生成


    IP属地:福建来自Android客户端2楼2019-10-24 12:01
    回复
      很有用,如果动作计算很精确的话,某种意义上可以替代手K了。MMD最难的差不多就是K动作了吧,不过你这个也是有不足的。
      那就是真人无法做到的动作,你也就无法实现。这就是动画和现实的距离。


      IP属地:四川来自iPhone客户端3楼2019-10-24 12:16
      回复
        这玩意就是胡扯。不适合一般用户,首先,如果你的视频或者说每帧,他不是360度的话,是算不出厚度的,只给一个正面如何算出厚度?现在个人来说我只知道在steam里有一款3D打印,它可以出模型,需要360度环绕来给算出厚度,再然后,哪怕你已经有了这个动作,就好像我们现在已经有一套动作了,放在模型身上,会出现什么?动作和模型不匹配,需要重新刷权重,绑骨骼。
        所以,再过5年吧,再看,至少目前来说,这技术不是个人大众可以玩的


        IP属地:辽宁4楼2019-10-25 11:28
        收起回复
          ·挺好,有demo吗


          IP属地:湖北5楼2019-10-25 12:18
          收起回复
            答案是不可能的 我就是从事三维动画的 专门k帧的 我手k过动画 也结果修动补的项目 别人给的动补数据都是逐帧的 要整体去修 动补的很烂的地方直接删掉重新手k 捕捉的不错的地方 删掉那些抖动的帧 一份视频能完成建模加材质加动画 动补的确可以捕捉出精度不太高的动画 终究还是动画师去修 但是模型和材质你觉得现实么
            如果真的有这样的技术 中国的动画行业现在都可以去死的 现在的动补连动画师都取代不了 而且十年之内都取代不了 那些夸张性的动画 人也演不出来 卡通风格的动画永远只能手k
            动画永远是经过艺术加工的


            IP属地:江苏6楼2019-10-26 08:18
            回复
              至于mmd他们也是经过绑骨然后把动作数据匹配骨骼 所以mmd真的挺神奇的 所有模型都用一套骨骼 因为数据是k在骨骼或者控制器上的 都只能一对一 mmd没有控制器 都直接k在骨骼上 所有模型用一套骨骼 就能直接适配 直接套 当然这样并不好 因为模型都是有区别的 有的时候这样会出问题
              现在市面上的动补设备几十万到几百万不等 便宜的也有几万的 但是所有数据都需要修
              你这玩意不知道能捕捉出来什么玩意儿 但是想用在mmd上 先适配mmd的骨骼吧 当然数据是不是压根能不能用另说 别把小儿**症叫做动作


              IP属地:江苏7楼2019-10-26 08:43
              回复
                everyone dance now?


                IP属地:北京来自Android客户端8楼2019-10-29 08:42
                回复
                  请问,你是怎么实现的


                  IP属地:广东10楼2020-09-02 11:17
                  回复
                    可以实现,效果一般。国外有网站可以(radical)收费巨贵


                    IP属地:上海11楼2021-04-05 10:14
                    回复


                      IP属地:广东12楼2022-07-27 14:29
                      回复