让手绘动漫人设图动起来,一个开源 AI 项目 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
hzwer

让手绘动漫人设图动起来,一个开源 AI 项目

  •  3
     
  •   hzwer
    hzwer 2022 年 8 月 12 日 5617 次点击
    这是一个创建于 1343 天前的主题,其中的信息可能已经有所发展或是发生改变。

    Github 项目 | 模型解读 | B 站介绍视频 |

    我们的这个工作的目标是让用户通过输入几张任意姿势,任意角度下的手绘人物图片,生成该人物生动的动画视频。

    希望有兴趣的朋友来体验和帮助我们改进;或动动小手给个三连,谢谢大家。

    21 条回复    2022-08-22 23:47:53 +08:00
    Aloento
        1
    Aloento  
       2022 年 8 月 12 日
    我可以提供炼丹 GPU
    hzwer
        2
    hzwer  
    OP
       2022 年 8 月 12 日
    @Aloento GPU 我们倒是有很多,可以附送算法大佬吗(
    FightPig
        3
    FightPig  
       2022 年 8 月 13 日
    这个不错
    Aloento
        4
    Aloento  
       2022 年 8 月 13 日
    @hzwer 羡慕不缺显卡的,那我可以拿来用用试试看。不是很有空提 PR 抱歉
    c0xt30a
        5
    c0xt30a  
       2022 年 8 月 13 日
    OP 能否写篇文章介绍下文章核心算法和炼丹时候踩过的坑?
    hzwer
        6
    hzwer  
    OP
       2022 年 8 月 13 日
    @c0xt30a 现在只有这个,因为还在改进中,之后看看有没机会再写
    https://zhuanlan.zhihu.com/p/549112479
    codingBug
        7
    codingBug  
       2022 年 8 月 13 日
    看起来好棒
    whywaoxaks
        8
    whywaoxaks  
       2022 年 8 月 13 日
    是我看错了么?胸还在抖么?
    edis0n0
        9
    edis0n0  
       2022 年 8 月 13 日
    黄学长太强了!要是能做到只输入一张图(因为很多情况都是只有一张图)应用就广了。
    hzwer
        10
    hzwer  
    OP
       2022 年 8 月 13 日
    @edis0n0 输入一张图也可以有一定效果,但确实应该需要一些其他的补全技术
    jwenjian
        11
    jwenjian  
       2022 年 8 月 14 日
    https://sketch.metademolab.com/canvas , Meta 有一个让孩子的手绘小人动起来的实验项目, 是不是一个原理?
    Juszoe
        12
    Juszoe  
       2022 年 8 月 15 日
    b 站刷到过,很有趣的工作。但是需要一个和人物类似的 3D 模型,这个就没那么简单了,输入人物和模型也不一定刚好能匹配上
    tsutomu
        13
    tsutomu  
       2022 年 8 月 15 日
    直接导出模型就好
    hzwer
        14
    hzwer  
    OP
       2022 年 8 月 15 日
    @Juszoe 是的,不过我们试过匹配不上的情况,也没有崩得非常离谱
    总之是需要联合其它组件一起的,也需要工程师们继续来改进
    hzwer
        15
    hzwer  
    O
       2022 年 8 月 15 日
    @jwenjian 哇这个确实很有意思,我大概能感受到有很多共通之处
    lisongeee
        16
    lisongeee  
       2022 年 8 月 15 日
    有没有坤坤打篮球的动作?
    hzwer
        17
    hzwer  
    OP
       2022 年 8 月 15 日   1
    Youkochan0v0
        18
    Youkochan0v0  
       2022 年 8 月 16 日 via iPad
    @jwenjian 试了一下楼主和#11 的链接,蛮有趣的
    darkscope
        19
    darkscope  
       2022 年 8 月 17 日
    B 站先关注一波,之前看你发的补帧的也很赞;
    话说模型是直接生成视频吗,还是说一套贴图呢,我看需要 mesh 和动作序列
    明天看看论文~
    Rooney1
        20
    Rooney1  
       2022 年 8 月 21 日
    很棒的样子
    hzwer
        21
    hzwer  
    OP
       2022 年 8 月 22 日
    @darkscope 说起来挺复杂的,建议看我们 b 站解说
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3452 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 90ms UTC 00:19 PVG 08:19 LAX 17:19 JFK 20:19
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86