刚刚,小云雀的短剧Agent上线了,背后是字节自己的Seedance 2.0。
声明:本文来自于微信公众号数字生命卡兹克,作者:数字生命卡兹克,授权站长之家转载发布。
就在刚刚,世界
它就是,字节家自己的产品,小云雀。
这一个月为了用Seedance2.0通宵达旦的朋友肯定都听说过这个名字。
因为现在主流几乎就三个用Seedance2.0的地方,都是字节自己的。
豆包、即梦、小云雀。
而这次,他们自己把基于Seedance2.0的AI短剧Agent给掏出来了。
我是一周前拿到的内测资格,刚体验了一天,我当时就立马跟小云雀的人说,一定要给我个首发。。。
真的,这玩意,做AI短剧,真的夯爆了,
特别是现在AI漫剧如此之火的情况下。。。
我们都知道,Seedance2.0,现在就是世界
但是呢,它就是模型,最长只能生成十五秒视频,而且每次生成视频都需要你重新贴参考,重新写提示词。
然后,小云雀的Agent来了,参考人物,分镜表,剪辑,这些东西,统统都不用了,你只需要给它一个剧本,甚至你可以只给它一个设定让它自己生成剧本,它就能给你全自动跑出来一整集质量贼高的短剧。
不是那种流水线级别的垃圾玩意,是真的质量很高的短剧。。。
口说无凭,这个Agent直出的短剧是怎么个水平,看一集你们就知道了。
我把我很喜欢的一个网文,追了N久,现在还每天催更的《我不是戏神》,改编成了短剧。
下面,就是它的
雨夜、大红戏袍的少年、啃饮水机的名场面,还有结尾那个漂亮的悬念钩子,如果他是阿伶,我们昨晚杀的是谁。
但是,哪怕你没看过戏神,这集短剧你肯定也是能看得进去的。
整段视频的声画效果,分镜切换,演员的表演,都能把人给拽进去。
尤其是结尾养父这个镜头,你跟我说这个是AI,exome?
当然了,单论视觉效果,Seedance2.0也一样强。
但速度就不好说了,也就,一集做个两三天吧。。。
而我刚刚的
我还做了第二集。
这一集里,人物一致性保持的也是非常的好。
让主角换个造型。
除此之外,我还做了主角陈伶初次觉醒能力的一集,还原了一下我一直在脑补的场面。
半天,一个人,4集,而且是用的Seedance2.0,直出未改。
做AI短剧的朋友肯定听的我我在说啥。
真的是,飞一样的感觉,前期的效率直接拉满起飞。
而且这玩意儿还不挑风格,啥它都能生成。
这是真人武侠风。
要打斗有打斗,要人情有人情。
这是19世纪的欧洲风格。
我直接把古早大男主爽文鼻祖《基督山伯爵》搬了上来,生成的效果也是毫不违和,有译制片那味儿了。
这是国漫3D风格。
我把鲁智深接济金翠莲父女这场戏还原了出来,每个人物都很生动。
我相信,看完这些我亲身跑的case,所有人都清楚,这个以Seedacne2.0为基地的AI短剧Agent,有多夯了。
小云雀网址在此:https://xyq.jianying.com
点进去之后,首页是这样的,Agent的入口就在下面那个红框框里。
点一下,你就进入了这个界面。
如上所示,现在Agent支持的输入方式有两种,一种是你直接给它一个完整剧本,它自己去拆。另一种是你跟它口述想要一个什么故事,让它给你从剧本到片子一口气生成。
在剧本出来之后,两者的路径是大差不差的,我就先拿AI生成剧本这个比较简单的方式给大家跑一遍流程。
然后,Agent就开始吭哧吭哧地干活了,生成剧本这个过程视难易程度而定,大概要花个三到五分钟。
等了一会儿之后,它给我端出来了这样一个剧本,名字叫,反派男主从书里爬出来了。
有一说一我输入设定的时候脑子里想的是刺杀小说家那样的剧情,不过它给我生成了一个奇幻甜宠剧本,就,也,行吧。。。
然后下一步,选择画风,画幅比例,按你自己需要的来就行。
再接下来,就是确定人物和场景了,它会自动给你生成人物和场景,这一步大概要花10分钟到20分钟。
等到全都生成完了之后,你可以点开每个角色和每个场景,挨个检查,如果需要重新生成,就可以点AI生成,直接改。
等人物和场景也都完事之后呢,就到分镜脚本了,挨个点击分镜脚本的按钮,它就会一集一集地给你生成。
等到一集分镜脚本干完之后,你就可以点进这一集,查看分镜脚本有没有问题,没问题的话,再点击下面每一场的生成按钮,就OK了。
等到下面这里,每一场的视频都生成完了之后,右上角这个合成全集的按钮也就亮起来了。
只要点一下,然后等个三两分钟,一集完整的短剧就做好了。
如果对单场的生成结果不满意,可以把鼠标移动到视频上,右下角会出来一个重复的标,点一下就可以重新生成。
最后,视频导出这一步,要返回到上一个界面,点击红框里的导出。
看起来步骤比较多,但是每一个交互都很顺畅,只要理解了点子-剧本-人物-分镜-分场生成的这个创作顺序,一切就非常简单了。
最后,这个一句话故事的成品长这样。
作为一个2d风格的漫剧,效果还是合格的,挺下饭的。。。
真正的AI影视工业化,在短剧和漫剧这一步,实现了。
到这里,少年,你已经完全掌握小云雀Agent的用法了。
但是,还没完,因为最重要的,其实是剧本咋写。
剧本剧本一剧之本,它决定了一个故事真正的
就比如,把1800多章的《我不是戏神》改编成剧本,这种活儿就不能直接交给AI来干。
但是,也不能直接交给人来干。
让一个没经历过专业训练的人坐下来码字,那种啥也憋不出来的感觉和便秘三天没有区别。
哪怕是经历过专业训练的人坐下来码字,如果遇到卡文,可能也和便秘三天没区别。。。
比如这时候我就要点名《我不是戏神》的作者三九音域了。
这哥们以前每天更新三张,所以还能称为三九,现在,每天都是二九,甚至有时候是一九,气死我了。
回到剧本,那我们剧本到底咋整呢,其实吧,如果你要做的不是《流浪地球》或者《暗黑》那种夯到爆炸的剧本,就是做一个大家能看的下去的,平均水平之上的,方法其实也有,就是人类的审美标准+AI的执行力。
先给AI一个真正的好剧本,让它参考,并总结规律,像这样。
等它总结完规律,再让它根据我的要求来写剧本,比如我给它一个设定让它来写,或者我把一个小说喂给它让它来改编。
最核心的其实还是,你得用一个写作牛逼的模型,我用的是Claude,大家懂得都懂。
我case里的剧本大部分都是这么来的。
而对于《我不是戏神》这种快两千章的长文来说,我还稍微多做了一步,就是,在出剧本之前,先出一个事件列表。
这么做的原因是,像这种特别长的网文有时候可能是会水文的,但人类能看出水文,AI不一定。到时候给你吭哧吭哧写了好几集水情节,你就只能抱着损失的token哭了。。。
这个很多漫改剧其实有时候改的不好,都会有这种情况。
而有了事件列表,就相当于AI知道了,只有这个列表上的东西才是主线,这样它才不会过于放飞自我。
出事件列表的逻辑和出剧本也是一样的,依然是给AI一个好的事件列表作参考,让它按照这个事件列表的格式把书拆出来。
至于事件列表哪来的,鄙人不才,年少时略干过一些编剧。而事件列表算是编剧的基本功之一,就是把一个故事的主线,以最干的语言讲清楚。
大概就是这么个东西。
这个事件列表出来之后,把剧本写法的MD文档,小说原本和事件列表都发给它,让它去跑。
最后再做一点点微调,出来的剧本就没什么大问题了,你就可以,把剧本直接喂给小云雀。
到这里,一切闭环。
不得不说,人类只出脑子,让AI来干码字、出分镜、剪辑,这种感觉真是太爽了。。。
当然了,还是要叠个甲,用这种方法跑出来的AI剧本,质量肯定和真正有生活阅历的老编剧所写的一点也没法比。对我来说,这还仅仅是AI影视工业化的阶段性实践。
这个阶段过后还有下一个阶段,Seedance2.0之后会有Seedance3.0,Agent也会变得更强,更高效。
时代的车轮,还将继续滚滚向前。
而当生成变得越来越高效,什么样的东西值得写,什么样的东西值得拍。
这将会成为我们人类在艺术创作道路上,面临的最重要的问题。
我想,答案是生活。
又要举出大刘的经典例子了。
回答来自知乎网友@吾牧之,历数了大刘几篇重要作品,分别是在怎样的情境下完成的。
你会看到,因为大刘身体不适,所以《乡村教师》里老师的濒死感写的异常真实。
因为大刘的身体状况每况愈下,所以他寄托于死后有灵,写出了《球状闪电》里美丽而富有哲理的句子:人的死亡过程是一个由强观察者变成弱观察者的过程,当我变成弱观察者,那会是量子玫瑰朝我微笑的时候。
《三体》更不用说了,恐惧、愤怒、对现实的无奈。。。
生活中一切的一切,都汇聚成了他的审美,他的文脉。
这也是AI不可替代的,也是我们最不可或缺的部分。
最后的最后希望大家都能从生活中找到不被AI替代的那一部分,也在AI视频的新时代,找到属于自己的一席之地。
然后,Light,camera,action,on.
祝大家,开机大吉。
