商汤Seko2.0来了!用AI做短剧,一次性做100集,爽翻了!

Hello啊朋友们,我是Simonlin,是你身边那个会用AI的朋友,为你带来AI好玩的用法,推荐好用的AI工具。

Seko,真的“不行了”?

今年各大AI都是卯足了劲儿迭代产品,主要方向就一个,那就是Agent。

所以有人说,今年是“Agent元年”。

用“三高”来总结一下今年AI公司们竞争的态势——高速度、高密度、高反转。

大家都拼了命的卷,卷不动就意味着被淘汰。

而前几天,我又收到了一个“卷王”更新的消息——商汤Seko。

你们还记得Seko嘛?之前我专门写过一篇这个产品的文章。

它刚发布的时候,我就有体验过,那种“一句话就能打通整个视频制作链路——配音、旁白、分镜、成片”的感觉,真的给我带来了很大的惊艳感。

时隔3个月, Seko给我们带来了2.0版本!

 

 

在我深度体验过之后,我觉得:这就是我入行做AI短剧的最好时机。

因为,它解决了一个AI短剧一直以来的最大痛点。

一、Seko2.0,到底是个啥?

说了半天,你可能会觉得:叽里咕噜地在说啥呢?

首先,Seko2.0,是一个“视频Agent”。

一个Agent,通常具备以下几点的特征:

目标驱动:只要设定好一个任务,它能自己进行拆解、执行流程,最后给出成品;

自主决策:判断任务优先级,自己决定什么时候该用什么工具;

多步骤推理:把一个复杂的任务拆成多个步骤,用推理链让整个过程变得更加具有逻辑性,也能更好地完成;

工具调用:好像AI“长了手”,可以像人一样,使用“外部工具”;

可持续运行:基于以上几点,Agent拥有长任务执行能力,用更多时间来完成任务,给出更令人满意的结果。

这些特征,体现在Seko2.0的身上,就是只要你说出需求,它就能先将你的想法变成一份清晰明了的大纲,等待你确认后,它会:

设计分镜剧本——生成基础的分镜图片——做成一段段的分镜视频——加上配音、旁白,字幕——最后交付成片。

从前需要一个剧组的工作人员来完成这件事,现在,它自己就能帮你搞定。

你不用会写脚本,不用会做分镜,不用懂剪辑....只要你会打字。

而且,它是真的能在一个项目里,直接产出整部短剧!

你可能会觉得,这么庞大的工作量,人物一致性肯定是很难保证的,说不定主角这一集的脸还是鹅蛋脸,下一集就变成国字脸了!

这,就是Seko2.0,我觉得最厉害的部分——超高的主体一致性!

不信?

来吧,展示!

二、案例实测

大家看完了嘛?

在这个视频里,我只对AI说了这么一句话:

 

🎉

漫剧,末世向,《末日求生,我疯狂囤货成主宰》,主角:林逆,性格:果断,坚定,前期由于好心帮助别人吃太多苦,后面变得警觉敏锐,但内心始终有一丝向善之心,围绕这个大纲开始创作@林逆(主体库调用)

具体的细节,全都是AI自己来操作的。

包括人物的设定,剧情的走向,场景的制作等等,我唯一做的,就是泡了杯茶,等着AI给我交付。

一般来说,3D动漫的风格比较不好控制,画风很容易出现不一致的情况,然而在这个case里,它保持地相当好,基本上从头至尾都是3D风格。

还有一个小细节,不懂你有没有注意到?

你应该看的出来,这两个其实是不同的分镜。

Image
Image

然而周围的景色,却几乎完全一致!

Image
Image

还有这两个货架。

在场景的一致性上,Seko2.0控制的相当不错。

还有,这是上一集剧集里出现的场景,视频我没放出来。

Image

在我放出来的这个视频里,几乎是完美地继承了上一集的场景。

如果我不说,谁知道,这样精细的操作,竟然是AI做出来的?

看完了这个case,屏幕前的朋友应该已经跃跃欲试,迫不及待想要上手做视频了吧?

现在,我们一步步来,从零到一,做出一段AI短剧。

三、三分钟上手Seko2.0

Seko2.0,怎么用?

让我手把手教会你!

首先,进入官网:

https://seko.sensetime.com/explore

如果你之前用过Seko,你会发现,他们的整个视觉风格作了很大的改动,UI更加美观了。

(左侧为改版前,右侧为Seko2.0)

Image
Image

然后,细心的你定睛一看,就能看到,这个变化主要体现在,界面里多了不少的功能入口。

从左侧四个开始讲起吧。

Image

从上到下,依次是:“首页”,“我的空间”,“主体库”,“数字人”

“首页”,就是我们进入官网最先看到的这个页面。

“我的空间”,用于存放我们在Seko里做过的项目,方便回顾和修改。

“主体库”,讲白了就是你片子里的“主角”。里面既有官方提供的公共主体,也有我们自己创建的主体,大家可以看看我之前写的Seko文章,就不过多赘述了~

讲一讲“数字人”的功能。

让我们从左侧第四个入口进去。

 

Image

它会要求你先上传一张图片,我这里选择了Simonlin的形象。

第一步:输入你要让数字人说的台词,实测英文中文可以混杂着说。

第二步:挑选合适的音色和情绪,有中文青年男性音色、中文青年女性音色、中文老年男性音色、中文老年女性音色、英文青年男性音色、英文青年女性音色等等,供我们选择,你也可以按照“性别、年龄、语言”进行筛选,还有朗读时候的情绪。

第三步:添加配音。

最后,在选择了画质之后,点击“生成视频”,就会出现给我们先预览的片段。

 

Image
Image

觉得没问题,直接点“导出”。

 

怎么样,效果还不错吧hhh~

让我们再回到首页。

我们来看到首页中间的输入框这里。

Image

左下角的几个功能,从左到右:

1、上传文件,支持上传不超过20MB大小的文件,文档格式有:pdf、docx、txt,你可以把写好的剧本传上去。

2、模型选择,也就是用来绘制分镜图片的模型。

这个阵容,是当真豪华。

文生图模型,有Seko自研的,有即梦4.0和3.0..

参考生图模型,这就更厉害了,不仅有即梦4.0,还有Flux,还有其他顶级模型。。。

 

Image

3、添加主体,调用之前我们提到过的主体库,这个圈起来,后面要考。

(主体库和画风互斥,选了主体,就不能选择画风!)

Image

4、添加画风,比如我们想不到要做什么风格的视频,就可以用官方提供给我们的这些作为参考,非常适合那种“试一试”的场景。

图片[15]-商汤Seko2.0来了!用AI做短剧,一次性做100集,爽翻了!-AI Express News

右侧,有一个开关,看到没?这是“多剧集”开关,如果你想一次性出一整套的AI短剧,这个开关是一定要开的,因为这涉及到人物一致性的秘密。

Image

先让Seko2.0帮咱做一个AI科普视频试试看,打开“多剧集”开关,输入要求。

Image

对了,官方给出了一个提示词结构的参考,大家可以抄一下作业~

如果你有一个灵感或者大纲:

创作提示词构成要素:
画风+主体+视频+场景+分镜
画风要求:写实、二次元、油画、赛博朋克
主体角色:人物、动物、物体+具体描述
视频要求:分镜数量/视频时长、是否添加台词及旁白
场景要求:教室、街头、咖啡馆、夜景……
分镜内容:核心故事内容
🏷视频要求建议填写分镜数量,一般12 个分镜≈1min,实际时长可在分镜编辑器中手动调整。
需求描述的越精确,大模型生成的效果越好噢

例如:
#画风要求#超写实风格
#角色要求#穿着工地搬砖的工装服饰,脸上身上都沾了灰尘。 以半身近景和特写镜头为主。
#视频要求#5个分镜,保持场景连贯性和一致性。
#场景要求#乱糟糟的建筑工地
#分镜内容#第一个分镜画面外伸进一只手拿着麦克风对着宝宝,配音:“宝贝你在这里做什么,你才出生几天呢”,后四个分镜婴儿为画面主体,手上拿着一个银色手持麦克风对着自己说话,婴儿台词分别是:“我太南了!”、“爸爸天天躺在沙发上刷抖音”、“妈妈要买美美的衣服和化妆品”、“家里只能靠我了!”

如果你有一个连续多集的创意灵感:

多剧集创作提示词构成要素:
集数+画风+剧情大纲
集数:填写剧本总集数
画风要求:写实、二次元、油画、赛博朋克
剧情大纲:核心故事内容

例如:
集数:20集 
画风:写实风 
剧情大纲:乔兮梦到前世苦恋七年却遭抛弃,梦醒后决定远离纪凌,后发现一直默默陪伴自己的是竹马陆驰,她逐渐对陆驰心动。暗恋乔兮多年的陆驰默默守护,最后终于等到了乔兮的回应。而纪凌一开始不相信乔兮会离开他,后知后觉发现乔兮放弃他后一直纠缠乔兮。乔兮与陆驰共同对抗种种困难,最终双向奔赴,走到一起,收获幸福。

输入提示词,点击生成后,AI就开始工作了。

先给我们列出了大纲,如果你满意就确认,不满意的话,在底下输入框直接提出要求,整个流程都将是可控的。

左边被我框住的部分,就是可以让你添加集数,AI会撰写剩下的大纲,非常适合一次性大批量的生产。

Image

这个说起来很不简单。

因为它是基于我们之前点了“多集数”按钮,然后在原先剧集基础上,再添加剧情,就保证剧情的连贯性,不会那么割裂了。

Image

换句话说,之前的剧情,会变成后续剧情的上下文。

对了,记得选择画面比例,也就是最终成品的比例,画风固定之后,AI会自动匹配合适的模型,不用我们自己选。

Image

留意这些被我框起来的部分。

Image

最下方,分镜一幕幕地躺在时间轨道上,如果你对哪个分镜不满意,直接在左边点修改,可以选择模型重新生成。

改好了,直接点应用,或者让AI多跑几张图,到你满意为止。

Image

还有一件事!

觉得时间轨道的样式太麻烦?想要预览还得手动拖动?

直接切换到“故事版视图”,所有分镜一目了然!

Image
Image

如果你觉得没问题了,选择“一键导出”,或者也可以只导出单个视频。

图片[25]-商汤Seko2.0来了!用AI做短剧,一次性做100集,爽翻了!-AI Express News

讲真的,这个故事版视图,一用就真的回不去了...谁能拒绝方便呢?

这个功能其实很多的平台都没有考虑到,因为它太细节了,但是Seko替我们想到了。

Seko啊,还是你有心机嗷(摩多摩多!

生成分镜视频的时长根据选择的模型而定。

预览视频里,有一个剪辑功能,有了它,就可以把你不想要的部分剪掉。

Image
Image

对了,记得开“字幕”!

相信大家都经历过看视频没字幕的痛苦。

Image

除此之外,分镜里的配音和音乐也都是能修改的,可以等改好了,再完成导出的操作。

这是真正地把决策权交给人,而AI嘛,只要做牛马该干的活就好了。

“导出”这里还有个玄机,你可以导出完整视频,就不能再修改了,直接是成品。

也可以分镜导出,方便后续再进行优化,或者跟其他AI的协同。

Image

看看成品。

如果你是跟着我的节奏来..恭喜你,这就完成了一个AI视频的创作~~~

那我们再试试看做第二集呢?

Image

它会问我们是否要参考上一集内容,这就是“多剧集资产的智能调度”,这样就能保证剧情是连贯的,而不是每一集都变断层。

这个逻辑,我很喜欢!

而且你看,不仅剧情是这样,上一集出现的人物,在第二集,同样会出现,保证了一致性。

丝滑...太丝滑了!

Image

所以有这样的特性在,连做一百集都不带崩!

Seko2.0,适合谁来用?

我尤其推荐这些朋友可以试试Seko2.0。

  • 需要稳定出片,但是又苦于没有好用工具的小白创作者,如果你不会剪辑,也不会写脚本,Seko2.0,就能够帮你代劳,你提供创意,AI帮你执行落地。

  • 老师们,想将枯燥的课堂变得生动有趣,气氛活跃,同样可以用Seko2.0试试看,学生肯定再也不会在课堂上打瞌睡,毕竟,有这么好看的教学视频,谁又愿意开小差呢?

  • 如果你是商家,想要做宣传片,电商视频,我也推荐你用Seko2.0来完成,特别是它的“主体库”,将你的产品设置为主体,就能实现稳定流畅的一体化视频制作,也可以用用我刚刚演示的数字人,帮你带货。

  • 自媒体从业者们,如果需要做爆款视频,这个就需要更精细化的操作,但是对于Seko2.0也不在话下,你可以跟AI讨论想法,无需耗费太大精力,就能让它帮你批量生成。

现在,我们可以用Seko2.0,将我们脑海中的想象通通变为现实。

进入官网: https://seko.sensetime.com/explore

输入我的邀请码,可以领100积分!

邀请连接:https://seko.sensetime.com/invite/U0JY4JGI

Image

在12月31日前,如果订阅会员的话,还能享受折扣:

月高级会员享65折优惠;

年高级会员享55折优惠;

购买积分享8折优惠;

那些压箱底的,天马行空的故事,就让Seko2.0来帮你完成吧。


感谢你看到这里。

如果你觉得这篇文章对你有些帮助,欢迎:

点赞、推荐、转发给有需要的人,

感谢不尽~

如果你用Seko2.0做出了好玩的短剧,欢迎来评论区分享交流呀~~~

我创建了一个AI交流群,平时跟大家一起聊聊天,发发福利,同步一些最新的AI资讯。

可以移步我的公众号后台,回复: “进群”,跟更多好朋友一起,聊一聊AI的那些事儿。

 

我是Simonlin,陪你一起玩AI。

下次见。

原文链接:https://mp.weixin.qq.com/s/7ZQOdZTRqw4DJOHDzrk_wg

© 版权声明
THE END
喜欢就支持一下吧
点赞14 分享
Simonlindjssj的头像-AI Express News
评论 抢沙发

请登录后发表评论

    暂无评论内容