⭐⭐⭐ Spring Boot 项目实战 ⭐⭐⭐ Spring Cloud 项目实战
《Dubbo 实现原理与源码解析 —— 精品合集》 《Netty 实现原理与源码解析 —— 精品合集》
《Spring 实现原理与源码解析 —— 精品合集》 《MyBatis 实现原理与源码解析 —— 精品合集》
《Spring MVC 实现原理与源码解析 —— 精品合集》 《数据库实体设计合集》
《Spring Boot 实现原理与源码解析 —— 精品合集》 《Java 面试题 + Java 学习指南》

摘要: 原创出处 http://www.iocoder.cn/Fight/shangmei-seedance-storyboard/ 「芋道源码」欢迎转载,保留摘要,谢谢!


🙂🙂🙂关注微信公众号:【芋道源码】有福利:

  1. RocketMQ / MyCAT / Sharding-JDBC 所有源码分析文章列表
  2. RocketMQ / MyCAT / Sharding-JDBC 中文注释源码 GitHub 地址
  3. 您对于源码的疑问每条留言都将得到认真回复。甚至不知道如何读源码也可以请教噢。
  4. 新的源码解析文章实时收到通知。每周更新一篇左右。
  5. 认真的源码交流微信群。

GitHub 上有个项目叫 smy-seedance-storyboard,本身是一个 Skill。你给它一个故事,它还你一套做短剧用的文档,剧本、出图提示词、分镜提示词都在里面,拿到手就能用。风格只有一种,上美影。

上美影风格短剧制作示意

上美影就是上海美术电影制片厂,《大闹天宫》《九色鹿》《葫芦兄弟》都出自那里。它的辨识度很高,线条带手工感,颜色是大片平涂的矿物颜料色,造型概括。这个项目要解决的就一件事,让 AI 老老实实画出这个味道,别跑偏。

《葫芦兄弟》剧照,剪纸风的参照对象

作者是 liangdabiao,之前做过 Seedance2-Storyboard-Generator,在 GitHub 上有两千六百多 Star,算是比较早把「小说转多集视频」这套流程跑通的人。这次的 smy-seedance-storyboard 目前一百多 Star,八月下旬建库,最近一次提交就在这几天。

liangdabiao/smy-seedance-storyboard 仓库首页

体量不大,但方向比上一个项目收得更窄,只做上美影这一种味道。

一个故事,五份能直接用的文档

跟它说一句「帮我做一个武松打虎的上美影短剧,5 集」,它会依次给你五样东西。

  • 剧本,按 5 集、每集 15 秒拆好,带说书人旁白、台词、字幕卡点
  • 色盘,这部剧专用的颜色清单,比如朱砂红、鎏金、墨黑、青瓷绿
  • 素材清单,角色、场景、道具的出图提示词
  • 每集分镜,按时间轴格式写好的提示词,整段复制就能去出片
  • 尾帧说明,写清每集最后一帧停在哪,给下一集接上

它交付的剧本正文

这些内容全部是中文,拿去中文平台直接用,不用翻译。要用 Midjourney 的话,素材清单里另留了英文对照版。

剧本按四幕写,旁白用的是说书人口吻。古典题材很吃这套,武松打虎、夸父逐日这类故事,旁白一出来味儿就有了。每集开头还会先把这一集的情绪定下来,后面分镜里的运镜、音效、色调都跟着走。

素材清单里的编号是固定的一套,角色排 C01 到 C99,场景排 S01 到 S99,道具排 P01 到 P99。分镜提示词按 0 到 3 秒、3 到 6 秒这样切成五段,每段写清景别、运镜和动作,末尾附上音效与配乐设计,再用 @图片 的写法把素材挂上去。这一套格式是照着 Seedance 的输入习惯定的,整段贴进去就能用。

每集分镜里的时间轴提示词

每集末尾的尾帧描述

三层机关,把画风钉住

玩 AI 生图的人大概都碰过这种情况,明明说了要上美影风格,出来的东西油画味很重,颜色糊在一起,阴影渐变一大堆,跟记忆里的大闹天宫差得远。

它对付这件事的办法一共三层,作者在说明里只写了一句话,都别改。

第一层,每条提示词的开头都粘同一段风格关键词,里面写死了复古手绘动画、传统矿物颜料纯平涂色块、带手工感的不完美笔触这几项。

第二层,提示词结尾加两句狠命令,必须纯 2D 平涂,绝对不要阴影、不要渐变、不要 3D 体积感,必须大面积留白。作者标注过,这是实测踩坑才总结出来的,少这两句,AI 很容易渲染成油画感的假上美影。

第三层,一部剧只用一个色盘,所有提示词逐字引用同一串颜色名,跨集不跑色。

风格关键词其实备了三份。给生图模型用的是中文完整版,配 Midjourney 这类英文模型有一份语义完全一致的英文对照版,另外还有一份精简版,专门贴在分镜提示词的第一行。仓库文档里特意标了一句,生图配方与视频配方分开维护,别互相套用,因为视频端写绝对化的不要阴影不要渐变反而容易出问题。

仓库常见问题里给的排查方法

真翻车了也有说法。图里带了 3D 感或者阴影渐变,先看结尾那两句狠命令还在不在,有时候是复制的时候手滑删了。还在的话就再补一组负面词,不要阴影、不要渐变、不要 3D 渲染、不要体积光、不要写实照片。

从装到出片,三步走完

安装没什么门槛,把仓库克隆下来,丢进 Claude Code 的 skills 目录就行。其他支持 Skill 机制的 agent 也能用,把仓库地址给它让它自己装。

装好之后 Skill 已经就位

作者拿聊斋里聂小倩和宁采臣那段试了一集,先做 15 秒,把流程跑顺看看。

第一步,把要求说清楚。它会反过来问你几件事,集数、画幅、基调,不想答就说都用默认。

它交付之前先跟你确认几个参数

第二步,生成三张资产图。这一步作者改用豆包出图,原来的 Skill 写的是即梦,他觉得各家出这类图的效果差距不大。

三张资产图落在项目目录里

第三步,出片。作者用的是 Seedance 2.5,工具其实不限,WorkBuddy、Codex 或者其他能调用视频模型的地方都行。

一集 15 秒的成片画面

每集分镜的最后会附一段尾帧说明,告诉下一集,上一集的画面停在哪。想做第二集,把这条视频传上去,提示词开头写「将@视频1延长」,它就从那个尾帧接着往下生成,中间不用自己剪。作者这次只做了一集,这个功能没用到,先记在这。

四种子风格,一部剧只用一种

默认是手绘平涂这条主线,想换点名就行,不过一部剧只能用一种。

  • 石蓝淡墨绘本,石蓝加淡墨,疏离怪谈的绘本感,带一点怪色点缀
  • 水墨淡彩,淡雅写意,大量留白,参照《小蝌蚪找妈妈》
  • 剪纸风,分层剪影,对称纹样,参照《葫芦兄弟》
  • 敦煌重彩,壁画矿物色,飘带飞天,参照《九色鹿》

《九色鹿》剧照,敦煌重彩的参照对象

《葫芦兄弟》海报,剪纸风的参照对象

仓库里放了两个完整的示例项目,「鲁智深醉闹五台山」和「罗刹市奇幻故事」。前者是醉闹喜剧,把打斗的慢速夸张和动静对比写得很细;后者走敦煌重彩,颜色清单里能直接看到青瓷绿、朱砂红、鎏金、墨黑、石青、藤黄这一串是怎么定的。剧本、素材清单、分镜、使用指南四件套都齐,不想从零开始的照着抄就行。

除了这两套成品,仓库里还有七份细则手册,风格指南、平台手册、剧本质量标准、故事改编模板、分镜优化公式、配音与音效指南各一份,另有一份最早那批实测提示词留着溯源。项目最早发在 linux.do 社区。

平台给的上限,和几个黑箱

有几个坑提前说一下。

先说素材上限。项目文档里给的口径是图片最多 9 张,视频和音频各最多 3 个、各自总时长不超过 15 秒,加起来不超过 12 个文件。角色多一点的故事很容易撞上限,所以得提前想好哪些素材真要出镜。

集数上倒是没什么压力。每集固定 15 秒,故事紧凑的话 5 集就是 75 秒,想讲完整一点,10 到 20 集也撑得住。

然后是敏感词,这个是个黑箱。之前有作者分享过,「江湖人士」这种平平无奇的词都会导致生成失败,平台还不告诉你是哪个词触发的,只回一句内容不合规,只能一段一段二分排查。

再一个,提示词写长了模型会漏指令。大概三四百字以后,某个时段的运镜可能没按你写的来,或者某个角色在那几秒里不见了,只能重新生成碰运气。

最后是视频没法局部改。15 秒里哪三秒不满意,没法单独修那一段,只能整段重跑。

这几条算不上项目的毛病,平台现在就是这个水平,换别的工具一样要面对。

它没多做,反而好上手

作者对这个项目的评价是,它什么都没多做。没有界面,也没堆功能,就是把风格锁定、色盘、分镜格式、集间衔接这几个最容易翻车的地方,一个一个写成文档模板,让 AI 照着填,上手特别简单。

就这么一个简单的 Skill,能复刻出童年风格的动画,真不错。

有两点得说清楚。这个仓库没有声明开源许可证,用之前最好先跟作者确认;它也不适合拿来做真人写实的片子,上美影这套风格本身就是为动画准备的。

仓库在 https://github.com/liangdabiao/smy-seedance-storyboard

文章目录
  1. 1. 一个故事,五份能直接用的文档
  2. 2. 三层机关,把画风钉住
  3. 3. 从装到出片,三步走完
  4. 4. 四种子风格,一部剧只用一种
  5. 5. 平台给的上限,和几个黑箱
  6. 6. 它没多做,反而好上手