动态

开源的AI故事转手绘视频工具

开源的AI故事转手绘视频工具
宝玉
RT @GeekCatX: 兄弟们,上周预告的“故事转手绘视频”Skill,今天正式开源了。

给它一段中文故事,它就能自动变成一支会从黑白慢慢长出颜色的手绘日记动画。

你可以直接输入中文故事文案,也可以上传一组按顺序排列的本地图片。

剩下的事情,它会自动完成:

把故事拆成分镜;

保留原文措辞和叙事节奏;

为每个画面配上手写体字幕;

让画面从黑白线稿逐渐上色;

最后输出方便继续配音和剪辑的静音MP4。

为了避免自动分镜把故事切得太碎,我专门调整了拆分逻辑。

默认一个完整句子对应一个节拍,只有遇到自然的动作或叙事转折,才会拆开较长的复合句。

如果你已经准备好了漫画页或手绘图片,也可以直接上传。

它会自动识别并拆分页面中的手写文字和插画,在本地生成与彩色插画对齐的黑白底稿,再制作成动画。

目前支持两种转场:

第一种是直接切换。

按照“文字→黑白线稿→彩色插画”的顺序,从左向右逐渐揭示。

第二种是翻页转场。

保留原始页面,从右下角卷起翻页,做出真正的手绘日记翻书感。

我还专门处理了一个很容易翻车的问题:

画面裁切。

所有插画都会被限制在白色安全边框内,只使用完整收纳的构图方式,不会为了铺满屏幕,把人物、文字或关键细节直接裁掉。

最终输出3:4竖屏静音画面轨:

正式版1080×1440;

预览版720×960。

很适合拿来制作童年回忆、人物故事、成长经历、情感叙事,以及其他需要温度感的中文故事视频。

底层使用Image2生成分镜,再通过Remotion完成动画与渲染。

项目已经完整开源:

https://t.co/zOu9O1SU16

觉得有用,可以顺手点个Star。

如果你在使用中发现问题,或者做出了新的动画效果,也欢迎提Issue、交PR,一起把它继续完善。
动态宝玉2026-07-22原文

相关内容