网通社科技快报

GitHub开源工具sweetyhanddrawvideo实现文章一键转手绘口播视频

GitHub上近期上线的开源项目sweety-handdraw-video由开发者threerocks发布,旨在解决技术文档、教学材料等内容向视频转化的效率与质量难题。该工具采用本地化全流程设计,从文本理解、脚本撰写、分镜生成到插画绘制、逐笔描线填色、配音对齐与视频合成,全部在用户本地完成,避免云端API成本与隐私风险。项目核心包含四大模块:主调度模块sweety-handdraw-video、含21种预设风格的画风库hand-drawn-styles、时间驱动动画引擎huashu-art-motion,以及含六款手臂动作预设的资源目录assets。AI Agent负责内容理解与分镜策划,不直接生成视频帧,确保画面逻辑清晰且具解释性;渲染环节由Python调用Pillow、NumPy等库处理图像,并通过无头Chromium+FFmpeg合成MP4视频,支持元数据导出与片段级重渲染。时间轴按128 BPM节拍网格划分,使画面节奏自然匹配语音,增强“呼吸感”。测试显示,16GB内存+中端GPU笔记本可在数分钟内完成5分钟视频初版渲染。项目当前获638星标、117次Fork,语言为JavaScript与Python,文档完备,支持社区贡献新风格与动作预设。未来有望集成开源TTS模型进一步降低门槛,为工程师、教师等非专业创作者提供轻量但专业的手绘视频生产路径。