auto_convert_story.md

自动生成故事的中视频

背景前提：

1. 中视频有需求，类似5分钟看完电影xxx以及短视频的流行，说明故事类视频也有很强的需求。
2. 类似知乎盐选的文章很抓眼球，很适合作为视频的大纲素材。

可行性

1. 爬取高赞的知乎故事。（可手动）
2. 把故事总结成 人物、故事背景、风格。
3. 把故事分段，每段大概30秒的朗读时间。并把每段故事生成：

• 一个插画的描述
• 带 《朗读者》《语气》《语速》标签的文本

4. 用配音服务生成配音。
5. 用插画服务生成插画。
6. 讲配音、插画组成视频，使用随机方向运镜制造动态感。（可手动）

相似产品

1. 5分钟看完xxx电影的电影快剪。
2. 动漫快剪。
3. 小说阅读网站投放在短视频的广告，比如搜索番茄小说。

变现方式

1. 西瓜视频创作者计划，直接跟平台分成。
2. 倒卖电子书，我们只做电子书的前5分钟，后面挂个链接。5块钱一本。
3. 给小说网站引流。需要 BD

难点

1. 文生图的时候，多人场景难度较大。

• 直接把描述放到 midjouorney 里，往往只能生成一个任务的图片。文心一格也不行。
• 目前看下来 DallE-2 对中文描述的理解比较好，可以还原场景，但是图片不好看。
• 把 DallE-2 生成的图片作为图片 prompt 给 midjourney，还原出 prompt，然后再重新生成，细节会更细腻。或者作为图片 prompt 给 midjourney。