Narrato AI：基于 LLM 的自动化剪辑&影视解说一站式创作平台

作者

在当今数字内容创作的时代，视频制作的需求日益增长，而Narrato AI以其独特的技术和功能，为创作者们带来了全新的创作体验。它凭借自动化的内容生成、剪辑以及配音等功能，在视频创作领域展现出巨大的潜力。

一、NarratoAI概述

NarratoAI 是一个自动化影视解说工具，基于LLM实现文案撰写、自动化视频剪辑、配音和字幕生成的一站式流程，助力高效内容创作。Narrato AI 致力于打造一个集成化、智能化的短视频创作平台，帮助创作者们提升创作效率、降低创作成本，并实现内容的个性化与多样化。通过提供自动化的内容生成、剪辑、配音等功能，使创作者能够更加专注于创意表达，创作出具有竞争力的短视频作品。

二、核心功能

1、自动化文案撰写

Narrato AI借助先进的大型语言模型（LLM）技术，深入分析视频内容。它能够从海量的语料库中提取信息，生成既符合主题又富有创意的解说文案。

例如，当处理一部旅游视频时，它可以根据视频中的场景、地点、人物等元素，生成生动且具有吸引力的解说内容，为创作者节省大量的时间和精力。这种能力不仅提高了创作效率，还确保了文案的质量和独特性。

2、自动剪辑与配音

该工具根据解说文案和视频内容自动规划剪辑方案。它对视频进行裁剪、拼接和过渡处理，使得视频片段与语音解说完美匹配。同时，Narrato AI运用先进的语音合成技术，为视频生成自然流畅的配音。在制作过程中，它能够根据视频的情感氛围和节奏，调整配音的语调、语速，使配音更加生动、富有感染力。

3、自动生成字幕

Narrato AI能够实时识别视频中的语音内容，并快速生成准确无误的字幕。它利用自然语言处理技术，将语音转化为文字，并根据视频的时间轴进行同步显示。这一功能大大提高了视频的可读性，方便观众理解视频内容，尤其对于那些需要跨越语言障碍的视频来说，字幕的生成显得尤为重要。

三、技术特点

1、集成先进AI大模型

Narrato AI集成了如Gemini等先进的AI大模型。这些模型经过大量数据的训练和优化，能够准确理解视频内容，并生成高质量的解说文案。它们在处理复杂的语言任务时表现出色，能够根据视频的主题和风格进行灵活调整，为用户提供多样化的创作选择。

2、一站式解决方案

Narrato AI为视频制作提供了一站式的解决方案。从文案撰写、剪辑、配音到字幕生成，整个过程都可以在一个平台上完成。这种集成化的方式不仅简化了创作流程，还提高了创作效率。创作者无需在多个工具之间切换，节省了时间和精力，同时也减少了因不同工具之间兼容性问题而带来的风险。

3、高效创作能力

通过实际案例和数据可以看出，Narrato AI在帮助创作者高效完成视频制作方面表现出色。它能够快速处理大量的视频素材，生成高质量的解说和剪辑内容。对于批量生产影视内容的创作者来说，这种高效的创作能力尤为重要。它可以在短时间内完成多个视频的制作，满足市场需求。

四、本地部署应用

Narrato AI 是一款集成大模型的一站式自动化影视解说工具，以下是快速开始使用的步骤：

1、申请 Google AI Studio 账号

  • 访问 https://aistudio.google.com/app/prompts/new_chat 申请帐户。

  • 单击 Get API Key （获取API密钥） 以请求API密钥。

  • 将获取的API Key输入到config.example.toml 文件的 gemini_api_key 设置中。

2、配置代理 VPN

配置 VPN 的方法不限，只要能访问 Google 网络即可。以clash为例，

  • 请注意碰撞服务的端口，通常为 http://127.0.0.1:7890。

  • 如果端口不是7890，请将docker-compose.yml 文件中的 VPN_PROXY_URL 修改为你的代理地址。环境设置如下：

- "VPN_PROXY_URL=http://host.docker.internal:7890" # 改为你的代理端口；host.docker.internal 代表物理机的 IP。

  • （可选）也可修改config.example.toml文件中的proxy设置，格式如下：

[proxy]#使用代理访问 Pexels API#格式："http://<用户名>:<密码>@<代理>:<端口>"#示例："http://user:pass@proxy:1234"#文档：https://requests.readthedocs.io/en/latest/user/advanced/#proxieshttp = "http://xx.xx.xx.xx:7890"https = "http://xx.xx.xx.xx:7890"

3、安装部署NarratoAI 

1.克隆项目并启动Docker 

执行命令`git clone https://github.com/linyqh/NarratoAI.git`克隆项目。

进入 NarratoAI 目录，执行`cd NarratoAI`。

执行`docker-compose up`启动 Docker。

2.访问Web界面 

打开浏览器，访问http://127.0.0.1:8501。

3.访问API文档 

打开浏览器，访问http://127.0.0.1:8080/docs或http://127.0.0.1:8080/redoc。

五、操作步骤详解

1、基本配置

选择模型，输入API Key并选择模型；目前仅支持Gemini模型，未来更新将添加其他模式

2、生成视频脚本

选择要解说的视频并点击生成视频脚本平台包：含一个演示视频。若使用自己的视频，可将 mp4 文件放置在resource/videos目录中，并刷新浏览器。注意：文件名可以是任意的，但不能包含中文字符、特殊字符、空格、反斜杠等。

3、保存脚本并开始编辑 

保存脚本后，刷新浏览器，新生成的xxx.json脚本文件将出现在脚本文件下拉列表中。选择 json 文件和视频开始编辑。

4、查看视频

如果有不符合规则的片段，点击重新生成或手动编辑。

5、配置基本视频参数 

如设置每个组合片段的最大剪辑时长（秒）、同时生成的视频数量等。

6、开始生成视频 

点击Generate Video按钮生成视频

六、应用场景

1、影视解说：在影视解说领域，Narrato AI可以为电影、电视剧等影视作品提供自动化解说服务。它能够根据影片的情节、角色和主题，生成富有感染力的解说文案，并与视频画面进行完美匹配。这不仅提高了影视解说的质量和效率，还为观众带来了更好的观看体验。

2、短视频制作：对于短视频创作者来说，Narrato AI可以帮助他们快速制作高质量的短视频内容。它能够根据视频的主题和风格，生成吸引人的解说文案，并进行剪辑和配音。通过这种方式，创作者可以在短时间内完成多个短视频的制作，满足市场需求。

3、教育培训：在教育领域，Narrato AI可以帮助学生和教师更好地理解和分析视频内容。它可以生成解说文案和字幕，帮助学生学习知识。同时，它还可以根据学生的学习进度和需求，提供个性化的学习建议。

4、企业宣传：企业可以利用Narrato AI制作宣传视频，提高品牌知名度和影响力。它能够根据企业的产品特点和宣传需求，生成专业的解说文案和剪辑方案，为企业打造高质量的宣传视频。

七、总结与展望

Narrato AI凭借其独特的技术和功能，为视频创作带来了新的机遇和挑战。它在自动化文案撰写、剪辑、配音以及字幕生成等方面表现出色，为创作者提供了高效、便捷的创作工具。未来，随着技术的不断发展，Narrato AI有望进一步优化模型性能，拓展应用场景，为视频创作领域带来更多的创新和发展。

项目地址：https://github.com/linyqh/NarratoAI

（文：小兵的AI视界）

欢迎分享

发表评论