专注AIGC领域的专业社区,关注微软&OpenAI、百度文心一言、讯飞星火等大语言模型(LLM)的发展和应用落地,聚焦LLM的市场研究和AIGC开发者生态,欢迎关注!
全球多媒体巨头Adobe发布了全新生成式AI应用Adobe
Firefly,为创意产业带来革命性体验。
Firefly不仅集成了图像、矢量图形生成功能,还首次推出了处于公测试阶段的视频生成模型,标志着文生视频模型进入商业化阶段。
Firefly应用功能非常丰富,涵盖多个模块,文生视频功能是其中的核心模块之一,基于 Firefly 视频模型,能帮助创意专业人士强大的视频创作能力。从简单的文本提示或图像出发,他们可以生成高质量的 1080p 视频片段。
例如,输入文本提示 “宁静的森林中,阳光透过树叶洒下”,就能生成相应的视频画面,并且支持通过调整相机角度控制镜头,实现从戏剧性的特写镜头到广阔的远景镜头切换,为视频增添丰富的视觉效果。
Firefly 功能展示
用户还能添加大气元素,如雾气、光影等,营造独特氛围,开发自定义运动设计元素,使视频更具个性。在分辨率方面,初期支持 1080p,后续还将推出用于高速迭代的低分辨率构思模型和适用于专业级制作的 4K 模型。
多模态工作流程是 Firefly的另外一大特色,能将视频、图像和矢量图形生成整合在一个应用内,帮助用户实现无缝衔接构思与创作。
例如,可以先生成图像,再将其转化为视频;也能快速将音频翻译成多种语言,还能通过编写文本提示,精确控制视频风格和相机角度,创作符合预期的视频片段。
同时Firefly 与 Adobe全家桶包括Photoshop、Premiere Pro 和 Adobe Express等实现深度集成,方便用户在不同工具间切换,将创意从构思阶段推进到制作阶段,实现创作流程的无缝对接。
Scene
to Image功能,可以直接构建结构参考,使用直观的 3D 工具创建精确的视觉指南。通过调整 3D 图像的角度和视角,创作者能获得理想的输出效果,从 3D 形状中无缝渲染出适用于制作的资产,满足专业图形设计工作流程对灵活性和精确性的要求。
Translate
Audio和Translate
Video功能则专注于语言翻译。能将口语对话翻译成多种语言,且在翻译过程中保持原声的语音、语调、节奏和声学特征,确保翻译后的内容自然真实。该功能支持超过 20 种语言的翻译,帮助创作者快速将视频和音频文件翻译成不同语言,节省了大量配音和音频混合的时间与成本。
为满足不同用户需求,Adobe推出了两款新套餐Firefly Standard 和 Firefly Pro。Firefly Standard 套餐每月提供 2000 个视频 / 音频积分,支持每月最多20次5秒1080p 视频生成,起售价为 9.99 美元;
Firefly Pro套餐则每月提供7000 个视频/音频积分,每月最多可生成70次5秒1080p视频,起售价29.99美元。
目前,Deloitte Digital、dentsu、IBM、IPG Health、Mattel、PepsiCo、Stagwell 和Tapestry等全球知名企业已经在实际业务中使用Firefly。
dentsu创意部门的全球创意技术官 James Thomas 表示,Firefly 以创作者为中心的 AI 应用方式,极大地提升了我们的创意流程。我们的创意团队在测试过程中积极反馈,助力优化产品路线图,为客户构建专属解决方案和定制工作流程。从概念验证到故事板制作,Firefly 在确保商业安全性的同时,加速了创意开发进程。
(文:AIGC开放社区)