作者| 史翔宇
编辑| 谭安妮塔
36氪获悉,AI长视频平台Clipfly(www.clipfly.ai)已正式上线。 Clipfly是Fotor旗下的新品,集成了AI视频生成、AI视频增强、视频编辑等多项功能,是全球首个正式发布的一站式AI长片视频平台。
Fotor是全球领先的AI图像产品,也是一个独立的AI图像编辑平台。 Fotor于2023年8月推出AI图像生成功能。此后,Fotor陆续发布了AI人像生成、AI漫画化、图像增强等多项AI功能。目前,Fotor 拥有1500 万月活跃用户(MAU)。
Fotor创始人兼CEO段江表示,Fotor在影像领域拥有深厚的经验,基于技术的多功能性和视频用户日益增长的需求,决定走AI视频方向。
人工智能视频生成仍处于起步阶段,人工智能工具无法互操作,制作过程对用户来说也很繁琐。 AI视频创作者首先使用Stable Diffusion和Midjourney等图形工具生成照片,然后使用Runway和Pika等视频生成工具从照片生成视频,最后需要在Premiere Pro和Premiere中编辑视频中的剪辑。编辑器,例如Pro。将屏幕剪切为完整的视频。
Fotor认识到这个问题并提出了独特的解决方案。 ——Clipfly的设计理念是提供一个集图像创作、图像创作视频、视频编辑等功能于一体的一站式AI视频平台,让用户可以完成从制作到制作的一切。从创意到完整的视频制作,您可以在一个平台上创作一切。
Clipfly 生成视频截图
在工作流程上,Clipfly首先根据提示词(Prompt)生成1到4张视频帧图像,然后根据这些图像生成约4秒的视频片段。生成足够的视频剪辑后,用户可以启动视频编辑器,添加字幕、音乐并编辑素材以创建完整的视频。
段江表示,对于某些应用场景,比如广告短片,创作者需要的不是单一镜头的视频,而是不断变化的多个场景片段。 Clipfly通过调整模型以满足创作者的体验来提高生成视频剪辑的采用率。 “Sora发布了一个一分钟的视频,但我们短期内无法生产出正式发布的产品,我们通过全流程平台解决了AI中长视频的问题,它提供了一个非常好的工具。 ”
Clipfly 将于2023 年6 月开始开发。段江表示,基于成熟的技术和产品特性,团队在开发过程中部分解决了角色一致性等问题。由于一站式AI视频平台的巨大需求,开发周期长达六个月。该团队从头开始构建了一个视频编辑器,并组装了不同类型的视觉模型。
Clipfly 生成视频截图
在技术实现上,Clipfly采用了Stable Difussion等开源模型,并进行了优化,实现了生成图形和视频的能力。同时,基于团队在图像处理领域的核心算法,实现了图像增强功能,以提高视频质量。一些团队已经采纳了AIGC的想法,特别是在图像增强领域。这涉及到对大量高质量图像进行训练,然后根据正在处理的图像重新生成新图像,这是相对耗时和资源密集的。 Clipfly基于经典图像处理和计算机视觉算法,可以在设备端实现更快的图像计算。
据36氪了解,Clipfly目前仍处于上线测试阶段,用户主要来自Fotor游戏。段江表示,“我们有工程能力、独特的算法创新、产品能力,这些结合起来就形成了现在的Clipfly产品。Clipfly是全球第一个正式发布的一站式产品,也是一个AI长视频平台。”
结尾
本文和图片来自网络,不代表火豚游戏立场,如若侵权请联系我们删除:https://www.huotun.com/game/663526.html