5bei.cn大模型教程网
自 24 年 H2 开始，AI 视频行业以周为单位高速发展，GenLumio 是我从 24 年开始 0-1 规划-设计-开发的 AI 视频项目，旨在为大家带来每周最新鲜的 AI 视频优秀作品、产品动向。
我计划通过这个系列的文章选取新鲜产品动向、优质作品案例为大家介绍。
往期速读：
Runway Gen-4
沉寂了大半年差点被大家忘记的 Runway 终于发布了新模型 Gen-4，看了很多国外博主测评在处理复杂动作和镜头超过了 Kling 1.6。除了电影镜头、写实风格外，这次 Gen-4 也注重了动漫风格的支持，此外前阵子推出的首帧风格化也获得了不错的传播效果。
Runway 首席执行官 Cristóbal Valenzuela 的作品体现了 Gen-4 在相机围绕物体和位置连续移动的能力，配合着唯美音乐让人感受到镜头叙事的魅力，这里放了 2 个案例，更多视频可以访问 GenLumio 筛选 Tools – Runway 查看。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
Kling 2.0
就当我以为这俩月国产 AI 视频要集体哑火时，Kling 发布了最新模型，功能上对 Pika labs 进行了全面致敬。
看官方联动博主发布的效果非常好，2.0 非常擅长表现大幅度运动和镜头切换的画面，但同时大幅度运动模糊、瑕疵多缺点也更容易暴露，这可能会带来抽卡次数的提升。
2.0 目前的定价非常贵，58 块钱的月费会员只能抽 6 次卡，还不如冲 Runway 的 Gen-4 试试，对大部分初级玩家太不友好。受限于价格，这次没有获得广泛的创作者测试和传播。
这里是创作者 Alex Patrascu 对 Gen-4、Kling2.0、Veo 2 的测试结果，这三个模型各有特色：
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
Vidu Q1
Vidu 刚发布了 Q 系列模型，默认支持 1080P，时长升至 5s，画质细节提升，支持首尾帧、音效叠加、升级动漫风格效果，新用户有 3 次免费使用机会。
Pika 玩法更新
Pika 这个月动作不断，模型能力比不了只能靠花活来维持声量了，只要不下牌桌就还有希望。首尾帧视频从 10s 升级至 25s（业内唯一一个），即 Pikadditions 又接连推出 Pikaswaps、Pika Twists 功能，Pikaffects 也更新了不少模版，创作者们基于此开发了很多有趣的视频。
此前在文章中介绍过首尾帧的玩法，通常可以用于连贯的镜头转换，延时摄影、植物动物生长等，下方视频中的换装效果也很不错。
Pika Twists 可以通过文本改变视频中的一部分内容，并保持其余部分不变。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
Pikaswaps 通过上传原视频和一张元素图片的方式，替换掉视频中的任意内容，可以用来换装、换发色。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
Pikadditions 通过上传原视频和一张元素图片的方式，将元素添加到整个视频中。
Luma
Luma 近期在 Ray2 模型上发力了 Motion、Angle 功能，增加的高速机械臂镜头、全景相机和空中无人机视角挺有意思。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
案例来自 Christopher Fryant
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
高速机械臂镜头案例 by Rory Flynn
海外作者很多都使用 Luma 创作动漫风格，Luma 目前单个视频 0.5 刀，对比物美价廉的国产替代还是很难下得去手。
介绍完了老牌产品更新，来看看新产品的动向吧，说实话 AI 视频生成这么卷的赛道还有新产品出来着实想不到。
Higgsfield AI
Higgsfield AI 的联合创始人兼 CEO Alex Mashrabov 曾是 Snap 的生成式 AI 负责人，领导开发了 Snapchat 的 AR 滤镜、Cameos 功能以及 MyAI 聊天机器人等产品。他与联合创始人 Yerzat Dulat（生成式视频领域的 AI 研究员）共同创立了 Higgsfield AI。
该产品的特点是提供了超过 50 种预设镜头动作，如“子弹时间”、“超级推拉镜头”等，增强视频的电影感，使用时支持混合多个镜头效果。访问地址： https://higgsfield.ai/
Magicanimator
Lottielab 是一家初创公司，24 年底推出了 Web 编辑器支持设计师能够轻松创建、编辑和导出 Lottie 动画。近期他们加入了 AI 视频的战场，首发 demo 是一段以苹果 UI 组件为灵感生成的流畅过渡动画，同时支持 logo、icon、社交媒体帖子动画生成。现在该产品开放预约了，申请地址： https://magicanimator.com/
在其他 AI 视频产品在卷专业电影创作、社交媒体玩梗方向时，聚焦设计这个垂直行业，也是个不错的选择。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
创意转绘
非常喜欢的一位创作者 enigmatic_e 又整了新活，不过这次的工作流和此前差不太多，使用了 Viggle、AnimateDiff 转绘实现的效果，这里是他的详细制作过程：
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
makeitrad 的这个 AI 转绘项目非常厉害，整个作品工作流非常完整且富有创意。
视频中的基础角色由前期手绘完成，然后通过训练风格 Lora 进行更多视频素材的生成；街道中的建筑使用 AI 生图，图生 3D 模型并在 3D 软件中搭建出来；而动态部分则通过人工绘制关键帧动画，使用 ComfyUI 中的风格参考转绘动画。视频中分享了完整的创作思路，看完只能说一句，太强了！
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
以上这两个案例都是需要一些 3D 基础才能完成的，那如果不会建模，也不太会使用 3D 软件怎么办？博主 Ray (movie arc) 的帖子给我提供了另一条思路，通过 MJ 生图 – 3D 产品生成粗糙模型，装配预设动作，最后通过 three.js 加载预览。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
创意广告片
来自 Rufus Blackwell 团队的真实商业广告作品，融合了 AI 视频生成和部分实拍，AI 为团队节约了大量特效时间。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
动漫风格
动漫风格的优秀作品越来越多了。上一期介绍过 Veo2 是我看到过最棒的 T2V 产品，现在也支持了 I2V，但目前还在测试期没有对大众开放。有消息说会在 5 月正式发布，每天看到海外创作者的测评都心痒痒。
最近 RŌHKI团队花费了数月制作的这个单集作品质量非常高，全集使用Runway、Luma 和Veo2制作，音乐也是精心制作过的。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
视频中多处使用了 Veo2 制作了高质量镜头，对人物的一致性和提示词的遵循能力达到了完全不同的高度。
作者分享了一些 Veo2 提示词例如：
“走到镜头前，用红色记号笔涂鸦写上‘ROHKI’，另外作者提到“cool quick sketchy VFX camera cuts” and “multiple abstract camera angles”也会出现惊喜效果
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
最近我使用 Google 的 Whisk 和 MJ V7 进行了生图测试，就发现 Google 家的产品对提示词的理解能力极强，即使是输入超长文本也能在画面上反馈所有提到的细节。这一点上 MJ 完全不是对手，我对 Veo2 的开放使用已经迫不及待了。
海外创作者使用 Luma Ray2 和 Vidu 在动漫创作上的案例不断增加，其中 Vidu 的图片参考功能被创作者们用来做角色参考和攻法（角色对应的技能）参考。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
案例来自 ai_ani_alchemist
创作者 Bird / AI art and Music 用 Luma 生成的两个片段，太帅了，第二个视频应该是用了延长。
.video_pc {
width: 100%;
height: 585px;
}
.video_pc + p {display:none;}
@media (max-width:767px) {
.video_pc {
height: 50vw;
}
}
GenLumio 网站的新内容正在设计中，新功能是面向主流 AI 视频产品的参数对比，近期我也开始了新一轮模型的集中测评，记录下最近一段时间的结论：
Hailuo、Vidu 目前仍为用户提供每日积分，如果有少量使用需求的同学可以选用。
我在 Hailuo 海外版本注册了新账号，获得了 1000 积分（但是限制 3 天内用完）。整体感受 Hailuo 半年前的 I2V live 模型确实对于动漫风格微动画支持不错，但 Luma 和 Vidu 也是强有力的竞争者。另外 Hailuo 对于主体物和环境之间的交互、细节的一致性遵循的不太好，还没有达到 Wan 2.1 给我留下的印象。目前 Hailuo 模型在整个市场上除了价格，并不具备优势，只能等新模型发布了。
Vidu 是当下所有产品中生成速度最快的。另外 Vidu 对动漫、写实风格的支持都非常稳定，是一款不怎么出错的模型。单视频价格在一种国产产品中也具备绝对优势。
研究了 Pika2.0、2.2 和 Kling1.5、1.6 的生成积分消耗规则，发现旧模型消耗的积分比新模型更低，这和 Pixverse 是相反的，这可能和模型的升级、定价策略有关系。
文章来源于互联网:AI视频资讯早读！7个产品更新+8个案例精选
相关推荐: Stable Diffusion 3 震撼发布，采用Sora同源技术，文字终于不乱码了
Stable Diffusion 3 和 Sora 一样采用了 diffusion transformer 架构。 继 OpenAI 的 Sora 连续一周霸屏后，昨晚，生成式 AI 顶级技术公司 Stability AI 也放了一个大招 ——Stable D…
