PixVerse 是爱诗科技旗下AI视频生成平台,由前字节跳动AI Lab视觉技术负责人王长虎于2023年4月创立。爱诗科技致力于“多模态视频大模型”与“世界模型”的研发,已成为多模态大模型行业独角兽。截至2026年3月,PixVerse全球用户规模超过1亿,月活跃用户超过1600万。

从版本谱系来看,PixVerse已发展出以下主要版本线:
1.x系列(奠基阶段) :PixVerse V1(2024年第一季度),成为全球首个能生成4K画质视频的AI模型。同期推出全球首个Character2Video(人物一致性)模型,通过在扩散模型生成过程中对ID进行精准约束,确保视频中的人物形象与背景保持高度一致。
2.x系列(DiT架构落地) :PixVerse V2(2024年7月),成为国内首家落地应用DiT架构的创业公司,在清晰度、一致性、物理规律和指令跟随等方面取得显著进步。
3.x系列(特效破圈) :PixVerse V3(2024年10月),上线无须提示词的特效模板功能,“毒液变身”玩法风靡全球,在TikTok等社交平台累计播放量达数十亿次,多次登顶美国、德国、巴西等国家的应用商店榜单。
4.x系列(有声视频与电影级控制) :PixVerse V4(2025年2月),实现5秒快速生成视频并上线移动App,月活跃用户突破千万,标志AI视频生成迈入“有声AI视频2.0”时代。V4.5(2025年5月),引入20余种电影级镜头控制、多图融合和复杂动作优化,支持4K高清视频,国内版“拍我AI”于2025年6月6日正式上线。
5.x系列(准实时与导演级叙事) :PixVerse V5(2025年8月27日),基于准实时生成能力,全面优化动态效果、超清视觉处理、一致性保持和指令遵循等核心环节,同步上线Agent创作助手。V5.5(2025年12月2日),国内首个支持“多镜头+音画同步一键直出”的AI视频大模型,实现从“镜头生成”向“讲故事”的进化。V5.6(2026年2月),在Artificial Analysis全球AI视频模型榜单的图生视频与文生视频两大核心赛道均位列全球第2位。
6.x系列(精准控制与原生艺术表现) :PixVerse V6(2026年4月),定位“精准控制与原生艺术表现”,支持多镜头叙事和音画同步。同期发布首个影视行业大模型PixVerse C1,支持文生、图生、参考生、首尾帧生成能力,最高支持15秒1080P视频。
世界模型系列(实时交互) :PixVerse R1(2026年1月),全球首个支持1080P分辨率的通用实时世界模型,用户可通过自然语言指令实时改变视频画面,实现从“视频观看”到“视频交互”的体验转变。
第二部分:各版本详细对比与拆解
一、核心版本代际对比
维度 V4.5 V5 V5.5 V5.6 V6
发布时间 2025年5月 2025年8月 2025年12月 2026年2月 2026年4月
最高分辨率 4K 1080P 1080P 1080P 1080P
最长时长 20秒 30秒 10秒 10秒 15秒
音画同步 不支持 不支持 支持(原生) 支持(增强) 支持
多镜头叙事 不支持 不支持 支持(自动分镜) 支持 支持
运镜控制 20+电影级镜头 基础 智能自动 智能自动 精准控制
多图融合 支持(最多8张) 不支持 不支持 不支持 支持
Agent助手 不支持 支持 支持 支持 支持
核心定位 电影级运镜 准实时生成 导演级叙事 音画一致性 精准控制
V4.5的核心突破在于专业运镜系统,集成20余种电影镜头模板(如希区柯克变焦和一镜到底等),支持用户调节焦距变化速度(0.1-10倍速)和镜头抖动幅度(0-5级模拟斯坦尼康效果)。多模态融合技术支持最多8张图片输入,通过SE(3)等变网络实现多图像空间关系解算,自动生成包含起承转合的20秒完整片段。优化复杂动作方面,通过对抗训练优化动作流畅度,相比V4.0提升约30%,减少了扭曲与伪影。
V5的核心突破在于准实时生成能力。视频生成速度从“分钟级”提升至“秒级”,通过极致的技术蒸馏,最快5秒即可生成一段360p高质量短片,1分钟便能生成1080P高清视频。V5还通过扩展美学数据和人类偏好拟合(RLHF)提升了复杂人物运动、光影真实感的还原能力,利用“统一特征空间”技术有效解决了“AI听不懂人话”的难题。
V5.5是PixVerse系列中具有里程碑意义的版本。它是国内首款支持“多镜头+音画同步一键直出”的AI视频大模型。与以往只能产出单镜头或零散画面的大模型不同,V5.5可以生成具备叙事结构的短片,甚至接近“成片”质量的视频。V5.5首次支持音频与多镜头同步生成,AI能够根据用户输入的提示词自动理解并生成完整的故事段落。用户可以在提示词中直接控制“音效、台词、音色、音乐、镜头”,AI能自动理解叙事意图,自动设计推拉、摇移、切换、景别变化等镜头语言。
V5.6在音画一致性上进一步升级,多个角色对话场景中的音画同步和情感一致性得到提升,复杂动态场景中的视觉清晰度和稳定性增强,音频真实感与音画对齐进一步优化。
V6定位“精准控制与原生艺术表现”,是当前PixVerse系列中控制能力最强的版本,支持多镜头叙事和音画同步,在运镜和画面控制上实现了更高精度的参数化操作。
二、V5.5 核心能力拆解
V5.5的技术架构采用Diffusion与Transformer混合架构,在效率与质量之间取得了平衡。
多镜头自动叙事:V5.5最核心的能力是AI具备“导演思维”。用户只需输入一个简短的提示,AI就能自动完成镜头推进、景别切换、人物对白、环境声和背景音乐的生成,直接呈现一个可被使用的叙事片段。AI的运镜节奏更自然,紧贴真实制作逻辑,带给用户“成为导演”般的创作体验。
音画同步生成:V5.5成为国内首个可以在一次生成中实现“分镜+声音”的AI视频生成大模型。画面生成的同时,人物对白、口型、表情、动作、环境声和背景音乐被自动融合,呈现出自然协调的多角色互动。创作者无需再额外调参或上传音频,便能生成近乎“直出成片”的高质量视频。
提示词精准控制:用户可以在提示词中直接控制“音效、台词、音色、音乐、镜头”五个维度,AI能自动理解提示词中的叙事意图并设计相应的镜头语言。
三、V6 与 C1 的差异化定位
V6是PixVerse通用模型系列的最新版本,定位“精准控制与原生艺术表现”。它在V5.5的多镜头叙事基础上,进一步提升了运镜和画面控制的精确度,使创作者能够对生成过程进行更细粒度的参数化调节。
PixVerse C1是爱诗科技首个影视行业大模型,于2026年4月8日正式发布。C1支持文生、图生、参考生、首尾帧生成能力,最高支持15秒1080P视频,音画同步出片,并正式上线PixVerse Web端及API平台。C1与V6形成互补:V6面向通用创作场景,C1面向影视工业级制作场景。
四、世界模型 R1 的技术突破
PixVerse R1于2026年1月发布,是全球首个支持1080P分辨率的通用实时世界模型。R1的核心能力在于“实时交互”——用户可以通过自然语言指令实时改变视频画面内容,实现从“视频观看”到“视频交互”的体验转变。这一能力使PixVerse从“视频生成工具”升级为“可交互世界引擎”,为游戏、数字人直播、具身智能仿真等场景提供了全新的技术路径。
第三部分:为什么分这么多版本?
一、场景适配:从短视频创作到影视工业化的分层覆盖
PixVerse的版本分化遵循一条清晰的“能力-场景-交付”演进路径。V1管从0到1的技术验证,V2管DiT架构落地,V3管特效破圈和用户增长,V4管有声视频和移动端普及,V4.5管电影级运镜和多图融合,V5管准实时生成和效率提升,V5.5管导演级多镜头叙事和音画同步,V5.6管音画一致性优化,V6管精准控制和原生艺术表现,C1管影视工业级交付,R1管实时交互和世界模型。
这一分层的核心价值在于场景精度的匹配。短视频创作者使用V3的特效模板即可快速产出爆款内容;广告团队需要电影级运镜时使用V4.5;短剧创作者需要多镜头叙事和音画同步时使用V5.5;影视制作团队需要工业级交付标准时使用C1;游戏和数字人场景需要实时交互时使用R1。不需要更换技术栈,只需要根据场景选择对应版本。
二、技术路线跃迁:从DiT到音画同步再到世界模型
PixVerse的技术路线经历了三次明确跃迁。V1到V4阶段基于扩散模型和DiT架构,逐步提升生成质量和控制能力。V5.5引入音画同步和多镜头自动叙事,实现了从“生成画面”到“生成故事”的质变——AI不再只是产出素材,而是能够理解叙事意图并自动组织镜头语言。R1则彻底转向世界模型范式——不是“生成一段视频”,而是“持续生成一个可交互的世界”。
爱诗科技创始人王长虎曾指出,AI视频正在成为继AI Coding之后第二个跑通大规模商业化的AI赛道。从V5.5的“导演级叙事”到R1的“实时世界”,PixVerse的版本演进反映了团队对AI视频商业化路径的判断:从“帮用户做视频”到“帮用户做导演”再到“让用户进入世界”。
三、商业化与资本化驱动
PixVerse版本分化的另一驱动力来自商业化的需求。2026年7月,爱诗科技宣布完成整体C轮融资,本轮累计融资29.8亿元人民币,将主要用于视频生成基础模型、实时世界模型、全球化产品增长和产业场景落地。本轮融资由阿里巴巴领投,达晨财智、深创投、北京市人工智能产业投资基金、湖南电广、巨人网络等参与。
爱诗科技已与芒果传媒等内容与产业伙伴达成战略合作,围绕AI视频在短剧、动画、综艺视觉、宣传物料、互动影游、多语言传播等方向开展探索。同时与阿里巴巴、巨人集团、中国儒意、蓝色光标、三七互娱等产业伙伴在全栈AI能力、视频大模型技术研究与行业应用等方向建立合作。
四、从“工具”到“生态”的战略升维
PixVerse的版本分化最终指向一个战略目标:构建从视频生成、导演级叙事、精准控制到实时世界模型的完整内容创作基础设施。V4.5管运镜,V5管效率,V5.5管叙事,V6管控制,C1管影视交付,R1管交互世界。这一组合使PixVerse不仅能生成视频,还能生成带有叙事结构、同步音效和可交互性的完整内容体验,覆盖影视制作、广告营销、短剧创作、游戏互动、教育培训等全场景。
第四部分:最著名版本——PixVerse V5.5 API 接入实战
PixVerse V5.5是系列中具有里程碑意义的版本,支持多镜头自动叙事、音画同步一键直出和提示词精准控制,是国内首款支持“多镜头+音画同步一键直出”的AI视频大模型。以下为完整的API接入步骤。
步骤一:环境准备与API密钥获取
前置条件:
阿里云账号(PixVerse API通过阿里云百炼平台提供服务)
已开通阿里云百炼服务
Python 3.8+ 开发环境
开通流程:
登录阿里云百炼控制台
搜索“PixVerse”,找到PixVerse模型卡片,点击“立即开通”
在弹窗中确认激活和授权
在API密钥管理页面获取API Key
步骤二:安装依赖环境
bash
python3 -m venv pixverse_env
source pixverse_env/bin/activate
pip install requests
步骤三:基础文生视频调用
PixVerse API采用异步调用模式,整个流程为“创建任务→轮询结果”两步:
python
import requests
import time
import os
API_KEY = os.environ["DASHSCOPE_API_KEY"]
WORKSPACE_ID = "your-workspace-id"
# 创建文生视频任务
response = requests.post(
f"https://{WORKSPACE_ID}.cn-beijing.maas.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis",
headers={
"X-DashScope-Async": "enable",
"Authorization": f"Bearer {API_KEY}",
"Content-Type": "application/json"
},
json={
"model": "pixverse/pixverse-v5.6-t2v",
"input": {
"prompt": "电影级画面:一只白鹤在晨雾中的湖面上缓缓起飞,"
"羽毛细节清晰,光影柔和,镜头缓慢拉远展现湖光山色"
},
"parameters": {
"size": "1280*720",
"duration": 5,
"watermark": True
}
}
)
task_id = response.json()["output"]["task_id"]
print(f"任务已创建:{task_id}")
步骤四:多镜头叙事与音画同步
V5.5的核心能力是多镜头自动叙事和音画同步生成,用户可在提示词中直接控制“音效、台词、音色、音乐、镜头”:
python
# 多镜头音画同步生成
response = requests.post(
f"https://{WORKSPACE_ID}.cn-beijing.maas.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis",
headers={
"X-DashScope-Async": "enable",
"Authorization": f"Bearer {API_KEY}",
"Content-Type": "application/json"
},
json={
"model": "pixverse/pixverse-v5.6-t2v",
"input": {
"prompt": "镜头1:雨夜都市,霓虹灯闪烁,一个穿黑色风衣的男人走在街头。"
"镜头2:他推开一扇玻璃门,进入一家咖啡馆,背景音乐转为温暖的爵士。"
"镜头3:他坐下来,对面是一个微笑的女人。"
"音效:雨声、脚步声、咖啡馆环境音。台词:'你等了很久吗?'"
},
"parameters": {
"size": "1920*1080",
"duration": 10,
"watermark": True,
"multi_shot": True,
"audio_sync": True
}
}
)
task_id = response.json()["output"]["task_id"]
步骤五:图生视频与首尾帧控制
PixVerse支持图生视频、首尾帧生成和参考生视频:
python
# 图生视频
response = requests.post(
f"https://{WORKSPACE_ID}.cn-beijing.maas.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis",
headers={
"X-DashScope-Async": "enable",
"Authorization": f"Bearer {API_KEY}",
"Content-Type": "application/json"
},
json={
"model": "pixverse/pixverse-v5.6-i2v",
"input": {
"prompt": "人物缓缓转头微笑,镜头缓慢推进",
"image_url": "https://example.com/first_frame.png"
},
"parameters": {
"size": "1920*1080",
"duration": 5
}
}
)
步骤六:查询任务状态与获取结果
python
while True:
status_response = requests.get(
f"https://{WORKSPACE_ID}.cn-beijing.maas.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis/{task_id}",
headers={"Authorization": f"Bearer {API_KEY}"}
)
status = status_response.json()["output"]["task_status"]
if status == "SUCCEEDED":
video_url = status_response.json()["output"]["video_url"]
print(f"视频生成成功:{video_url}")
break
elif status == "FAILED":
print("视频生成失败")
break
time.sleep(5) # 建议每3-5秒轮询一次
步骤七:监控与成本优化
关键指标监控:
分辨率:360p / 540p / 720p / 1080p可选
时长:V5.5支持5秒、8秒、10秒
多镜头模式:启用后自动进行镜头切换和叙事组织
音画同步:启用后自动生成对白、音效和背景音乐
降本策略:对快速原型使用360p/540p分辨率;对标准输出使用720p;对高质量交付使用1080p。V5.5的10秒多镜头音画同步视频适合短剧和广告场景,一次性生成完整叙事片段,避免多次单镜头生成再拼接。
第五部分:不同版本的实践成果
案例一:FIRST青年电影展AI先导片制作(基于PixVerse V5.5)
2026年是FIRST青年电影展20周年,PixVerse·拍我AI作为FIRST电影市场的首席合作伙伴,在影展期间设立了“PixVerse FIRST SET·AI影像实验室”露天POP-UP,举办了AI影像工坊。在FIRST电影市场公开的15个创投会年度入围项目中,PixVerse择选了3个具备奇幻特质的电影剧本,在PixLab影像内容实验室中为剧组媒合了3组能力突出的AI创作者,在一个月内制作出3支AI先导片,用于剧组在FIRST电影创投会上的Pitch。
实践成效:以《看见你》为例,这部长片设定是一个高概念爱情电影——城市里不断有人“消失”变成常人看不见的怪物。导演关天此前已是多个电影节展创投的常客,团队曾花仅有的钱拍了一条概念片,但受成本限制效果离理想太远。这次看到AI先导片时,他和制片人感觉“心里稳了一半”。不到两分钟的AI先导片用核心概念的视觉奇观“抓住”了评委——如常下班的男主在地铁里和妻子通话,随着地铁过站一暗一亮,灯箱上的儿童眼睛逐渐变成一片漆黑,怪物出现。这一案例代表了AI视频生成在青年导演创投扶持场景中的独特价值——让还没拍出来的电影先被看见。
案例二:AI短片《休夫》17分钟历史非虚构叙事(基于PixVerse V5系列)
由拍我AI·PixLab影像内容实验室出品,3人核心团队、制作3个月、3万元算力成本,用AI把历史上著名的“妃告皇”离婚案做成了一支近17分钟的AI短片《休夫》。短片聚焦晚清末代皇妃文绣从选秀入宫到决意离婚并重获自由的三阶段人生,画面质感细腻近似真人,服化道、色调影调、台词口吻等均达到了接近实拍的水准。
实践成效:导演小笼包并非科班出身,她系统查阅了《我的前半生》《末代皇妃·文绣传》等史料,用3个月时间完成了这支非虚构历史短片。这一案例的核心价值在于验证了AI视频生成在历史题材非虚构叙事场景中的可行性——3人团队、3万元成本就能完成一部17分钟的接近实拍水准的历史短片,这在传统影视制作中几乎不可能。正如FIRST专访中所言,“AI对我们这种电影小团队最大的意义就在于:它让我们能够以承担得起的方式去和别人竞争”。
案例三:AI互动影游《Zero Mark》等三款作品(基于PixVerse R1世界模型)
爱诗科技旗下的PixLab影像内容实验室邀请小笼包、Jade和也毛三位PixVerse签约AI超创及团队,分别共创了《Zero Mark》《畸变回声》《月之战》3款AI互动影游。基于PixVerse R1的实时世界模型能力,这些互动影游让用户可以通过自然语言指令实时改变视频画面内容,实现从“观看视频”到“进入世界”的体验转变。
实践成效:《Zero Mark》展现了实时世界模型在互动娱乐中的潜力——用户不再是被动观看者,而是可以通过自然语言指令实时改变画面内容、影响故事走向的“参与者”。PixVerse R1是全球首个支持1080P分辨率的通用实时世界模型,这一能力为互动影游、虚拟陪伴、AI游戏等场景开辟了全新的产品形态。这一案例代表了PixVerse从“视频生成工具”向“可交互世界引擎”的战略升维。
案例四:巴西创作者毒液变身特效(基于PixVerse V3)
来自巴西的创作者@nerdsoul使用PixVerse V3的“毒液变身”特效,实现了经典角色老龄化特效,视频播放量破2.1亿,两月涨粉30万,获巴西国家级电视台专题报道。用户上传人、动物甚至水果的照片,即可一键将其变身为毒液造型,生成的毒液变身视频效果丝滑,黑色黏稠物质仿佛有生命般在物体表面流动。
实践成效:这一案例代表了PixVerse在社交媒体病毒式传播场景中的独特价值。V3的特效模板功能降低了创作门槛——用户无需编写提示词,上传照片即可生成爆款视频。“毒液变身”在TikTok等平台累计播放量达数十亿次,多次登顶美国、德国、巴西等国家的应用商店榜单。这一模式使PixVerse从“专业创作工具”扩展为“大众创意平台”,验证了低门槛特效模板在社交媒体时代的巨大传播潜力。
版权声明:本平台仅提供信息存储空间服务,用户发布内容不代表本站观点,交易风险自担;侵权违法内容请立即举报(邮箱:37996619@qq.com),本站接通知后先行屏蔽,责任由发布者承担。