爱诗科技PixVerse接入OpenAI模型 用户覆盖177个国家

11 月 3 日消息,据量子位报道,爱诗科技旗下模型和开放平台 PixVerse 与 OpenAI 宣布开启深度合作,双方完成一系列产品集成,并首次共同推出从提示词到成片的创作者教育计划,通过线上研讨会和系列视频,帮助海外个人创作者和团队把创意构想转化为可落地的内容。

视频生成变成可调用的接口

在首场线上研讨会中,OpenAI 应用 AI 工程师 Tyler Ryu 与 PixVerse 北美市场营销负责人演示了如何把 OpenAI 的前沿模型、智能体能力与 PixVerse 的多模态生成工具放进同一条工作流。借助 PixVerse 插件、PixVerse CLI 和 Codex 集成,PixVerse 的视频生成能力已被封装成 Agent 可以直接调用的接口。Agent 无需打开平台界面,就能自主完成理解任务背景、生成创意简报、拆解分镜脚本、调用 PixVerse 插件生成视频的整条链路。

PixVerse 美国市场营销负责人表示,从操作网页到原生连接,视频生成正在变成 Agent 调用的能力,而不只是用户访问的网站平台,PixVerse 要成为人和 AI 智能体的创作基础设施。

用自然语言做角色动画

Tyler Ryu 在演示中说明了自己的实操思路,AI 能把事情做到八成到九成,最后一步仍需要专业视频模型来完成。他的动画制作案例里,先调用 PixVerse 插件根据角色图片生成角色走路的参考视频,再让 Codex 做技术处理把动作套用到游戏角色上,最后用自然语言反复微调直至成片。整个过程不需要动捕工作室和动画软件,也没有离开过 Codex。他给出的画面一致性经验是把角色和场景参考图放进项目文件夹,并明确要求 Codex 生成前先查看。

生态规模

爱诗科技成立于 2023 年,自研 PixVerse 系列模型涵盖 V 系列通用视频模型、C 系列影视垂直模型和 R 系列通用实时世界模型。目前 PixVerse 与内地市场的拍我 AI 应用及开放平台已覆盖全球 177 个国家和地区,累计注册用户超 1.7 亿。今年 7 月公司完成 C 轮融资,累计金额近 30 亿元人民币,投资方包括鼎晖投资、阿里巴巴、蓝色光标等十余家机构。

AI 智能体对专业创作工具的调用能力,可以对照 Adobe EditAgent 600 次盲评实测。那项测试里智能体在图像编辑任务上有 42.7% 拿不出可用结果,视频生成侧目前的接入路径更依赖人工挑选环节的分工。