aifollow.news
Back 量子位 AI 报道
量子位 AI 报道· · Original publication time AI score47

PixVerse and OpenAI complete product integrations and launch a creator education programMachine translation

PixVerse 与 OpenAI 完成产品集成,推出创作者教育计划

AI-assisted summary

AIsphere’s PixVerse and OpenAI announced a series of product integrations and a joint “Prompt to Production” education program for individual creators and teams overseas. The PixVerse plugin is now integrated with ChatGPT and Codex, enabling users to request video, image and audio production with text instructions. The program uses online workshops and a video series.

Article · Original

The article text is unavailable in this language; an existing version is shown.

近日,爱诗科技(AIsphere)旗下模型和开放平台PixVerse 与 OpenAI 宣布开启深度合作

近日, 爱诗科技(AIsphere)旗下模型和开放平台PixVerse 与 OpenAI 宣布开启深度合作,双方完成了一系列产品集成并首次共同推出“从提示词到成片”(Prompt to Production)教育计划 。通过线上研讨会和系列视频,该计划将帮助海外个人创作者和团队将创意构想更高效地转化为可落地的内容。

在首场线上研讨会中,OpenAI应用AI工程师Tyler Ryu、PixVerse北美市场营销负责人演示了如何在工作流中结合使用 OpenAI 的前沿模型、Agent(智能体)能力与 PixVerse 的多模态生成工具,来自PixVerse 社区的专业创作者也分享了实战经验。 未来,PixVerse 与 OpenAI 将继续围绕创作全流程深化合作,让更多创作者能够从容驾驭 AI 工具,把精力真正还给创作本身。

深度产品集成合作,打通策划、生成、制作三大环节

当下,越来越多创作者希望借助 AI 分担日常工作,把时间真正留给创作本身。顺应这一趋势,PixVerse与 OpenAI 持续推进合作:开放平台持续接入 OpenAI 前沿模型,同时,双方近期还完成了一系列深度产品集成。

(图:Codex PixVerse 官方插件)

PixVerse 插件 : PixVerse 官方插件( PixVerse ChatGPT Plugin) 现已原生接入 ChatGPT 与 Codex,借助 PixVerse 的制作规范与质量审核体系,用户可一站式完成视频、图像、音频的端到端生产。也就是说, 现在你可以直接把想要制作的视频素材发给 ChatGPT,你只需描述要求,PixVerse 插件就会帮你完成制作 。

PixVerse CLI : 让 Codex 变身 AI 内容工作室,视频、图像、音频生成集中调用,还能搭建可复用的标准化流程,满足大规模内容创作的需求。

Canvas 支持 :PixVerse 为插件新增了对 Canvas(AI 视频项目工作台)的支持。用户可以在 Canvas 中管理、打磨创意素材,生成并对比多个结果,确认满意后直接转入制作与交付。

借助这套组合,无论是创作者还是导演,都可以在同一套工作流中从脚本创意一路走到最终成片,省去策划与制作之间的反复交接。

视频生成正在变成 agent 可调用的能力

通过上述PixVerse 插件、PixVerse CLI、Codex集成,PixVerse的视频生成能力已被封装成Agent 可以直接调用的接口。因此,Agent 无需打开平台界面即可自主完成理解任务背景 、生成创意简报、 拆解分镜脚本、调用 PixVerse 插件生成视频这一整条链路。 PixVerse美国市场营销负责人在介绍时表示:“从操作网页到原生连接,视频生成正在变成 Agent 调用的能力,而不只是用户访问的网站平台,PixVerse 要成为人和 AI agent 的创作基础设施。”

在研讨会中,OpenAI应用AI工程师Tyler Ryu分享了自己使用这套产品集成的实操思路和体会,“ AI能把事情做到 80% 到 90%,最后一步仍需要专业视频模型来完成 ”。在其演示的动画制作案例中,他先调用PixVerse 插件,根据角色图片生成角色走路的参考视频,即用视频模型产出动作素材;再让 Codex 做技术处理,把动作套用到游戏角色上,即把素材落地到实际资产上;最后再用自然语言反复微调直至成片,而不是手动调参数。整个过程既不需要动捕工作室,也不需要动画软件,他也没有离开过 Codex,无需在多个软件之间来回切换、导出导入。也就是说, 原本依赖专业设备和软件的角色动画制作,现在已经被压缩成了在 Codex 里用自然语言就能走完的流程 。

(图:在Codex中调用PixVerse 插件,根据角色图片生成角色走路的参考视频)

此外,对于保持画面一致性这个普遍痛点,Tyler也介绍了自己的经验:“把角色和场景的参考图都放进项目文件夹,并明确要求 Codex 生成前先查看,这样它就能记住场景布局和细节。”来自PixVerse 社区的超级创作者代表也带来了各自的心得。印度尼西亚的创作者 Hidayat 认为,参考图要少而准:“正面、背面、侧面各一张参考图,加一张脸部特写,不需要把头、手、身体都画得很细,这对人物、物体、场景都适用。”另一位创作者 Aldo 则强调了制作顺序的重要性:“先做参考图,再做分镜,最后出视频,这样每个镜头里的脸和造型都保持一致。分镜阶段就能发现问题并修改,成本远低于重做视频。”

PixVerse美国市场营销负责人表示, 本次研讨会相关内容将会被剪辑成系列视频课程陆续上线,方便不同阶段的创作者按需观看、循序渐进 。未来,PixVerse 将与 OpenAI 继续围绕创作全流程深化合作,共同推动 AI 创意工作流的标准化与普及,让更多创作者以更低的门槛、更高的效率,把创意变成作品。

关于爱诗科技

爱诗科技成立于 2023 年,是全球领先的 AI 视频大模型公司,专注于多模态视频大模型与实时世界模型的研发与应用。公司长期围绕视频生成底座模型保持高频迭代,持续提升模型在画质表现、一致性、泛化性、可控生成等关键维度的能力。自研 PixVerse 系列视频大模型涵盖 V 系列通用视频模型、C 系列影视垂直模型和 R 系列通用实时世界模型,整体能力稳居行业第一梯队。目前,公司旗下 PixVerse 与内地市场的“拍我AI”APP 及开放平台已覆盖全球 177 个国家和地区,累计注册用户超 1.7 亿。今年 7 月,公司完成 C 轮融资,累计金额近 30 亿元人民币,投资方包括鼎晖投资、阿里巴巴、Lollapalooza Capital(王慧文家办)、常春藤资本、惠远资本、钟鼎资本、韩国未来资产、OCBC 生态下 Lion X 基金、蓝色光标、CloudAlpha、iGlobe Partners 等十余家国内外机构。

海外用户可点击下方链接了解更多PixVerse CLI & Skills

https://app.pixverse.ai/cli/gpt-astra/griffith-observatory

本文由爱诗科技提供,量子位获授权转载,观点归原作者所有。

Found an error? Send a correction

Contents