Vision-Agents 实时视频风格迁移指南【免费下载链接】Vision-AgentsOpen Vision Agents by Stream. Build voice and vision agents quickly with any model or video provider. Uses Streams edge network for ultra-low latency.项目地址: https://gitcode.com/GitHub_Trending/vi/Vision-AgentsVision-Agents 是 Stream 出品的开源视觉智能体框架内置实时视频风格迁移能力。你只需要几行代码就能把摄像头画面实时转换成任意艺术风格省去自己搭推理链路的工作。解决什么问题告别离线渲染做视频应用时风格转换通常意味着离线渲染。每一帧都要等模型算完延迟高还很难塞进视频通话、直播这类实时场景。如果你想在直播或视频通话里让观众看到动画风格的画面传统方案基本走不通。原理速览一个处理器搞定数据流核心组件是RestylingProcessor。数据流向很简单你的本地视频轨道输入经 WebSocket 发送到 Decart 的实时 API转换后的帧作为新的视频轨道发布出去。初始化只有几行processor decart.RestylingProcessor( initial_promptStudio Ghibli animation style, modelmirage_v2, )具体参数和模型选项可以查看 plugins/decart/ 下的源码了解。从零跑起来拉取依赖git clone https://gitcode.com/GitHub_Trending/vi/Vision-Agents uv sync注入密钥在项目根目录新建.env文件填入两类密钥DECART_API_KEYyour_decart_key STREAM_API_KEYyour_stream_key STREAM_API_SECRETyour_stream_secret启动实例agent Agent( edgegetstream.Edge(), agent_userUser(nameStyled AI), instructionsBe helpful, llmgemini.Realtime(), processors[processor], )Agent 会创建通话、加入频道并接管视频轨道风格化画面随即出现在通话里。进阶玩法让 LLM 实时换风格这是个小彩蛋把change_prompt注册成 LLM 的函数大模型就能根据对话内容主动切换视频风格。比如聊到暴风雨之夜画面会自动变成暗调氛围不需要你手动操作。llm.register_function(descriptionChange the video style) async def change_prompt(prompt: str) - str: await processor.update_prompt(prompt) return fStyle: {prompt}完整写法可参考 示例代码。适合谁用视频通话类应用想加实时风格滤镜直播内容制作需要持续输出的画面风格教学内容呈现让演示更生动游戏直播为画面增加特效氛围写在最后如果你想看一个完整的语音驱动换装 demo仓库里还有 虚拟换装示例把风格迁移和 LLM 语音指令串成了闭环。拿这个当起点改几句 instructions 就能跑出自己的版本。【免费下载链接】Vision-AgentsOpen Vision Agents by Stream. Build voice and vision agents quickly with any model or video provider. Uses Streams edge network for ultra-low latency.项目地址: https://gitcode.com/GitHub_Trending/vi/Vision-Agents创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考