Convai Unity SDK

为 Unity 训练模拟、交互式体验和游戏添加实时 AI 角色——具备语音、情感、动作和持久记忆。

Convai Unity SDK 将 Unity 项目连接到 Convai，把对话式 AI 带入训练模拟、互动体验和游戏中。角色可实时处理语音，以自然语言回应，并同步唇部动作、面部表情和身体动画——所有这些都可按项目进行配置。每个功能都是一个独立模块：只添加项目所需的部分，并按照适合你工作流程的顺序进行。

刚接触 SDK？ 跟随 入门 用于安装软件包、配置 API 密钥并运行你的第一个 AI 角色。

了解 SDK

概览 SDK 是什么、其结构如何，以及何时使用各个模块。

兼容性与要求 Unity 版本、渲染管线、平台支持和网络要求。

核心概念 会话生命周期、轮流发言模式以及 SDK 事件系统。

AI 编码助手 Unity MCP 集成，可让 AI 编码代理根据提示构建 Convai 场景。

功能

每个功能都是一个你可选择启用的独立模块。

动作 角色执行由 Convai 下发的结构化场景内命令。

情绪 将 Convai 的情绪信号映射到面部 BlendShape 或 Animator 参数。

长期记忆 角色会在不同会话中记住每位玩家。

视觉 角色可通过 Unity 摄像机、网络摄像头或 Meta Quest 透视模式进行观察。

动态上下文 可随时将运行时状态和事件注入角色知识中。

叙事设计 与对话流程相关联的基于触发器的剧情段推进。

场景元数据 角色会自动读取有关场景对象的上下文信息。

实用工具

完全在 Unity 内运行的辅助模块——无需与 Convai 通信。

对话动画 四层 Animator 栈，在说话时驱动身体和头部动作。

注视与注意力 将眼睛和头部的注视混合指向关注目标和对话对象。

参考与指南

界面与展示 转录界面、字幕模式、通知系统和设置面板。

脚本参考 会话事件、角色事件和转录系统的完整 API 参考。

平台指南 WebGL、Android、iOS 和 Meta Quest 部署指南。

高级主题 自定义提供程序、性能以及 SDK 扩展点。

故障排除 常见故障模式、诊断步骤和已知问题。

最新版本

v4.4.0 引入了一个规范化的按房间范围划分的转录时间线，可通过以下方式公开： ConvaiManager.Transcripts，并通过以下方式更新活动会话的 Actions： ConvaiActionConfigPatch，并为以下对象上的后端帧采样提供动态视觉上下文： ConvaiRoomManager，以及在 Convai Editor 窗口中重新构建的 SDK 设置体验。它还新增了一个基于 Unity MCP 的 AI 编码助手集成，使 Codex、Claude Code 和 Cursor 等代理能够根据提示构建 Convai 场景。请参阅 发行说明 以查看完整更新日志。

下一步

安装 Convai Unity SDK，并使用“入门”部分连接你的第一个 AI 角色。如果你在安装前评估 SDK，请查看 兼容性与要求 以确认平台和 Unity 版本支持。

快速开始