智能体(AI Agent)又称人工智能代理,它是一种以大语言模型为核心驱动的,模拟人类智能行为的系统。

数字人(Digital Human),是运用数字技术创造出来的、与人类形象接近的数字化人物形象。已经出现比较长时间,大多数情况使用人工提前准备脚本进行驱动。

我们把智能体智能交互能力与数字人相结合,实现数字人智能化实时交互,满足现实生产中各类实际需求。

杭州网智能体数字人的设计思路,主要遵循以下三个方面。
  • 智能:
    足够智能,激起用户使用好奇心

    经济:
    造价成本实惠,吸引用户买单心

  • 有料:
    灌输语料,让其输出指定的内容

    有滤:
    敏感词库进行输入输出双向过滤

  • 网络安全:
    多年运维经验,确保安全稳定

    政治正确:
    调校大模型,规避错误元素

智能导引机器人:叠加具身机器人,对接语音接口
  • 真人视频数字人:善加真人视频、语音的大模型克隆
  • 3D数字人:叠加3D模型口型播报和肢体动作
  • 语音数字人:叠加语音转文字大模型 +文字转语音大模型
  • 文本数字人:大语言模型 + 微调 + 语料知识库 + 敏感词过滤
应用真人视频、语音的大模型克隆技术,开发了实时互动的克隆人语音、视频交互数字人。

语音数字人

简单的理解就是在文本聊天数字人基础上叠加“语音转文字大模型 + 文字转语音大模型”,构建可以语音输入、输出的数字人,让用户体验更进一步自然的交互。

文本数字人

采用“大语言模型 + 微调 + 语料向量化私有知识库 + 敏感词过滤”构建的智能体,辅以图片形象和网页交互界面。

为访客提供固定点位的讲解和智能问答,为此开发了通过智能体叠加具身机器人技术,实现在展厅中对访客进行讲解点的智能引导和智能对答功能,丰富了访客的参观体验。
第三代3D数字人。在语音数字人的基础叠加3D模型的口型播报和肢体动作,让用户除了声音的体验,也有了视觉上的互动。