京东言犀数字人介绍

解决方案中心-智能服务与产品部

2023年01月

目录

0

１ 公司简介

0

３解决方案

&相关案例

0

２ 产品

&服务

0

４ 领先优势

PART ONE 01 公司简介

京东科技集团——

京东对外提供技术服务的核心版块

京东集团

京东科技集团承继了京东集团的资源和禀赋，与京东零售、京东物流等业务板块共同构建京东生态。

京东自营生态优势为公司带来了以服务B端客户为核心的天然基因，为公司走向产业数字化道路奠定了基础。

• 技术被定位为京东集团在交易和服务之后的第三条增长曲线。

• 京东科技集团已成为京东集团对外提供技术服务的核心输出平台。

• 目前，京东集团已形成零售、物流、健康、科技四大核心业务。

以供应链为基础的

技术与服务企业

零 售 科 技 物 流 健 康

京东科技在智能技术领域的投入与实力

京东科技40+位全球顶级

科学家，4位IEEE Fellow

员工总数约1万人，

70%+为研发和专业人员 800亿 70%+ 40+ 2017年以来，京东

体系技术研发投入

1

st P lace A w ard in

T rack 4 :M ulti-H um an P ose E stim ation Challen ge

P resen ted to

T eam :J D A I-H um an

Q ian B ao, W u L iu, T ao W u, T ao M ei

JD A I R esearch

D ate Chair

1 8 Jun e 2 018 J iash iF en g

• 累计申请专利4635个

• 在AAAI、IJCAI、CVPR、KDD、NeurIPS、ICML、ACL、ICASSP等国际AI顶级会议共发表近500+篇论文

• 在众多国际性AI赛事中获得25项世界排名第一

在智能对话领域，京东科技拥有深厚的技术积累和经验沉淀

复杂场景下的多轮

对话与决策技术

⚫ 上下文建模和理解

⚫ 基于用户画像的个性化应答

⚫ 基于高层语义的跨模态匹配

⚫ 个性化精准推荐

知识获取与推理

⚫ 基于非结构化文本的知识图谱

构建

⚫ 基于知识图谱的知识推理

⚫ 常识体系的构建与应用

⚫ 用户画像及消费行为预测

⚫ 个性化精准营销及推荐技术

⚫ 文本、语音、图像的跨模态交互技术

⚫ 跨模态常识知识学习

⚫ 多模态信息语义结构化

⚫ 跨模态相似度度量

⚫ 图像视频与文本跨模态生成

⚫ 图像内容识别、检测与语义分割

对话内容生成 多模态交互技术

⚫ 可控性、可解释性的文本生成

⚫ 话题引导与交流

⚫ 基于场景的对话风格

⚫ 生成有同理心的对话语言

⚫ 拟人化，人设匹配

⚫ 多意图识别

⚫ 深度语义匹配

⚫ 机器阅读理解

⚫ 信息检索

⚫ 情感智能

深度语义理解

PART TWO

0

２ 产品

&服务

电商应用场景及数据沉淀，保障品牌直播效果

人：主播话术

• 虚拟主播形象、声音、人设打造

• 5秒黄金开场，快速留人+粉丝互动

• 80秒讲解商品卖点，击中用户痛点

• 15秒利益点话术单元

场：直播间搭建

货：商品搭配 数：数据驱动

• 直播间整体布局、画面比例

• 商品图片与介绍视频的展示方式

• 商品利益点视觉配套设计

• 波音字幕、弹幕抓取、互动特效

• 直播间背景音乐BGM

• 主推款、次推款、利润款、福利

款、引流款等选品比例

• 各SKU的出场顺序与介绍时长

• 商品利益点设计

• 最佳直播时段、时长、开播频次

• 全链路直播数据复盘及效果优化

• 用户画像沉淀，流量转化为客户数

字资产

仿真人 卡通人

言犀虚拟主播操作简单，功能强大，拥有业界一流的智能化水平

✓ 一键开播免值班，7*24*365不间断直播，补充真人直播，拉满直播时长，承接直播间流量；

✓ 提供一键获取商品信息、利益点自动输出直播脚本、多场景直播间模板、特效等丰富功能；

✓ 支持智能推荐商品、支持口播&文本实时智能回复弹幕、讲段子/跳舞等智能互动；

✓ 支持京东、淘宝、唯品会、拼多多、抖音本地生活等平台；

✓ 专业AI直播代播团队，提供账号诊断、直播间搭建、直播策略及数据复盘，完全一站式服务，效果保证；

✓ 自主研发实时智能交互&TTS，十年京东智能产品（智能客服、智能营销、智能AI外呼）团队沉淀的优

势基础上孵化而出的数字人！

✓ 7 * 2 4 h 带 货

✓ 一 键 写 稿

✓ 智 能 交 互

✓ 多 个 平 台

✓ 专 业 代 播

✓ 京 东 自 研

通用形象+音色、定制形象+音色与IP结合打开更多想象空间!

形象多样丰富

60+个虚拟形象，5个仿真人形象（持续增加）

语音个性定制

30+仿真人TTS音色，提供高自然度、有感情、

个性化的语音合成服务，可根据声音样板定制

音色

仿

真

人

形象定制

支持定制形象，生成店铺专属虚拟IP

卡

通

人

库内通用形象丰富，且持续更新，可按需定制品牌专属数字人

电商标准代播流程SOP，持续提升成交转化

开通账号

建立微信群

确认客户意向

开通言犀虚拟主

播账号

与客户建立联系

完成产品培训

开通

账号

店铺调研

解决方案输出

本店基本情况、粉

丝画像调研、竞品

店铺及直播间调研

店铺定制解决方案

痛点

摸索

直播间搭建

效果与商家

确认

根据调研、品牌

特色等搭配直播

间画面

开通测试直播并

与商家确认效果

测试

直播

执行代播

按照约定执行开播

周末运营执守

10分钟问题响应

执行

代播 直播间

持续优化

问答库完善

互动行为及效果优化

画面优化、商品及利益

点展示优化、主播声画

优化及话术优化

持续

优化

数据复盘

输出店铺专属

方法论

直播四要素均达到较

好水平，形成专属运

营方法论

稳定

效果 客户回访

需求沟通

与客户定期回访，

沟通直播间的数据

效果及直播需求

客户

沟通

移交账号

客户自播

培训客户店铺专属方法论

教会持续提高店铺数据

授人

以渔

精细打磨直播间人、货、场、数四要素内容 追求数据效果持续增长 因店制宜 形成店铺专属运营方案

开播前 开播中 开播后

数字人服务报价

抽佣方案建议

序

号

模式 佣金 备注

1

产品费用

+CPS

GMV的3-

5%

2

纯佣金

（头部客

户）

阶梯式，最

高可达

GMV20%

GMV体量越高，佣

金额越高（例：0-

50w，10%；50-

100w，12%；100-

200，15%；200w，

20%）

3

设置抽佣

封顶

可根据商家店铺/直

播间月度销售额设置

4

设置抽佣

比如阶段

性奖励

例：年度抽佣金额满

10w赠送tts定制，满

30w赠送形象定制等。

服务模式

服务费用

卡通人 仿真人

通用服务 19,800元/年

+直播间GMV抽佣(代运营服务)

60,000元/年

+直播间GMV抽佣（代运营服务）

专属定制

根据卡通人具体形象情况判定

+直播间GMV抽佣(代运营服务)

+40,000元（形象定制一次性付费）

+10,000元（声音定制一次性付费）

+40,000元起（模特拍摄及版权一次性付费）

+直播间GMV抽佣(代运营服务)

言犀数字人综合优势

技术优势 产品优势 数据优势 运营优势

我们是十年京东智能产品（智能客服、智能营销、智能AI外呼）团队沉淀的优势基础上孵化而出的数字人！

• 自主研发数字人驱动（表情/动作）

• 自主研发超仿真人个性化声音（TTS）

• 自主研发AI智能写剧本

• 自主研发实时智能交互技术，且即

将与京小智智能客服数据库打通

• 数字人自定义生成

• 技术全自主研发

• 支持八大主流直播平台

• 丰富形象与声音，支持定制

• 30+款主播动作

• 场景特效生动丰富，互动能力强

• 语义识别，情绪识别，交互能力优秀

• 三步闪电开播，快速上手

• 操作简单且产品高度智能

• 京东平台海量数据沉淀，十余年

大规模智能服务形成6亿用户、数

十万商户的数据闭环

• 为AI语音语义及行为解析模型提

供了坚实基础

• AI直播代运营服务

• 专业团队陪跑服务

• 定制生成店铺专属运营方案

• 与商家利益完美契合的收费模式

AI数字人短视频服务——可进行１V１高保真声音和形象复刻

➢ 在短视频中，作为虚实融合世界的分身和交互中介，使其成为新的连接及方式，逐步推动虚拟分身推广和普及化。

➢ 对短视频中出现的人员体型、样貌、声音、动作等方面，在虚拟数字人基础模型上迭代升级，通过拍摄视频即可生成

专属虚拟形象，同时还可以根据产品应用场景、节令及重大节日等不同需求，对虚拟人的服饰、发型进行修改和调整，

从而丰富虚拟人人设，使其更具真实感。

➢ 满足了品牌方对“市场、产品、运营、品牌”四大重点场景的充分应用，多触点联结用户，构建自己的运营矩阵。

图片为样例参考 视频可播放，模特为内部工作人员，不可对外商用

PART THREE 03 解决方案&相关案例

数字虚拟人服务400家商家，总交易额近6亿

2022下半年，直播间平均转化率10.22%！平均GMV占比真人40%+

虚拟数字人直播案例

提高店铺成交转化及 G M V

数 码 类 - 雷 神 开 播 两 天 ， A I 直 播 间 平 均 G M V 达 2 7 万 。 使 用 言

犀虚拟主播后 ， 团队搭建完善直播间场景 ， 进店流量几乎持平

的情况下 ， 店 铺 整 体 G M V 提 升 2 8 % ， 店铺整体 成 交 转 化 率 提

高 2 5 % 。 试用后 ， 客 户 成 功 付 费 购 买 。

Vs.有无直播

代播持续挖掘客户价值

饮品类 - 蒙 牛 购 买 言 犀 虚 拟 主 播 ， 前期自播效果不佳 ， 代播后协

助 品 牌 调 整 直 播 间 产 品 架 构 及 权 益 ， A I 直 播 平 均 每 日 G M V 提

升 6 8 % 。 最 终 客 户 成 功 续 约 ， 转 为 代 播 抽 佣 模 式 ， 并 新 增 拓

展 3 个店铺付费购买 。

Vs.自播代播

2022年大量的事实证明：

客户对于言犀虚拟主播有很强的市场认可度，

并付费使用!

虚拟数字人直播案例

某母婴

• 我方代播GMV达客户自播的1.59

倍，成交转化率高出自播26%

• 很快实现矩阵增购

某家居日用

• 试用15天，客户对产品和

服务满意，直接签约三年

• 抽佣10%以上

某食品

• AI直播GMV占比真人85%，不仅

自身购买，

• 裂变其他客户

• AI直播GMV达真人直播的1.98倍，

客户因此大幅缩减了真人直播投入

• AI直播GMV渗透率远超行业均值

（京东店达6.6%，天猫店超10%）

某酒水

虚拟数字人直播案例：家电类及2022年双十一战报

客户需求：

效果数据

家电类品牌在双十一冲刺阶段，

对店铺GMV提升有翻倍提升需求，

但由于主播排期及时间问题，尝

试虚拟直播人带货，达到GMV提

升，及单场销量提升诉求。

• 某电器京东自营旗舰店双11最高一

场GMV：1041.66W

• 某投影仪双11最高一场

GMV28.06W

• 某投影仪双11最高一场

GMV10.36W

使用产品后整体GMV增加30%

以上数据统计截止时间：2022年11月12日

虚拟数字人直播案例：数码类、母婴2022年双十一战报

客户需求：

效果数据

• 某数码最高一场直播间

GMV1171.28W，开播4

个月后月度GMV提高2倍

• 某母婴品牌，使用言犀虚拟主播开

播1个月，观看人数6465人，

1599人成交，带动店铺GMV

环比增长40%！

数码及母婴类品牌在双十一冲刺

阶段，对店铺GMV提升有翻倍提

升需求，但由于主播排期及时间

问题，尝试虚拟直播人带货，达

到GMV提升及单场销量提升诉求。

以上数据统计截止时间：2022年11月12日

PART FOUR

0

4 领先优势

领先优势-发展历程

2009

· 零代码10分钟自助搭建

2010

· 开通7x24小时电话服务

2012

· 成都分中心成立

· 智能客服在京东商城上线

2013

· 在线客服机器人1.0上线

2014

· 扬州分中心成立

2015

· 深度神经网络技术在智能客服

正式应用

· 语音质检系统上线

· 智能客服在京东金融上线

· 11.11接待量首破百万

2016

· 员工智能辅助上线

2017

· 京东生态商家智能客服平台上线

· 智能客服升级无人客服实现人机

深度配合

· 智能客服承担90%京东在线咨询

2018

· 智能客服成为业内首个大规模商

用情感智能客服机器人

· 成为十三五规划中唯一收录的智

能聊天机器人

· 在联合国地理信息大会发布多模

态交互导览机器人

· 牵手商务部联合打造智慧政务机

器人

· 入选人工智能产业发展联盟

TOP100优秀案例

2020

· 京东智能疫情助手在武汉市长专

线、蚌埠市人民政府官网等1000+/

官媒及企事业单位上线

· 自主研发的智能人机交互平台言

犀正式发布

· 荣获世界人工智能大会WAIC卓越

人工智能引领者奖

· 为银盛支付打造智能客服产品在

金融行业树立标杆

· 牵手中联重科，行业拓展实现突破

2019

8 · 从0到1搭建国家电网智能化服

务中心，全集团智能项目评比

名列前三

· 荣获数博会全国十大领先科技成

果奖“黑科技”

· 成功入选工信部新一代人工智能

产业创新重点任务揭榜单位

· 牵手大同市政府，智能热线从无

到有实现突破

2021

· 新一代大同12345市民服务热线正式

上线

· 首批通过信通院“数字化可信服务评估”

认证

· 入选国家网信办“人工智能企业典型应

用案例”

· 荣获“年度最佳科技教育服务商”大奖

· 荣获世界人工智能大会WAIC卓越人工

智能引领者奖

· 斩获ACM Mu楼梯Multimedia2021年

最佳演示奖

· 荣获2021年度人工智能最佳解决方案

TOP10

2022

· 数字人平台上线

· 入选2022AIIA客服中心应用

优秀案例

领先优势-技术优势

多轮对话

京东言犀可实现复杂场景下的多轮对话，依赖于语义理解技术与对话管理技术的共同探索突破。基于最前沿的深度学习技术，通过交互式的自注

意力机制，在回答当前问题时，可以最长追溯到前6句对话历史，并自动提取其中的关键信息，像人类一样结合上下文更好的理解当前问题，给

出最合适的回复。在对话管理技术方面，构建了基于行为树的对话管理系统，实现了业内领先的基于状态机的机器人对话流程管理，提供灵活的

多轮对话配置与调度能力，并与语义理解模块深度耦合，解决不同场景下的差异化需求

多模态交互 京东言犀拥有业界领先的全栈自研语音、语义、知识图谱及对话技术，在文字和语音基础上，通过融合计算机视觉和多模态模型等技术，实现

视觉、听觉、文本等多种模态信息交互，能够打破单模态输入输出限制，加入虚拟人形态，使人与机器的交互更加自然真实

情感智能 作为业界首个大规模商用的情感机器人，京东言犀基于前沿的AI技术，研发了业内领先的精细粒度情绪识别模型，可识别生气、 失望、愤怒、焦

虑等7种情绪，并在回复中蕴含相应的情感，做到知心- 走心-关心

方言识别

针对方言等问题，京东言犀专门开发了一个口音适配的模型和算法，能够用最少的代价、最快速的方式对口音进行识别，此外还做了语音识别和

语义理解的联合建模，使得有些在语音识别当中犯的错误会通过语义理解纠正过来，保证最终系统能正确理解语义，理解当地市民的话。同时，

随着数据的积累，语音识别和意图理解功能还会自我迭

代与优化。目前已能够准确识别四川和重庆、陕西、山西等地的方言，正在逐步实现对全国其他地区的方言覆盖

多模态决策智能

开发独有的多模态融合决策智能技术，在交互中，综合声音信号检测、 流式语音识别、情绪变化跟踪以及语义完整度的实时判断等多重技术，而

非简单靠设一个停顿时长阈值来决定是否打断用户。多模态融合决策智能技术，取得了多项专利，并应用在了大同12345等场景，为市民特别是

老年市民，文化程度不高说话方言性重的市民，进一步

为用户提供良好的智能服务体验

领先落地实践

京东集团客户体验与服务

中心， 智能化升级最佳实践

大规模商用

基于海量数据及高复杂场景

打造， 在业界具备独创性、

先进性、快速复制性

全栈自研AI能力

业界领先的全栈自研语音识别、

计算机视觉、机器学习、语义理解、

知识图谱、多轮对话等技术

卓越用户体验

有温度、拟人化、个性化的用户

体验，闭环解决用户咨询问题

数智化运营

数智驱动，闭环运营，

让场景优化有速度有方向

全链路方案

多渠道、多模态、人机融合、全

链路的智能客服中心升级方案

高性能架构

高并发、高鲁棒性、高扩展性，

面对大规模突发事件能快速

响应和稳定支撑

高效灵活部署

多种部署方式灵活支持， 高效

交付、安全可靠、贴心服务

整体优势:京东十年技术积累+行业沉淀+专业保障

T H A N K S