互动大屏核心技术:
1.数字人克隆:结合人工智能技术,实时对话数字人输出实时语音,文本驱动,生成口型,动作,表情的数字人形象
2.音频采集声音克隆:自研回声消除,声源定位,波束成形,去混响噪声抑制等核心算法用于远场语音交互场景
3.对话能力构建:基于自然语言处理和语音交互技术,实现基于知识库问答,多轮对话能力
4.显示终端:借助硬件显示终端展示数字人形象,展开与真人的模拟对话
在数字人实时互动的技术上开发,青否数字人直播实时互动的原理:
直播实时互动:数字人主播不仅与真人无异,还可以与直播间的观众实时互动。(技术支持VX:zhibo175)
"阿凡达”自主配音玩法:支持真人开麦接管,或者输入文字选择音色接管,实现你的声音和数字人主播口型1:1比对,实时驱动数字人主播在直播间回复。
用户实时交互,真实感满分,支持数字人主播/助播画外音2种互动方式。
数字人直播间实时互动的使用:
一.实时互动?
(1)实时互动原理?
开播后,数字人主播/助播可以将输入的文本或语音讲出来,与观众进行互动?
?(2)实时互动使用方法?
?运营人员直接在开播控制台输入框输入文本,或者录音,主播/助播可把这些话说出来,以此回复弹幕区?
?主播/助播回复弹幕区互动打断方式选择【智能】,则弹幕区关键词触发后,主播正在口播的话术不会被立即打断,而是需要将当前的讲品话术口播完,再进行回复?。
二.真人接管?
(1)真人接管原理?
?操作青否数字人直播控制台的运营人员,开启【真人接管】模式后,可直接使用麦克风说话,实时驱动数字人讲话?
(2)真人接管操作说明?
?开播后,点击客户端左上角【真人接管】按钮,软件会检查电脑是否有麦克风?
??麦克风检测完毕后,直播客户端开始实时接入麦克风,并提示真人接管成功,此时运营人员对照麦克风说话即可?
?运营人员说完话后,数字人可实时讲出运营人员的讲话内容?,即可完成公屏实时互动。
数字人互动大屏(技术支持:zhibo175)基于数字人直播实时互动的原理基础去上去开发,反应能力都是实时的,反应速度与直播间的实时互动速度不相上下,青否科技是数字人的源头厂商,有专业的技术团队,工程师售后都是有保障的,在选择厂商合作的时候一定要根据自己的需求,去选择合适的产品。