AI数字人互动大屏采用什么技术?

发布时间:2023年12月26日
互动大屏(技术支持:zhibo175)本身具有令人瞩目的效果,再配置丰富多彩的多媒体,如引人注目的广告、特效或游戏等,可起到很好的引流作用。在空间开阔且客流密集的场所,使用各种形态的大面积屏幕,为受众提供特别好的交互体验感;同时,还具有很好的商业价值。可根据客户需求定制开发各类功能形式,如结合体感设备的互动大屏、结合触控设备的互动大屏、结合图像捕捉的互动大屏等。互动大屏广泛适用于商场、展厅、临展活动和机场等诸多行业领域。

互动大屏核心技术:

1.数字人克隆:结合人工智能技术,实时对话数字人输出实时语音,文本驱动,生成口型,动作,表情的数字人形象

2.音频采集声音克隆:自研回声消除,声源定位,波束成形,去混响噪声抑制等核心算法用于远场语音交互场景

3.对话能力构建:基于自然语言处理和语音交互技术,实现基于知识库问答,多轮对话能力

4.显示终端:借助硬件显示终端展示数字人形象,展开与真人的模拟对话

在数字人实时互动的技术上开发,青否数字人直播实时互动的原理:

直播实时互动:数字人主播不仅与真人无异,还可以与直播间的观众实时互动。(技术支持VX:zhibo175)

"阿凡达”自主配音玩法:支持真人开麦接管,或者输入文字选择音色接管,实现你的声音和数字人主播口型1:1比对,实时驱动数字人主播在直播间回复。

用户实时交互,真实感满分,支持数字人主播/助播画外音2种互动方式。

数字人直播间实时互动的使用:

一.实时互动?

(1)实时互动原理?

开播后,数字人主播/助播可以将输入的文本或语音讲出来,与观众进行互动?

?(2)实时互动使用方法?

?运营人员直接在开播控制台输入框输入文本,或者录音,主播/助播可把这些话说出来,以此回复弹幕区?

?主播/助播回复弹幕区互动打断方式选择【智能】,则弹幕区关键词触发后,主播正在口播的话术不会被立即打断,而是需要将当前的讲品话术口播完,再进行回复?。

二.真人接管?

(1)真人接管原理?

?操作青否数字人直播控制台的运营人员,开启【真人接管】模式后,可直接使用麦克风说话,实时驱动数字人讲话?

(2)真人接管操作说明?

?开播后,点击客户端左上角【真人接管】按钮,软件会检查电脑是否有麦克风?

??麦克风检测完毕后,直播客户端开始实时接入麦克风,并提示真人接管成功,此时运营人员对照麦克风说话即可?

?运营人员说完话后,数字人可实时讲出运营人员的讲话内容?,即可完成公屏实时互动。

数字人互动大屏(技术支持:zhibo175)基于数字人直播实时互动的原理基础去上去开发,反应能力都是实时的,反应速度与直播间的实时互动速度不相上下,青否科技是数字人的源头厂商,有专业的技术团队,工程师售后都是有保障的,在选择厂商合作的时候一定要根据自己的需求,去选择合适的产品。

文章来源:https://blog.csdn.net/qingfoukeji/article/details/135219613
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。