产品介绍 原始宣传文档
我们的Pioneerx Human实时数字人系统整体响应最快可到0.5-0.7毫秒,以上参数使用2080ti 22gb显卡做为参考。之所以有如此之快的响应速度,不仅得益于我们开发团队长期的优化底层算法和长期技术积累,在实时数字人领域不断攻克一个个技术难关。
为了提升速度,我们不断更换算法和突破cpu和gpu的计算极限,不断提升cpu和gpu的工作效率,尝试各种减少程序的运行时间的算法,最大程度地压榨硬件性能。
经过长时间的技术积累和攻克难关,最终极大提高实时数字人交互响应速度,大大降低了实时数字人对硬件算力的门槛,了。从最初的3-5秒响应时间降低到最快只要0.5秒响应,并确保数字人回复的准确性和音色质量及其口型质量的整体稳定性和流畅输出。
Pioneerx Human实时数字人系统不需要昂贵的硬件才就能跑起来,整体需要大约13GB显存。cpu方面一般8核cpu (amd 3700x或intel i9 12代)和显卡2080ti,4060这些入门配置就可以跑的很流畅了,支持内网和外网部署,集成知识库系统。
一台数字人算力服务器总体硬件成本可控制在5000元左右。如果是要大规模部署或提供公有云数字人服务,可配备性能更强的硬件算力设备,确保高并发和稳定性。
一般建议使用intel i9 13900处理器,其在单核与多核能力都表现出众,在大模型输出和语音合成以及文本转向量和实时渲染等方面将极大发挥出其单核高性能以及多核高并发稳定输出的优势。显卡方面使用3080 20gb及其以上,或配备多张显卡,可以实现gpu算力负载均衡部署。多张显卡并行计算推理,可以支持更大规模的数字人应用。
为了进一步降低数字人的运行门槛和提高数字人的智能程度,我们也集成了通义千问系列大模型,kimi,deepseek这些常见的第三方语言大模型。这样,可以降低数字人至少5-6GB显存,把用户的显卡门槛降低一大截,使得数字人可以服务更多客户。
在使用第三方llm大模型的前提下,整体显存降低到8GB。很多消费级显卡包括1080ti,3060这些显卡将同样能胜任跑实时实时数字人的工作。经过我们优化的数字人其tts和asr、口型引擎对gpu要求都很低,能达到1080ti这以上的显卡就基本很流畅了。
和其它实时数字人有很大不一样的地方是,我们的数字人系统全流程采用本地化模块。包括llm大模型,asr语音识别模型,Nlp自然语义引擎、向量模型和向量数据库和tts声音克隆,口型引擎等等,为数字人运行节省大量tokens费用提供条件。
整个数字人不仅在响应速度领先同类产品,在使用门槛上也是大大降低,拥有配套的可视化web管理端,实现各方面都自定义化管理维护。
通过该web管理端,管理人员不仅可以配置数字人参数,设置数字人背景,通过实时渲染控制面板进行参数设置,还有其它系统运行的各项自定义参数。比如,客户自行设置数字人的各项参数,包括选择不同的大模型,配置智能体角色,定义数字人人设,选择知识库,切换音色,设置联网url或第三方业务api数据接口等,数字人对话界面ui皮肤等。
我们的这套数字人还配备了独立的向量数据库,利用embedding模型将文本转成向量进行存储,为大模型检索知识库提供技术支撑。
企业可以把各类文档上传导入到知识库系统,也支持导入远程网页url进行离线存储。此外,知识库支持联网查询,可以实时检索互联网信息,还可以对接第三方api数据接口或数据库查询。比如让数字人实时查询某个会员的剩余课时或检查报告内容,或酒店剩余客房,停车场剩余车位等。这样,极大增强了数字人的业务能力和扩展性,从简单的客服接待到打通企业各项数据服务节点,到深入企业人工智能应用实践。
得益于Pineerx Human数字人智能体和大模型的底层优化,以及聊天缓存与专有知识库的集成,确保数字人能够稳定输出和对话。数字人在上下文理解方面表现不俗,支持上下文理解、多轮对话生成,都能够精确检索知识库内容和联网信息。
此外,很多客户关心的是数字人是否可以自定义形象和声音克隆。该系统是可以自定义形象和声音克隆的。用户只要上传一段视频,配置数字人运行参数,就可以快速克隆自己指定的形象。剩下的工作就是,为数字人选择知识库和音色就可以让数字人开始工作了。
声音克隆可以完美的进行原始音频素材的克隆,为打造具有个性化的贴近真人的数字人打了扎实的基础。
PioneerX Human数字人形象甜美,配置应景的背景图片或视频画面。每次和数字人对话都感觉身临其境。不仅画面切换流畅,口型稳定准确,音色清晰舒适,内容回复输出稳定,毫无卡顿,体验感非常棒。
这套系统功能特别全面,不光能实现AI实时智能对话,还能一键搞定短视频批量制作、智能语音合成、语音转文本、语音生成srt字幕文件、自动添加字幕、图片视频去水印、视频扣绿幕、视频更换背景等多种实用任务。不管是日常内容种草、账号涨粉引流,还是直播间运营、直播带货转化,都能全方位助力客户轻松起量,高效提升曝光和营收。
我们的数字人和其它数字人产品不一样的地方是,不仅可以快速部署到大屏幕,还支持移动端,网页端,微信端等。
整套系统配置健壮的权限体系,拥有完备的自定义参数功能,为统一调配全局参数和简化不同数字人配置提供条件。
本数字人支持在Windows和Linux系统环境运行,其安装部署非常简单。我们分别为这两种操作系统进行了单独的优化。PioneerX Human数字人系统的各个服务模块都内置了多个极速稳定的web框架。用户可以自行选择任意一种web框架启动服务。通过程序和模型、数据分离的设计方式,为数字人提供快速运行和高并发服务创造了条件。
最后,在部署数字人方面可以采用本地私有化和公有云部署。很多客户都倾向使用本地化部署方式,一来可以使用自己的高性能硬件算力,避免云算力昂贵的租用成本。二来可以保障数据的安全和可控性。
如果采用租用公有云的部署方式,其成本也是在可控制范围内。由于Pioneerx human实时交互数字人的较低门槛,一般租用一张2080ti 22gb显卡包月400-500元左右即可。一年的成本大概是5000-6000元左右,大多客户都能接受。
让我们共同探索,如何让数字人技术为您的业务增长赋能。请访问官网或联系我们获取详细方案。
官网:http://www.lxsoftware.cn