“笃行宁韵”赴南京实践支队属清华大学笃实书院与软件学院联合“学问笃实系列”品牌实践支队,由1位软件学院教师、6位软件学院学生和10位笃实书院学生组成,前往南京开展为期5天的实践调研。
南京数字人与机器人产业调研
从交互体到具身系统
的多元探索
随着人工智能与机器人技术的深度融合,数字人与具身智能系统已成为新一轮科技革命的重要方向。作为长三角地区的科技创新高地,南京在虚拟交互体与实体机器人领域形成了特色鲜明的产学研布局。支队先后走访了南京八点八科技有限公司、南京大学沈秋老师课题组以及南京理工大学计算机科学与工程学院,围绕数字人技术、机器人控制与感知、具身智能系统等方向开展系统调研,深入理解该领域的技术演进路径与产业发展态势。
八点八科技有限公司专注于虚拟数字人引擎的研发与应用,其核心产品是基于多模态交互技术的数字人解决方案。公司自主研发的“亿话”核心技术平台,支持数字人在展厅智能讲解、多模态互动、跨语言交流等场景中的实时响应与情感表达,实现了高度拟真的虚拟交互体验。
在技术层面,八点八科技构建了完整的数字人生产管线,涵盖形象建模、动作驱动、语音合成、语义理解等多个模块。通过融合自然语言处理、计算机视觉与语音技术,数字人能够理解用户意图并进行自然对话,其表情与动作可根据交互内容实时生成,显著提升了虚拟交互体的真实感与亲和力。
在产业应用方面,公司已形成覆盖金融、客服、教育、政务、文旅等八大领域的行业解决方案。例如在金融领域,数字人可作为虚拟柜员提供业务咨询与办理服务;在教育领域,可批量生成高校数字教师用于微课制作与在线答疑;在商务场景中,数字人可实现毫秒级响应,支持私有化部署以满足政企客户对数据安全的严格要求。
八点八科技的实践表明,虚拟数字人正从概念演示走向规模化行业应用,成为企业数智化转型的重要工具。
南京大学沈秋老师课题组打通虚拟数字人与实体机器人两大领域,致力于构建虚拟智能到物理世界的技能迁移路径。
在数字人研究中,团队聚焦高保真建模与多模态驱动,搭建了亚洲规模最大的三维数字人脸数据集FaceSpace,精度达毛孔级;基于此研发的单目三维人脸重建算法,曾应用于电影《封神》的数字人脸制作。课题组还自主研发多模态动作捕捉系统,开源含1200万帧数据的人体动作数据集,为相关研究提供数据支撑。
在机器人领域,团队融合机器人技术与视觉感知,实现多项核心能力:仿人机器人可在复杂地形动态平衡行走;能以0.5秒低延迟复刻人体手势;通过VR遥操作与逆运动学算法,适配双足、多臂等不同机器人平台;同时具备自主物体抓取、主动跨越台阶的导航与操作能力。
该研究印证了虚拟数字人与实体机器人的底层技术共通性,为构建统一智能体驱动框架提供了重要思路。
南京理工大学计算机科学与工程学院依托学校深厚的军工背景,在具身智能与无人系统领域形成鲜明研究特色。具身智能强调智能需依托具体物理形态,在与复杂环境实时交互中涌现,与传统离身智能有本质区别。学院研究直面野外、战场等无结构化场景挑战,核心解决“可通行区域”感知、多传感器融合定位及“全局-局部”分层路径规划等关键问题。
在无人驾驶领域,学院参与研发国内第一台自主驾驶无人车ATB-1,奠定技术积累。针对野外环境无明确道线、地形复杂等特点,团队采用多传感器融合方案,通过视觉、激光雷达与毫米波雷达互补,弥补单一传感器极端条件下的感知短板;定位上结合GPS、视觉里程计与SLAM技术,实现无信号环境下高精度定位;规划上采用“全局粗规划与局部细调整”策略,基于实时地形动态调整路径。相关技术在国内无人系统赛事中持续优化,推动具身智能从实验室走向实际部署。
在具身智能机器人领域,学院关注人形机器人、机器狗等形态的自主行为能力。研究团队指出,当前具身智能热点多为商业概念升级,工业场景中轮式机器人搭配机械手更具实用性。团队在强化学习与模仿学习方面深入研究,探索通过任务简化与数据降维降低试错成本,为复杂环境下机器人自主决策提供可行路径。
综合三家调研单位观察,南京在数字人与机器人领域形成清晰差异化布局与互补优势。八点八科技专注虚拟数字人引擎与行业解决方案,推动多模态交互技术多领域规模化应用;南京大学聚焦虚拟与实体智能体统一驱动,贯通高保真数字人建模、多模态动捕、机器人控制与感知等技术;南京理工大学攻坚极端环境具身智能系统,在野外无人平台与自主导航领域形成特色。三者对应虚拟交互体、虚实连接、实体具身三个层次,构成该领域完整创新链条。
展望未来,数字人与机器人技术融合将更深入。虚拟数字人可作为实体机器人的大脑与界面,实体机器人则为虚拟智能提供物理载体与感知支撑。随着多模态大模型、强化学习、SLAM等基础技术突破及5G/6G、边缘计算等基础设施完善,二者将在智能制造、智慧城市等多场景发挥更大价值。南京若巩固现有优势,推动产学研协同创新、加强复合型人才培养,有望在该前沿领域占据更有利位置。
本次调研使我们认识到,从交互体到具身系统的演进,不仅是技术维度的拓展,更是智能形态从虚拟走向现实、从离身走向具身的深刻变革。南京作为这一进程的重要参与者,其产业布局与创新实践为理解中国数字人与机器人的未来走向提供了有价值的样本。
文案 | “笃行宁韵”赴南京实践支队
图片 | 徐一凯
排版 | 陈正阳
审核 | 陈思涵 曹竣然 李天笑