第四节 虚拟现实与增强现实
虚拟现实与增强现实也是对应新一代人工智能的新兴产业。虚拟现实(简称VR)的核心技术是以图像识别为代表的人工智能技术,增强现实技术(简称AR)则是一种实时地计算摄影机影像的定位及角度并加上相应图像的技术,这种技术的目标是在屏幕上把虚拟世界套入现实世界并进行互动,典型产品如Google眼镜、微软的HoloLens等。
利用人工智能可以实现人机交互,极大地增强用户的体验。在虚拟现实与增强现实设备上应用图像识别、语音识别、语义理解技术,可以准确感知人的行为和发出的指令,从而马上执行指令,比如用户想查找看到的一幢建筑物的资料,通过语音命令,虚拟现实与增强现实设备能很快把关于建筑的虚拟文字资料显示在此建筑物的图像旁边。
近年来,虚拟现实与增强现实技术得到了快速发展,在各个领域都有具体的应用。例如,工业领域,可以采用虚拟现实与增强现实技术进行设备的维修保养。工作人员佩戴智能眼镜之后,能实时接收到所需信息,对于工业设备的售后服务维修提供了很多方便,提升了服务质量,缩短了维修时间,降低了用户成本(图1-16)。
图1-16 利用虚拟现实技术的工作场景
根据工业和信息化部的预测,到2020年,我国虚拟现实产业链条基本健全,在经济社会重要行业领域的应用得到深化,建设若干个产业技术创新中心,核心关键技术创新取得显著突破,打造一批可复制、可推广、成效显著的典型示范应用和行业应用解决方案,创建一批特色突出的虚拟现实产业创新基地,初步形成技术、产品、服务、应用协同推进的发展格局。
到2025年,我国虚拟现实产业整体实力进入全球前列,掌握虚拟现实关键核心专利和标准,形成若干具有较强国际竞争力的虚拟现实骨干企业,创新能力显著增强,应用服务供给水平大幅提升,产业综合发展实力实现跃升,虚拟现实应用能力显著提升,推动经济社会各领域发展质量和效益显著提高。
《新一代人工智能发展规划》要求,发展虚拟现实与增强现实,首先要突破高性能软件建模、内容拍摄生成、增强现实与人机交互、集成环境与工具等关键技术,其次要研制虚拟显示器件、光学器件、高性能真三维显示器、开发引擎等产品,还要建立虚拟现实与增强现实的技术、产品、服务标准和评价体系,推动重点行业融合应用。
(一)突破关键核心技术
加强产学研用协同合作,推动虚拟现实相关基础理论、共性技术和应用技术研究。坚持整机带动、系统牵引,围绕虚拟现实建模、显示、传感、交互等重点环节,加强动态环境建模、实时三维图形生成、多元数据处理、实时动作捕捉、实时定位跟踪、快速渲染处理等关键技术攻关,加快虚拟现实视觉图形处理器(GPU)、物理运算处理器(PPU)、高性能传感处理器、新型近眼显示器件等的研发和产业化。
在近眼显示技术方面,实现30PPD(每度像素数)单眼角分辨率、100Hz以上刷新率、毫秒级响应时间的新型显示器件及配套驱动芯片的规模量产。发展适人性光学系统,降低因辐合调节冲突、画面质量过低等引发的眩晕感。加速硅基有机发光二极管(OLEDoS)、微发光二极管(MicroLED)、光场显示等微显示技术的产业化储备,推动近眼显示向高分辨率、低时延、低功耗、广视角、可变景深、轻薄小型化等方向发展。
在感知交互技术方面,加快六轴及以上GHz惯性传感器、3D摄像头等的研发与产业化。发展高鲁棒性、毫米级精度的自内向外(inside-out)追踪定位设备及动作捕捉设备。加快浸入式声场、语音交互、眼球追踪、触觉反馈、表情识别、脑电交互等技术的创新研发,优化传感融合算法,推动感知交互向高精度、自然化、移动化、多通道、低功耗等方向发展。
在渲染处理技术方面,发展基于视觉特性、头动交互的渲染优化算法,加快高性能GPU配套时延优化算法的研发与产业化。突破新一代图形接口、渲染专用硬加速芯片、云端渲染、光场渲染、视网膜渲染等关键技术,推动渲染处理技术向高画质、低时延、低功耗方向发展。
在内容制作技术方面,发展全视角12K分辨率、60帧/秒帧率、高动态范围(HDR)、多摄像机同步与单独曝光、无线实时预览等影像捕捉技术,重点突破高质量全景三维实时拼接算法,实现开发引擎、软件、外设与头显平台间的通用性和一致性。
(二)丰富产品有效供给
面向信息消费升级需求和行业领域应用需求,加快虚拟现实整机设备、感知交互设备、内容采集制作设备、开发工具软件、行业解决方案、分发平台的研发及产业化,丰富虚拟现实产品的有效供给。
在整机设备方面,发展低成本、高性能、符合人眼生理特性的主机式、手机式、一体机式、车载式、洞穴式、隐形眼镜式等形态的虚拟现实整机设备。研发面向制造、教育、文化、健康、商贸等重点行业领域及特定应用场景的虚拟现实行业终端设备。
在感知交互设备方面,研发自内向外(inside-out)追踪定位装置、高性能3D摄像头以及高精度交互手柄、数据手套、眼球追踪装置、数据衣、力反馈设备、脑机接口等感知交互设备。
在内容采集制作设备方面,加快动作捕捉、全景相机、浸入式声场采集设备、三维扫描仪等内容采集制作设备的研发和产业化,满足电影、电视、网络媒体、自媒体等不同应用层级的内容制作需求。
在开发工具软件方面,发展虚拟现实整机操作系统、三维开发引擎、内容制作软件,以及感知交互、渲染处理等开发工具软件,提升虚拟现实软硬件产品系统集成与融合创新能力。
在行业解决方案方面,发展面向重点行业领域典型应用的虚拟研发设计、虚拟装配制造、虚拟检测维修、虚拟培训、虚拟货品展示等集成解决方案。
在分发平台方面,发展端云协同的虚拟现实网络分发和应用服务聚合平台(CloudVR),推动建立高效、安全的虚拟现实内容与应用支付平台及分发渠道。
(三)推进重点行业应用
引导和支持“VR+”发展,推动虚拟现实技术产品在制造、教育、文化、健康、商贸等行业领域的应用,创新融合发展路径,培育新模式、新业态,拓展虚拟现实应用空间(图1-17)。
图1-17 VR+
在VR +制造方面,推进虚拟现实技术在制造业研发设计、检测维护、操作培训、流程管理、营销展示等环节的应用,提升制造企业辅助设计能力和制造业服务化水平。推进虚拟现实技术与制造业数据采集与分析系统的融合,实现生产现场数据的可视化管理,提高制造执行、过程控制的精确化程度,推动协同制造、远程协作等新型制造模式发展。构建工业大数据、工业互联网和虚拟现实相结合的智能服务平台,提升制造业融合创新能力。面向汽车、钢铁、高端装备制造等重点行业,推进虚拟现实技术在数字化车间和智能车间的应用。
在VR+教育方面,推进虚拟现实技术在高等教育、职业教育等领域和物理、化学、生物、地理等实验性、演示性课程中的应用,构建虚拟教室、虚拟实验室等教育教学环境,发展虚拟备课、虚拟授课、虚拟考试等教育教学新方法,促进以学习者为中心的个性化学习,推动教、学模式转型。打造虚拟实训基地,持续丰富培训内容,提高专业技能训练水平,满足各领域专业技术人才培训需求。促进虚拟现实教育资源开发,实现规模化示范应用,推动科普、培训、教学、科研的融合发展。
在VR+文化方面,在文化、旅游和文物保护等领域,丰富融合虚拟现实体验的内容供应,推动现有数字内容向虚拟现实内容的移植,满足人民群众文化消费升级需求。发展虚拟现实影视作品和直播内容,鼓励视频平台打造虚拟现实专区,提供虚拟现实视频点播、演唱会、体育赛事、新闻事件直播等服务。打造虚拟电影院、虚拟音乐厅,提供多感官体验模式,提升用户体验。建设虚拟现实主题乐园、虚拟现实行业体验馆等,创新文化传播方式。推动虚拟现实在文物古迹复原、文物和艺术品展示、雕塑和立体绘画等文化艺术领域的应用,创新艺术创作和表现形式。
在VR+健康方面,加快虚拟现实技术在医疗教学训练与模拟演练、手术规划与导航等环节的应用,推动提高医疗服务智能化水平。推动虚拟现实技术在心理辅导、康复护理等环节的应用,探索虚拟现实技术对现有诊疗手段的补充完善,发展基于虚拟现实的居家养老、在线诊疗和探视服务,提高远程医疗水平。
在VR+商贸方面,顺应电子商务、家装设计、商业展示等领域的场景式购物趋势,发展和应用专业化虚拟现实展示系统,提供个性化、定制化的地产、家居、家电、室内装修和服饰等虚拟设计、体验与交易平台,发展虚拟现实购物系统,创新商业推广和购物体验模式。
(四)构建标准规范体系
发挥标准对产业的引导支撑作用,建立产学研用协同机制,健全虚拟现实标准和评价体系。加强标准体系顶层设计,着力做好基础性、公益性、关键性技术和产品的国家/行业标准制修订工作,有效支撑和服务产业发展。着力推动标准国际化工作,加快我国国际标准化进程。
在建立标准规范体系方面,研究确定虚拟现实综合标准化顶层设计,构建虚拟现实领域标准化体系,提出标准化路径和时间表。鼓励发展具有引领促进作用的团体标准,完善团体标准转化机制,形成政府主导制定的标准与市场自主制定的标准协同发展、协调配套的新型标准体系机制。积极引导和支持国内企业、科研机构、高等院校参与国际标准制定。
在加快重点标准研制方面,加大基础类、安全类、应用类等标准制定力度,规范接口数据、程序接口、互联互通等标准,推进不同产品和应用系统间互换互认。制定符合人体视觉、听觉习惯和满足生理、心理健康要求的虚拟现实产品安全和健康等标准,提高虚拟现实产品基本安全保障能力。完善制定根据儿童、青少年、成人、特殊人群等不同受众人群划分的内容分级标准体系。
在开展检测认证工作方面,研究建立虚拟现实产品检验检测与评估机制,构建涵盖虚拟现实技术、产品、服务等方面的测试评估体系,支持第三方机构开展虚拟现实重点标准宣贯和产品质量评估测试工作。组织开展对市场主流虚拟现实产品的标准符合性测试,发布质量分析报告。