基于智能终端的裸眼3D终端技术及3D视频业务发展研究(1).ppt

中国移动集团级重点研发项目结题汇报报告,2/23/2023,项目名称：基于智能终端的裸眼3D终端技术及3D视 频业务发展研究,一.课题目标实现情况,目 录,二、主要研究成果（整合后）,1.1 研究背景,3D视频正在形成流行趋势3D影视巨制阿凡达的大获成功和3D电视等消费电子的迅猛普及，使业内专家和公众不约而同地将2010年定义为“3D消费元年”，3D消费、3D技术研发以及3D产业整合即将进入一个高速发展的历史时期，3D产业在全球范围也迎来了其第三次产业发展机遇。裸眼3D技术逐步成熟一般在观赏3D视频的同时，需要佩戴一款体验并不好的3D眼镜，随着裸眼3D技术的成熟，用户无需佩戴3D眼眼镜也能观赏3D视频，因此裸眼3D技术具有很大的便利性，尤其适合手机等便携终端。各大终端厂商纷纷推出裸眼3D终端产品 三星的裸眼3D手机：SCH-W960 Sharp的裸眼3D手机：SH8158U、SH8168U Galapagos 003SH与005SH HTC的裸眼3D手机:EVO 3D LG的裸眼3D手机:Optimus 3DSharp等公司已经开始运营3D视频业务,1.1 研究意义,创立新的视频业务展现形式视频业务除用流畅操控、优质视频内容来吸引用户外，还可使用创新的展现形式，裸眼3D技术结合了目前最流行的技术，可以给用户带来全新的视频观赏体验研究和把握前沿的3D技术和发展方向研究和把握最新的3D技术发展方向，为迎接3D产业的大发展做好技术储备。增强用户体验和用户黏性新的视频展现形式，提升了用户对视频的观赏体验，同时还增强了用户的粘性培育和发展3D内容产业链目前支持裸眼3D的移动视频业务并不多，尤其在国内还没有出现商用的裸眼3D业务，中国移动手机视频业务及时引入该技术除增加业务亮点的同时也对3D内容产业链的发展起到一定的推进作用。,1.1 研究目标,研究掌握目前流行的3D视频展现技术，方案和标准偏色式3D，偏振式3D，快门式3D，裸眼3D研究掌握裸眼3D终端软件、硬件技术研究支持裸眼3D的终端及其智能操作系统的相关技术研究设计支持3D效果的手机视频客户端架构研究支持裸眼3D的视频客户端的开发和实现，为后续实际客户端的开发提供技术参考研究2D内容转3D内容的技术方案，分析各种方案的可行性。中国移动视频基地目前拥有大量优秀的2D视频资源，能否将这些资源充分利用到将来的3D业务中，是一个重要的研究课题。,1.2 主要研究内容及分工,1.2 研究历程,联同研究院分析项目研究目标，与中国移动视频业务的实际情况相结合，确定重点关注的领域。,根据双方确认的重点研究领域和方向，梳理研究报告大纲，以及内容分工；研究院重点关注移动终端3D技术标准，技术方向和技术方案；视频基地重点关注3D视频业务运营，以及与现有视频业务的融合方案。,需求分析确认研究方向和目标,梳理研究报告大纲，确认分工,与Sharp，水晶石等公司交流调研3D技术方案；与Sandisk，合力迅达等公司交流调研3D高清视频预置技术方案。,充分调研，把握3D技术方向与动态,与研究院汇总双方的调研报告，形成基于智能终端的裸眼3D终端技术及3D视频业务发展研究报告,汇总技术调研信息，形成技术报告,1.2 研究历程技术调研过程,时间：2011年3月 调研目的：调研移动终端裸眼3D技术实现方案调研对象：Sharp公司，Sharp在裸眼3D屏幕制造领域处于业界领先地位。调研成果：形成裸眼3D技术分析报告。,时间：2011年4月 调研目的：3D视频动画制作方案调研对象：水晶石公司，专注于以三维图像为核心的数字媒体技术，并涵盖影视拍摄、互动程序开发、互联网图像应用等多方面技术领域。调研成果：形成3D视频制作技术分析报告。,时间：2011年5月 调研目的：调研高清视频内容预置方案调研对象：SandDisk公司，SanDisk是闪存卡生产和销售领域的领导者，基于SandDisk的SD card，该公司推出了完整的视频内容预置方案。调研成果：整理形成JIL Card方案技术报告。,1.2 研究历程技术调研过程,时间：2011年7月调研目标：调研类OMA DRM解决方案调研对象：合力迅达，是移动数字版权保护方案提供商和行业领先者，是中国移动音乐基地的合作伙伴。调研成果：形成类OMA DRM技术分析报告。,时间：2011年8月调研目标：2D转3D软件与硬件解决方案调研对象：无锡景象，是“立体中国”计划的产业化实体，致力于数字媒体技术的产业化。调研成果：形成2D转3D方案技术分析报告。,时间：2011年6月调研目标：2D转3D技术方案，3D视频制作技术调研对象：福丰达，整合先进3D技术和资源，自主研发了2D转3D智能转制系统，拥有一套独特、严密的2D转3D制作流程。调研成果：形成2D转3D方案技术分析报告。,1.3 目标完成情况技术创新点,融合2D/3D视频客户端概述：基于现有旗舰客户端界面加入3D内容专区，可放在“垂直栏目”区或“合作伙伴”专区；3D内容专区加入预置内容子栏目“3D体验区”，提供内容较新、效果较好的3D视频；播放界面（包含横竖屏）增加2D/3D切换功能，便于快速实现两种效果切换。,创新点：支持2D/3D视频无缝融合和平滑切换的业务客户端方案 较低成本将3D视频业务融合到现有客户端，并保证了用户体验；预置内容，使用户直观感受3D效果，便于业务推广；,基于现有旗舰客户端界面加入3D内容专区，可放在“垂直栏目”区或“合作伙伴”专区；,播放界面（包含横竖屏）增加2D/3D切换功能，便于快速实现两种效果切换。,1.3 目标完成情况技术创新点,流媒体系统架构图概述：所有视频采用两路摄像设备录制，左右眼视频逻辑上分别存储在不同的媒体服务器；3D视频整合分发服务器负责按照不同3D技术，合并形成3D视频流（裸眼、偏振、红兰、或者直接提供2D视频流）；流媒体门户接口服务器负责与不同的终端和3D设备交互设备信息，通知3D视频整合服务器，制造合适的流媒体视频源；各种3D终端可以收看符合自己技术的3D视频，2D终端可以收看2D视频。,通过更新流媒体服务器架构，增加流媒体门户节点提出支持2D/3D视频无缝融合和平滑切换的业务方案 2D/3D视频格式自适应；2D/3D视频无缝融合，减少资源浪费，和重复建设；方便扩展支持的3D视频制式。,1.3 目标完成情况解决关键问题,3D视频业务与现有2D视频业务无缝融合，扩大业务范围,目前手机视频整个流媒体系统主要包含终端域、门户域、能力域、运营域：终端域指终端接入流服务平台的各种视频客户端、插件等组件或应用；门户域是与终端域各客户端对应的服务接入点，包含各客户端门户、MM接入门户及其它接入子系统；能力域主要包含流媒体分发、存储、下载、管理等子系统；运营域负责业务运营及管理主要包含：内容管理子系统、运营管理子系统、内容转码子系统等；核心域负责业务管控，主要包含：业务管控子系统、分账管理子系统、用户管理子系统等。,涉及改造：为实现整个系统对3D视频业务的支持，需要改造系统中：旗舰客户端、旗舰客户端门户子系统、能力域的流媒体及下载子系统、运营域的运营管理子系统、内容转码及管理子系统。,1.3 目标完成情况解决关键问题,利用目前丰富的2D视频资源，通过2D转3D技术解决3D视频内容稀缺问题,现有3D内容较少，为提供更丰富的3D内容，系统将增加2D内容转3D内容的转码模块，这样可充分利用现有的视频内容。目前2D转换3D有两种方式：一种是在终端实时转换，基于终端自带的通用处理器，由软件进行实施转码，实时显示，该方式对终端性能要求非常高，目前还没有稳定方案；一种由服务器离线转码，可采用专业处理芯片或软件进行转换，转换过程还可以人工干预，提高转换效果，目前已形成经典算法，转换效果好。,方案选择：终端实时转码对终端性能要求很高，目前还没有成熟的方案，因此本研究主要考虑服务器离线转码的方式，预先将2D内容转换好。转码组件可添加到运营域的内容转码子系统。,1.3 目标完成情况关键技术决策点,研究和提出了2项关键技术点的决策建议,决策点：2D视频转3D视频方案决策内容：完成对2D转3D各种技术对比调研工作，选择适合目前终端配置和业务运营需要的2D转3D技术方案决策过程：通过与多家厂商的技术交流和调研工作，目前手机终端的性能无法满足软件2D转3D需求，而专有专换芯片还存在功耗过大，尺寸过大无法在现有移动终端使用等问题。决策结论：经过技术研究，和多方案对比，受限于目前手机终端的性能以及专业的2D转3D芯片功耗过高问题，手机终端进行2D转3D方案仍然不成熟，因此目前适合中国移动视频业务发展的2D转3D方案应当采取服务器预转换的方案，可以保证3D视频的转换效果。,决策点：3D高清视频预置方案决策内容：完成高清视频预置方案的对比研究，确定使用类OMA DRM 方案。决策过程：通过与Sandisk、合力迅达等公司的技术交流与调研工作，发现JIL CARD方案的局限性较大必须使用Sandisk的JIL Card，而OMA DRM有较成熟的实施方案。决策结论：经过技术研究，和多方案对比，JIL Card方案局限性较大。因此高清视频的预置方案采用类OMA DRM 2.0方案，且该方案在中国移动音乐业务中已经有成功的实施案例。,1.3 目标完成情况专利申请情况,申请相关技术专利2个：,视频帧流处理方法、视频服务器及终端设备 研究院 已经通过集团评审 YF1106047该专利提供了一种新的视频保护方法，对于3D视频效果尤佳。该专利可以在保证现有视频业务架构不发生较大变化的情况下，提供数字版权保护解决方案。该专利为基础的技术专利，适用范围广泛，在满足一般的数字版权保护需求的同时，还可以提供精准时间授权的方案，提高数字版权保护的精确性。对于中国移动推广视频业务具有很大的实用价值。,3D立体视频编码传输方法及装置 研究院 已经通过集团评审 YF1106037 该专利提出一种基于CMMB的3D立体视频编码与传输方法，以满足运营商基于移动多媒体广播技术提供3D视频业务的技术需求。本提案基于CMMB标准对3D视频的编解码及传输进行了改进，并且充分考虑到了部分终端不支持3D视频的市场因素，能够适用于大部分终端。创新性较为明显，具有一定市场前景。,16,1.3 开题计划完成情况总结,联合项目组成立、项目立项讨论,1月,项目任务分工与时间规划,2月,项目开题,3月,联合项目组例会、中期进展讨论,6月、8月,联合项目组例会、项目结项讨论,本课题按照开题既定目标完成研究报告一份，并且超计划输出专利两个,10月、11月,结题评审,1.3 目标完成情况总结主要研究领域,3D视频制作技术立体动画制作立体视频拍摄半自动2D转3D技术3D编码技术双路独立编码方案双拼编码方案联合预测编码方案颜色深度编码方案,对3D技术领域进行了充分研究和调研，并且形成了详细的技术分析报告,3D显示技术分色技术光分技术时分技术指向光源狭缝光栅柱状棱角视频预置方案类OMA DRM 2.0方案JIL CARD方案,1.3 目标完成情况总结主要研究领域,3D视频业务运营方案3D视频引入方案和流程业务运营系统架构流媒体及下载系统架构内容转码方案登陆流程变更3D内容发布流程,对3D视频业务的系统架构方案和运营方案了充分研究和调研，并且提出了适合中国移动视频业务发展的建议报告,1.3 目标完成情况总结,1.4 项目企业绩效贡献和特征指标,1.4 项目企业绩效贡献和特征指标,项目特征指标的年度预期数值表,一.课题目标实现情况,目 录,二、主要研究成果（整合后）,2 主要研究成果（目录）,国内外3D视频产业的现状及发展趋势3D视频业界相关的技术方案3D视频业务标准化工作3D视频业务内容引入及运营基于现有业务架构的裸眼3D业务开发及运营方案,2.1 国内外3D视频产业的现状及发展趋势,3D产业发展历程,1844年，一位名字叫做D.B的外国人通过一个立体镜拍下了世界上最早的3D照片；1915年，全球首部3D电影爱的力量开始制作，于1922年正式公映；1935年，首部彩色3D电影面世；20世纪50年代是3D发展的黄金时期，美国开始出现不少3D电影作品，迪士尼、环球国际、哥伦比亚等片商都开始投资3D电影；20世纪80年代中期，IMAX开始制作首部3D纪实片；2008年，日本有线BS 11频道开始播送3D电视节目；2009年12月，耗资5亿美元的电影巨作阿凡达3D、3D IMAX等多种版本在全球公映，掀起了全球3D热潮；2010年初在美国CES展会上，包括索尼、三星、松下等国际一线电视厂商纷纷推出3D电视新品；2010年4月，天空传媒开办3D电视频道。2010年6月，ESPN开设新的3D体育频道，南非世界杯成为史上首次进行3D转播的世界杯比赛；。,从早先的3D电视到如今的3D投影、3D笔记本、3D手机、3DPAD、3DMP4/MP5、3D数码相机/摄像机、3D数码相框，从需要配戴3D眼镜才能享受到逼真、震撼的3D效果到更为先进的裸眼3D技术，3D产业正以惊人的发展速度影响着人们的生活，相信在不久的将来3D技术会彻底改变人们以往传统的娱乐方式，真正步入全民3D的时代。,2.1 国内外3D视频产业的现状及发展趋势,3D产业国内外发展现状,在3D电视产业链中3D内容制作、视频编码与传输、终端显示等各个环节，国外都已进行标准的布局，并为不同的3D实现方式开发专有的技术标准，成立了多个产业联盟，用以推动各自3D技术标准的产业化。目前，国内相关企业和科研院所在3D内容制作、3D编解码技术、3D传输与储存、3D显示终端等方面已经拥有一定产业基础。据了解，我国开展3D技术研究和产品研发的企业已有几十家。在3D标准制定方面，作为行业主管部门，工业和信息化部高度重视标准对产业发展的支持作用，积极指导和推进国内立体电视标准化工作，在工业和信息化部2010年第一批行业标准制修订计划中立项了立体电视图像质量测试方法行业标准，并积极推进立体电视术语国家标准的立项工作。这两项标准对立体电视行业发展具有重要指导意义。,国际上，SCTE、ATSC探讨3D节目分发标准，在有线及地面数字电视上3D信号的传输，解决发送如1080p/60、3D和双向交互等格式的问题；3-D4YOU项目成员包括BBC、法国电信、飞利浦和汤姆逊，定义3D电视的采集、编码和格式等规范；2010年，我国音视频标委会积极筹建“立体显示标准工作组”，同时组织国内骨干企业和研究院所，开展立体显示相关的信号编解码、传输方式、接口、图像质量评价、舒适度等标准的研究制定。,在3D核心芯片方面，海信TCL、上海华亚等企业已取得一定的成果。天津大学、清华大学、北京大学、南京大学、浙江大学等高校都已开展3D立体显示方面的研究。其中无锡景象数字技术有限公司联合清华大学已成功自主研制出“清立方”立体视频转换芯片，该芯片可实现平面视频高质量的立体转换，集成该芯片的各类立体终端可将普通的平面视频信号实时的转换为立体视频内容。定价远低于国外同类产品。,在3D内容方面，好莱坞各大电影公司都宣布今后主要和重要的影片都将用3D技术拍摄和放映。世界最大的视频网站YouTube提供3D视频服务。目前国内3D产业依然存在内容资源匮乏的问题，一些下游终端企业与内容服务商正在积极进行有效的尝试，试图打破3D内容瓶颈的问题。在电视转播方面，美国、英国、俄罗斯、意大利等国各大广播公司已开播3D电视频道或即将开通3D节目服务，2010年我国电视台也开始进行了一些测试。比如，中央电视台在南非世界杯进行了3D世界杯的台内测试。,国内外厂商包括飞利浦、三星和索尼、TCL、海信、长虹、创维等企业都已推出了3D电视，同时各类3D产品也层出不穷，包括：裸眼3D手机、3DPAD、3D笔记本、3DS游戏机等。在3D显示技术国际标准制定方面，IEC/TC110列出了未来几年内立体显示技术的标准制定路线图，并开始按计划向前推进。,2.1 国内外3D视频产业的现状及发展趋势,3D产业发展趋势总体,全球3D产业将保持较快的发展速度，但总体上仍将处于发展初期；欧美主导内容市场，东亚主导终端市场的产业格局更趋显性；产业链的横向和纵向整合将成产业发展的重要趋势；以产业标准为主导的产业话语权争夺进一步加剧。,3D内容制作技术和显示技术将成为未来3D技术重点的突破路径；存储和传输技术的发展将为立体影视发展带来直接的技术动力；裸眼3D将成为3D产业发展的终极方向；,3D产业发展趋势技术,2 主要研究成果（目录）,国内外3D视频产业的现状及发展趋势3D视频业界相关的技术方案3D视频业务标准化工作3D视频业务内容引入及运营基于现有业务架构的裸眼3D业务开发及运营方案,2.2 3D视频业界相关的技术方案3D视频制作,立体动画制作,立体动画是当前立体市场的主力，三维模型渲染技术（3D CG）是目前立体电影制作的主要手段，其特点：与传统CG（Computer Graphics）电影制作流程基本相同；只需要在场景合适的位置架设2台虚拟相机，配合以后期的微调，就可以实现立体内容的制作；成本较低，对设备的要求不高，基本还是遵循了传统立体制作的方式。,2.2 3D视频业界相关的技术方案3D视频制作,立体拍摄,拍摄立体电影时需将两台摄影机架在一具可调角度的特制云台上，并以特定的夹角来拍摄。立体电影拍摄需要注意的五个事项：拍摄团队 摄影师必须有经验，因为立体片在取景方面要把握深度感觉；双摄影机的架设，要符合立体成像的技术要求；成品输出的工作除了工作量成倍的增加以外，两台摄影机拍摄的画面在指标与色彩方面无法完全一致，需要后期进行平衡处理；立体的特效动画、包括（片头、片花、字幕等）都需要进行立体处理。,优点：直接采集了完备的立体信息，立体真实感强、后期制作效率高。缺点：设备昂贵；操作不方便；效果不直观；缺乏拍摄经验。,2.2 3D视频业界相关的技术方案3D视频制作,半自动2D转3D,将现有的平面片源转为立体片源，效果可以接近实拍电影；核心技术在于生成平面片源对应的深度图；人工参与深度判断，得到精细的深度图结果。,2D转3D可以获得很好的效果，阿凡达中的少数镜头也采取了2D转3D的处理。不过针对一部2D影片而言，后期转3D需付出巨大的成本，才可能获得好的效果。不同影片，应当根据不同生产方式和预算来进行最适合自己的选择。爱丽丝梦游仙境2D转3D的费用大概是一分钟8万美元。,2.2 3D视频业界相关的技术方案3D视频制作,全自动2D转3D,根据不同的视频场景，有不同的处理方法：图像集合（机器学习及分类）、单目深度线索、SFM(Structure from Motion)方法、基于时间差(Time Difference)的方法、基于运动估计的方法。,2.2 3D视频业界相关的技术方案3D视频制作,全自动2D转3D,除了上述基于各场景的方法外，还可综合各种方法一起使用，进行转换，其特点如下：优点：多种深度线索提取与融合，深度可靠性强缺点：算法复杂运算量大，无法对一个场景应用所有算法，面临如何根据场景筛选算法的困难。,2.2 3D视频业界相关的技术方案3D视频编码,双路独立编码方案,原理：双路独立编码方案分别对左路和右路视频进行独立编码，经过压缩传输后，在解码端分别解码出左视点和右视点两路视频供立体显示采用。,特点：该方案可重复使用之前的软件方案和硬件系统，开发成本低，但是压缩码率为两路码流的叠加，视频冗余信息多，占用带宽大。,2.2 3D视频业界相关的技术方案3D视频编码,双拼编码方案,原理：将左右两个视点视频分别1/2下采样后拼接成为一路视频，然后送入视频编解码器进行处理。,特点：相比两路视频分别传输，立体视频拼接的编码方案仅需传输一半或者更少的数据，因此能够减小传输带宽和降低解码器复杂度。此外，拼接后的图像能利用传统的单路编码器直接压缩，与目前市场上流通的单路视频解码器具有很强的兼容性。,2.2 3D视频业界相关的技术方案3D视频编码,联合预测编码方案,原理：编码时，对双目立体视频中左视点视频利用单路视频编码方法进行编码，得到第一路码流；对于右视点视频，在原有单独编码的基础之上，增加视间预测技术。,特点：相比两路视频分别传输，联合预测方案能够节省30%左右的码率，并保证全分辨率的精度，具有明显的技术先进性。最新完成的国际立体视频编码标准MVC也采用的是这种联合预测结构，代表着3D立体视频未来主流编解码方案。,2.2 3D视频业界相关的技术方案3D视频编码,颜色+深度编码方案,原理：发送端只需要编码单路彩色视频和每个像素的深度信息，而在终端通过DIBR（Depth-Image Based Rendering）重建出多路视点。,特点：视频+深度的编码方案能够以较低的传输码流实现多视点视频的渲染和重构，并且深度信息能够支持更加灵活的用户交互性，实现更多客户端功能应用。,2.2 3D视频业界相关的技术方案3D视频编码,编码方案总结,2.2 3D视频业界相关的技术方案显示,分色显示方案,原理：分色技术简单的说就是使用“红蓝（或者红-绿、红-青）眼镜”将左右眼睛看到的画面分离出来，这种电影在电影后期制作的时候将左眼的影像和右眼的影像分别进行偏红和偏蓝的着色，在播放电影时将这两种不同偏色的影像重叠播放，观看电影时戴上特制的“红蓝眼镜”，一只眼镜红色镜片另一只眼镜蓝色镜片，通过不同的颜色过滤，使左右眼看到不同的两幅影像。,优点：技术历史最为悠久，成像原理简单，实现成本相当低廉，眼镜成本仅为几块钱。缺点：改变了图像的色彩，看到的画面的颜色有很大的失真，其次由于迫使两只眼睛通过不同颜色的镜片，观看电影时对眼睛的刺激比较大，容易造成眼睛疲劳，影像叠影会比较严重，因为红蓝镜片无法完全过滤掉所有的色彩，效果不甚理想。,2.2 3D视频业界相关的技术方案显示,分光显示方案,原理：偏振立体眼镜与偏振的片源配合，片源通过奇偶帧分别播放左眼和右眼的信号，通过立体分配分开，进入两个投影机，通过偏振光透射而出，偏振眼镜两个眼睛分别允许不同偏振光进入，于是就接收了各自眼睛的信号，最终产生了立体感。,优点：偏光式眼镜价格低廉，3D效果出色，市场份额大缺点：安装调试繁琐，成本不便宜。,2.2 3D视频业界相关的技术方案显示,时分显示方案,原理：时分技术主要是通过提高画面的刷新率来实现3D效果的，通过把图像按帧一分为二，形成对应左眼和右眼的两组画面，连续交错显示出来，同时红外信号发射器将同步控制快门式3D眼镜的左右镜片开关，使左、右双眼能够在正确的时刻看到相应画面。,优点：保持画面的原始分辨率，很轻松地让用户享受到真正的全高清3D效果，而且不会造成画面亮度降低；缺点：画面闪烁，不稳定，对显示器的要求很高。,2.2 3D视频业界相关的技术方案显示,指向光源显示方案,原理：指向光源（Directional Backlight）3D技术搭配两组LCD，配合快速反应的LCD面板和驱动方法，让3D内容以排序（sequential）方式进入观看者的左右眼互换影像产生视差，进而让人眼感受到3D三维效果。,优点：分辨率、透光率方面能保证，不会影响既有的设计架构，3D显示效果出色；缺点：技术尚在开发，产品不成熟。,2.2 3D视频业界相关的技术方案显示,狭缝光栅式显示方案,原理：狭缝光栅式3D技术的原理和偏振式3D较为类似，是由夏普欧洲实验室的工程师十余年研究成功的。光屏障式3D产品与既有的LCD液晶工艺兼容，因此在量产性和成本上较具优势，但采用此种技术的产品影像分辨率和亮度会下降。其实现方法是使用一个开关液晶屏、偏振膜和高分子液晶层，利用液晶层和偏振膜制造出一系列方向为90的垂直条纹。这些条纹宽几十微米，通过它们的光就形成了垂直的细条栅模式，称之为“视差障壁”。而该技术正是利用了安置在背光模块及LCD面板间的视差障壁，在立体显示模式下，应该由左眼看到的图像显示在液晶屏上时，不透明的条纹会遮挡右眼；同理，应该由右眼看到的图像显示在液晶屏上时，不透明的条纹会遮挡左眼，通过将左眼和右眼的可视画面分开，使观者看到3D影像。,优点：与既有的LCD液晶工艺兼容，因此在量产性和成本上较具优势；缺点：画面亮度低，分辨率会随着显示器在同一时间播出影像的增加呈反比降低。,2.2 3D视频业界相关的技术方案显示,柱状棱角3D显示方案,原理：柱状棱角技术是在液晶显示屏的前面加上一层柱状透镜，使液晶屏的像平面位于透镜的焦平面上，这样在每个柱透镜下面的图像的像素被分成几个子像素，这样透镜就能以不同的方向投影每个子像素。于是双眼从不同的角度观看显示屏，就看到不同的子像素。不过像素间的间隙也会被放大，因此不能简单地叠加子像素。让柱透镜与像素列不是平行的，而是成一定的角度。这样就可以使每一组子像素重复投射视区，而不是只投射一组视差图像。之所以它的亮度不会受到影响，是因为柱状透镜不会阻挡背光，因此画面亮度能够得到很好地保障。不过由于它的3D显示基本原理仍与视差障壁技术有异曲同工之处，所以分辨率仍是一个比较难解决的问题。,优点：3D技术显示效果更好，亮度不受到影响；缺点：相关制造与现有LCD液晶工艺不兼容，需要投资新的设备和生产线。,2.2 3D视频业界相关的技术方案内容预置,3D视频预置技术方案（版权保护）,通过将手机视频业务客户端与Sandisk JIL卡建立安全访问的绑定关系，客户端成为能够访问与播放JIL Card安全区中视频的唯一应用。通过JIL卡安全区域的访问控制能力对用户访问预置视频内容进行访问策略控制。,类OMA 2.0 DRM目前的应用模型只有分离发送。采用http方式请求和下发版权。使用类似OMA 2.0 DRM引擎进行版权管理，使用对称加密方式加密。版权对象RO请求响应消息格式采用类似OMA DRM2.0相关格式，内容格式采用OMA DRM1.0 DCF。,通过对原始视频文件的视频流进行分组乱序处理，并记录视频帧乱序信息。达到保护视频文件的版权保护目标。该方案已经申请专利。,类OMA DRM 2.0,视频帧流处理方法,JIL Card,2 主要研究成果（目录）,国内外3D视频产业的现状及发展趋势3D视频业界相关的技术方案3D视频业务标准化工作3D视频业务内容引入及运营基于现有业务架构的裸眼3D业务开发及运营方案,2.3 3D视频业务标准化工作,3D视频业务标准化,3D终端总体技术要求需要明确3D移动终端的以下内容：终端的性能要求终端存储分发要求3D视频的编解码以及封装格式要求版权保护要求业务获取要求显示标准要求,3D业务总体技术要求，业务总体技术要求需要明确移动终端3D业务的以下内容：业务分类、概念及功能建议根据业务所需的QoS支撑力度进行分类，并定义其具体业务概念和业务功能。业务要求：首先，应针对不同业务定义采取的信源编解码方式、文件格式等；其次，不同3D业务类型需要不同的网络QoS支撑，需定义各类业务对时延、丢包率、传输带宽等QoS指标的要求。典型的3D业务实时性需求由小到大为：3D彩信、3D视频浏览与下载和3D视频会议。网络结构业务流程移动终端3D业务质量评价,2 主要研究成果（目录）,国内外3D视频产业的现状及发展趋势3D视频业界相关的技术方案3D视频业务标准化工作3D视频业务内容引入及运营基于现有业务架构的裸眼3D业务开发及运营方案,2.4 3D视频业务内容引入及运营,3D内容引入,步骤1：与3D内容提供商沟通、交流，就3D内容引入达成合作意向；步骤2：与3D内容提供商就3D内容合作模式、版权管理等细节进行商务洽谈；步骤3：与3D内容提供商达成一致，双方签订合作协议；步骤4：3D内容提供商按协议提供3D内容；步骤5：运营3D内容。,2.4 3D视频业务内容引入及运营,3D内容运营,步骤1：从3D内容提供商获得3D内容；步骤2：将3D内容交由有资质的组织进行内容审核；步骤3：审核通过后，将3D内容分发到内容管理平台；步骤4：3D内容在发布到内容管理平台后同步到运营管理平台；步骤5：最后将3D内容发布到3D内容门户或服务节点；步骤6：3D内容上线后，被下发到客户端，最终呈现到用户。,2 主要研究成果（目录）,国内外3D视频产业的现状及发展趋势3D视频业界相关的技术方案3D视频业务标准化工作3D视频业务内容引入及运营基于现有业务架构的裸眼3D业务开发及运营方案,2.5基于现有业务架构的裸眼3D业务开发及运营方案,现有视频业务整体架构,终端域：终端接入流服务平台的各种视频客户端、插件等组件或应用；门户域：与终端域各客户端对应的服务接入点，包含各客户端门户、MM接入门户及其它接入子系统；能力域：主要包含流媒体分发、存储、下载、管理等子系统；运营域：负责业务运营及管理主要包含：内容管理子系统、运营管理子系统、内容转码子系统等；核心域：负责业务管控，主要包含：业务管控子系统、分账管理子系统、用户管理子系统等。,3D视频业务的定位比较高端，因此本研究主要基于现有的旗舰产品线。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,旗舰客户端介绍,首页,播放页,播放页全屏,2.5基于现有业务架构的裸眼3D业务开发及运营方案,3D视频业务整体架构,3D视频业务的定位比较高端，因此本研究主要基于现有的旗舰产品线。为实现整个系统对3D视频业务的支持，需要改造系统中：旗舰客户端、旗舰客户端门户子系统、能力域的流媒体及下载子系统、运营域的运营管理子系统、内容转码及管理子系统。由于目前3D内容较少，系统将增加2D内容转3D内容的模块，目前2D转换3D有两种方式：一种是在终端实时转换；另一种由服务器离线转码。终端实时转码对终端性能要求很高，目前还没有成熟的方案，因此本研究主要考虑服务器离线转码的方式，预先将2D内容转换好。转码组件就添加到运营域的内容转码子系统。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,3D视频流编解码方案,3D视频编码方案选用目前最成熟的双路独立编码方案，该方案可与目前流媒体系统兼容，开发成本最低，该方案缺点是码流占用带宽大相当于两路2D码流的叠加，但随着3G及WLAN网络的普及，带宽的瓶颈已经越来越小。,编解码及终端显示方案,目前市面上的裸眼3D终端的显示方案主要是基于狭缝光栅式3D显示技术，3D流媒体业务可基于该类型的终端。但原理上3D流媒体业务并不受限于3D显示技术，理论上可在任何3D显示终端上实现，随着裸眼3D显示技术的不断发展，3D流媒体业务通过与不同显示技术的适配就可方便的扩展到各类3D终端上。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,3D视频业务服务端架构,为增加3D视频业务能力，要对业务平台的内容转码子系统、流服务子系统、旗舰客户端门户等子系统进行如下改造和配置：旗舰客户端门户子系统需改造成能识别不同机型的3D能力到客户端下发对应的节目页面。内容转码子系统需改造成支持3D内容转码和2D内容转3D内容的能力；流媒体子系统及下载子系统需进行改造支持3D视频流的分发和下载，可基于现有的HTTP协议；运营子系统和内容管理子系统需增加3D栏目的管理能力，可能不需要系统改造，只需要更新配置。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,旗舰客户端门户子系统,旗舰客户端门户子系统需改造客户端接入组件和应用展现组件。客户端接入组件获知客户端上报的是否支持3D的属性，然后应用展现组件下发对应的展现形式和节目列表到客户端。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,内容转码子系统,转码子系统需新增2D转3D能力、3D内容码率及分辨率转换能力。步骤1：内容管理子系统向内容转码子系统发送转码请求；步骤2：内容转码子系统将转码请求调度到不同转码器；步骤3：转码器将内容转换成3D和不同的码率及分辨率；步骤4：转码完成后，将内容保存到共享存储。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,流服务及下载子系统,流服务及下载子系统需改造成支持3D视频流的能力：共享存储分别存放左右眼视频数据；2D/3D视频整合分发系统根据不同需求合并生成2D或3D视频数据分发到流服务子系统和下载子系统；流服务子系统和下载子系统再将2D/3D数据下发到客户端。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,3D内容发布流程,步骤1：3D内容准备（如为2D内容，后续流程将转换成3D内容），申请内容发布审核；步骤2：进行内容审核；步骤3：审核通过后，内容管理子系统会进行集中转码，将需要转换的2D内容转换成3D内容，并将3D内容转换成各分辨率和码率；步骤4：转码完成后，内容管理子系统将内容分发到流服务子系统；步骤5：内容管理子系统将节目同步到运营管理平台；步骤6：运营管理子系统将3D内容发布到旗舰客户端门户子系统。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,旗舰客户端架构,裸眼3D的视频客户端基于目前的手机视频旗舰客户端软件架构，重点改造播放器模块和客户端登陆及应用界面（如上图红色背景模块）。客户端登陆流程变更，客户端登陆服务节点时上报该机型是否支持3D显示的标识，便于服务节点下发包含3D节目的页面；播放器需改造使支持3D内容格式解析，至少支持目前已经成熟的“独立编码”和“双拼编码”技术；客户端界面需修改增加3D栏目专区、增加2D、3D切换功能和交互界面。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,登陆流程变更,客户端登陆流程变更，客户端登陆服务节点时上报该机型是否支持3D显示的标识，便与服务节点下发包含3D节目的相关内容：增加3D栏目专区，以及节目列表内包含支持3D视频源的节点等,2.5基于现有业务架构的裸眼3D业务开发及运营方案,基于现有旗舰客户端界面加入3D内容专区，可放在“垂直栏目”区或“合作伙伴”专区；3D内容专区加入预置内容子栏目“3D体验区”，提供内容较新、效果较好的3D视频；播放界面（包含横竖屏）增加2D/3D切换功能，便于快速实现两种效果切换。,客户端用户界面变更,2.5基于现有业务架构的裸眼3D业务开发及运营方案,内容引入方案,中国移动将根据手机视频业务的产品规划和用户需求，本着公平、公正、公开的原则，对内容合作伙伴的行业地位、内容储备量、稀缺性、生产能力等进行综合评估，择优选取。一般的流程如下：步骤1：3D内容提供商与移动经过充分沟通、交流，达成合作意向；步骤2：3D内容提供商向移动提交内容合作申请；步骤3：移动内部组织相关人员对3D内容提供商进行评审；步骤4：移动相关负责人根据评审结果进行决策；步骤5：移动决策同意合作后，与3D内容提供商签署合作协议；步骤6：结果报备。,2.5基于现有业务架构的裸眼3D业务开发及运营方案,高清3D内容预置,为吸引用户，便于用户提前体验3D效果：可在客户端提前预置一些较新、较经典、效果较好的高清3D视频片段；版权保护技术选择类OMA DRM2.0方案；手机视频客户端中的3D专区将设“3D视频体验”区，用户可免费快捷的体验3D视频。,65,结束,谢谢大家！,MajpjMVcyzj21HLfrvy96dv02lPPfYgxUS7IYmZkyEmZ0kGeYZS3bpLCkYH1lt4EK7CxmUX3ijoYSOer7ZuaVWYgz4EpZrUirVpMzzvNtf1XZw5oswSXOtFaejnOcmfE1lZgnN1RSXg8wLCG8CVQ3XPJMvodPFWcpiYJgZazNSEPNIaklYSu7qSd1UpaxmZDlpN9zW7kljfsLCLi26Yv109ffbnDH8LbUN1G6ACURQ39eG12KHL9tXsZ1jzgoCK8g1kuNOh5eFvcmVT5ZYVQt9zk3rp3qLnf02FovEXxVRxjCcFRNppiJljNiOuk6fONnyX7fyGg7sXZ49BmCN5oy9VesHpKzdjTKwjrkCEQCFDehVmGax3lrOEbw63VscA3YSijtUKoCyiLzAlVRp7l4QgPNHxvJFFDyjUVN3oHlMah0XBd4uTbkfPIhHtw0evPmYOrdhEDoPwvYhzlGplU1AU9mpyiCXH8gpPCBRYjq77VcnbXumNE1yGfyTsbSj89J63kRTKDkKUg3mdS5sJ4X5cQ8dK7oW9IkScssECQdz2O9UTlpRjAFPChjhLdzopQz