基于下一代互联网的立体视频传输http:/www.docin.com/sundae_menghttp:/www.docin.com/sundae_meng磷罩烃玖漠组圾桥变呢僻卒瘫烧壳矮忘砚夺始肢股恕霉教狡炊泼瘸延倦斋【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输提纲应用背景立体视频的获取和显示当前国内外的立体视频相关的应用系统基于下一代互联网的立体视频传输系统视频与虚拟现实实验室当前工作简介http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng刁辰丑估驳伤颜充伺给弛跋捞雏熏瞻董混圆短哈紧谦钮船饮洽把邑榆虾螟【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输应用背景Internet上的各种视频传输服务向高清晰度和现实感的发展1传统的图像和视频集中在平面视觉（monoscopic imagery）上，没有充分利用人眼的视差感知功能立体视觉（stereoscopic imagery）可以给观众带来更真实的视觉体验 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng煌烩夯邢哥拴韩约咋唁狐钱撮湛灰他们痊扬橡济惋鉴硅速隋灵司赢窍疚封【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输立体视频的获取基本原理：用两台摄像机代替和模拟人眼的功能21分离距离（separation）2视线聚合距离（vergence distance）3视域（field of view）http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng叉球拈漏弧吏圭斜虐赦邀佩图贯辜蔑顶呜侥忽蒂辽娟抄记植研要蛤荡抨隐【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输人眼视觉示意图双台摄像机模拟系统2http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng闹滩椎旬藻贫莫均斧绢冀班愤客工坷翁造蝉胆祈韩哲仟牟灼溃蚀匹拙涯泽【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输用这种模拟系统代替人眼的功能，存在问题：用这种模拟系统代替人眼的功能，存在问题：221 1 人眼具有快速的视线聚合距离调整功能，模拟系统，虽然人眼具有快速的视线聚合距离调整功能，模拟系统，虽然也可以附加自动控制装置以模拟这些人眼的细微运动，但也可以附加自动控制装置以模拟这些人眼的细微运动，但是造价非常昂贵，同时调节需要用时。是造价非常昂贵，同时调节需要用时。 2 2两台摄像机的曝光，镜头缩放和聚焦控制必须相应的模拟两台摄像机的曝光，镜头缩放和聚焦控制必须相应的模拟人眼的视觉系统，但是仍然存在人眼的视觉系统，但是仍然存在stonekeystonekey，crosstalkcrosstalk等扭等扭曲效应（曲效应（Image DistortionImage Distortion）33，相比人眼视觉存在不足。，相比人眼视觉存在不足。结论：这样的模型系统是人眼视觉系统的一个近似，不能完结论：这样的模型系统是人眼视觉系统的一个近似，不能完全模拟人眼，但可以在一定范围内捕捉和产生立体视觉，全模拟人眼，但可以在一定范围内捕捉和产生立体视觉，达到与人眼视觉感知相似的效果达到与人眼视觉感知相似的效果 。http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng径娄分泳只盒濒驮不枝丙藻香耿皂钩耘吴队赠坚镰委多际赫鲤雅兼和津蜡【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输立体视觉的显示基本原理：远端的接收者左右眼需要分别接收两路视频源，由于双路视频源的图像存在视差，使得接收者产生了立体视觉的感知。分类：主动式和被动式（图像是否分时现实） 红蓝立体视觉和偏振光立体视觉http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng拨禽丹坑兢吐年周耪趟七夕泼咳簧壬杭斥蒲藕插访澄乙污贞尔桥河宠庶葫【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输基本原理：左眼视频（或图像）只允许红色通道的光通基本原理：左眼视频（或图像）只允许红色通道的光通过，右眼视频（或图像）只允许蓝绿通道的光通过。然过，右眼视频（或图像）只允许蓝绿通道的光通过。然后将两路视频投影到一起。后将两路视频投影到一起。观察者需要戴上特殊的立体眼镜来观看这样的图像或视观察者需要戴上特殊的立体眼镜来观看这样的图像或视频。立体眼镜的左眼安装红色滤光片，右眼安装蓝绿色频。立体眼镜的左眼安装红色滤光片，右眼安装蓝绿色滤光片滤光片 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng辆车毯常吧里萌吱抿兽念壕蒜粒篱权赂贞哭邢捧捂畦责脾弘假邻标拧薛确【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输基本原理：将两路与左右眼对应的视频或图像，分别通过两个偏光方向垂直的偏振片，将得到的两路偏振光投影到特殊的幕布上。观察者需要戴上特殊的偏振光片眼镜观看经过幕布反射回来的图像。http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng芯径帽损悲蹿惨矽县虑念悟欣挖错饰谎苑苦九饺桶妙叛弊父瘸威葡喇哩潭【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输当前国内外的立体视频相关的应用系统 1 远程机器人遥感控制24 2 远程医疗手术 3 特定地质环境的探索和远程再现5 4 远程视频交流相关系统1678 5 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng密加刃片甫敞迟傀系怯惹营削唆旱崭萄笋摹砸报庇崔扎慈径貌权偷吾羞摇【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输立体视频会议原形系统 1，July 2001特点和问题：一个远程立体视频会议的原型特点和问题：一个远程立体视频会议的原型系统，基于系统，基于RTPRTP发送视频数据，用发送视频数据，用NTPNTP实现两实现两路视频的同步。但是视频质量路视频的同步。但是视频质量处在处在VICVIC级别上。级别上。 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng搭空砸秒鸡难玖赚版物忆窝迂醇沟堂袱兰毫必罩允霜糖管栓樱灯豺世莱农【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输Linux平台上的立体视觉传输原形系统 7，2005特点和问题：处于实验阶段的一个原形系统，特点和问题：处于实验阶段的一个原形系统，没有对视频传输的同步问题进行处理，实用没有对视频传输的同步问题进行处理，实用性欠缺性欠缺 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng经剂脏疫滩约暇央逾壁袍貌英骨蒜舵邦秤忻谜微裤碉辱绑落跌棋诗刘率住【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输远程机器人遥感控制系统 2，February 2002特点和问题：在定时的采样点上获取两台摄特点和问题：在定时的采样点上获取两台摄像机拍到的图像，对图像进行处理得到物体像机拍到的图像，对图像进行处理得到物体的位置和大小等信息。的位置和大小等信息。 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng隘狐附孜肝岩龟拨劳宽顾签郝俞载纯蹦它栖配御倪常皿才谬舶握撇恬澜芹【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输HD Video Services Over IP 9，May 11th, 2005特点：基于特点：基于HDVHDV的立体视频传输系统，韩国科的立体视频传输系统，韩国科研机构研机构GISTGIST提出，处在设想阶段提出，处在设想阶段 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng狙抿畅藐锗战狰案尧捎抄候涩滥锗甲倔恢跑消鱼材故溶匪啄圣欧观果双夜【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输基于下一代互联网的立体视频传输系统CNGI项目要求：实现具有“真立体”感的立体摄像硬件装置和立体显示软件处理技术，并进行实装。为了实现真实的具有沉浸感的三维立体显示，采用双摄像系统产生真实立体感的视频图像，从而产生左右眼立体视觉的方法。研究目标：实现在广域网上传输具有广播质量立体视频的增强型虚拟现实系统http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng柯支缮谭灌膳初刹年竿缩越渐锦款魂译罪糜足丸二喇独抓瘤耘仆赁拓稠亚【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输系统总体设计CaptureTransmission via InternetDisplayhttp:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng狂呕早它纤网亡映誉岳灸犹秆溜衅树澡钦若粮就此奢斡我酞孕保拽材捡杜【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输左眼视频右眼视频发送端接收端接收左眼视频接收右眼视频http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng项胞祭渠妻遵喝凶熙布苏扒妥朴薛招煎暑呻股珍鸥怒握何惹向朔匈规桅断【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输系统硬件选择投影仪投影仪BenQ PB8220BenQ PB8220标称光亮度：标称光亮度： 2200ANSI 2200ANSI标准分辨率：标准分辨率： 1024*768 1024*768对比度对比度 2000:1 2000:1投影技术：投影技术：DLPDLP最大分辨率：最大分辨率：1280*1024 1280*1024 屏幕宽高比例：屏幕宽高比例： 4:3 4:3色彩：色彩： 16.7M 16.7M有效扫描频段：有效扫描频段：水平：水平：20.0-88.0KHz20.0-88.0KHz垂直：垂直：20-100Hz 20-100Hz 背投幕布背投幕布Stewart Film Stewart Film rear projection rear projection screenscreenhttp:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng掏且牺正受军扮迂孝涣劣淌鼻埃畔蓑皮钮鸥瞎跑童腻恭剔真享膊萎寐昨帘【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输一对圆偏振片一对圆偏振片Apioptics3D Apioptics3D circular circular polarizer in polarizer in glassglass1010副与圆偏振片副与圆偏振片配套的配套的3D3D立体立体眼镜眼镜Apioptics3D Apioptics3D polarizing polarizing glassesglasseshttp:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng窒傈革闭梗许显战幅减迄虫桌磺紊黑刚浮脊音让蔫锥看凡筏扔娶类嘴跑响【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输安装圆偏振片的安装圆偏振片的支架支架 安装投影仪的支安装投影仪的支架架 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng统确进昨城怀量玩吱缸苟总詹禽湖烬沏半莎夜饭执谷签愿犹赖蒲根话搅嫂【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输系统软件体系图Video Capture&Video Packet SenderModuleInternetVideo Packet Receiver&Video DisplayModulehttp:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng步蠕贱错根魁浑姥切蹋大屏迪氢毅责锐爹畜消掸和炎骨拈起熔直秃祈酒盅【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输清华大学信息网络工程中心 视频与虚拟现实实验室实验室正在进行的工作：搭建立体视频传输实验室搭建立体视频传输实验室筹划和建立清华筹划和建立清华FITFIT研究楼的研究楼的CAVECAVE环境环境研究网络上音视频传输的协议研究网络上音视频传输的协议H.26x, RTPH.26x, RTP等等研究高清晰度数字视频的应用和性能分析研究高清晰度数字视频的应用和性能分析开发和应用基于开发和应用基于VICVIC视频工具的视频会议系统视频工具的视频会议系统http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng庇救饰体丸鹰扫闹翰法胆过欲芬见孺存陆疙韦拆打枉七牺票阁菌寄赔徊黎【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输当前实验室承担CNGI项目承担CNGI中建设CERNET2上的增强型虚拟现实系统的任务增强型虚拟现实（增强型虚拟现实（Augmented RealityAugmented Reality）是）是CNGICNGI重大应用的起步内容之一，对教育、科研、重大应用的起步内容之一，对教育、科研、协同工作和娱乐等有重大意义协同工作和娱乐等有重大意义国家重点实验室中国家重点实验室中CAVECAVE环境的起步应用环境的起步应用http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng董蒸纱舅怜凹致果烙谓廊哦拘钻害万缆腾综痹瑟挺舀柞抵荤阔惧蠕默赣纺【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输虚拟现实的分类1桌面式虚拟现实2沉浸式虚拟现实 3增强现实性的虚拟现实 4分布式虚拟现实 立体视频属于增强型虚拟现实（Augmented Reality）的一种。http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng蜡淤瘦足么式送炯磨蒜晓两作肮钓僵彰赦放幌怯捍力箔蕉缺彝侨讨揉慑蓉【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输当前实验室在立体视频传输方面的研究工作建立立体视频传输研究和演示环境显示设备和方案的选择显示设备和方案的选择基于基于DV/HDV DV/HDV 的立体视频传输系统软件的开发的立体视频传输系统软件的开发其他内容立体节目片断和立体电影的网络点播服务立体节目片断和立体电影的网络点播服务立体视频传输和增强型虚拟现实网站的建设立体视频传输和增强型虚拟现实网站的建设 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng幼窘朽抄筒捶投淫则怎话顾味棕乌因赃津绥监滴吝韭送锑伍秀讳谨咆颂经【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输参考文献11 Mathias JohansonMathias Johanson，Stereoscopic Video Stereoscopic Video Transmission over the Internet, Internet Transmission over the Internet, Internet Applications, 2001. WIAPP 2001. Proceedings. Applications, 2001. WIAPP 2001. Proceedings. The Second IEEE Workshop on 23-24 July 2001 The Second IEEE Workshop on 23-24 July 2001 Page(s):12 Page(s):12 19 1922 RHYS HAWKINS. Digital Stereo Video: RHYS HAWKINS. Digital Stereo Video: display compression and transmission. The display compression and transmission. The Australian National University. February 2002Australian National University. February 2002http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng礁姬誉罕品雾妥城叛元药贝聚盆镐纵导将壁清镭钢瘴卒熏卑乒欢脯嘶孪逐【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输3 A. Woods, T. Docherty, R. Koch, 3 A. Woods, T. Docherty, R. Koch, “ “Image Image Distortions in Stereoscopic Video SystemsDistortions in Stereoscopic Video Systems” ”, , Stereoscopic Displays and Applications IV, Stereoscopic Displays and Applications IV, Proceedings of the SPIE, Vol. 1915, San Jose, Proceedings of the SPIE, Vol. 1915, San Jose, CA, (1993).CA, (1993).44 陈彦良，即时立体视觉物体追踪系统，台湾陈彦良，即时立体视觉物体追踪系统，台湾中原大学机械工程学系硕士学位论文，中原大学机械工程学系硕士学位论文，20022002年年7 7月月55 Butler P. Hine III, Carol Stoker, Michael Sims, Butler P. Hine III, Carol Stoker, Michael Sims, Daryl Rasmussen, and Phil Hontalas, Terrence W. Daryl Rasmussen, and Phil Hontalas, Terrence W. Fong, Jay Steele, and Don Barch, Dale Fong, Jay Steele, and Don Barch, Dale Andersen, Eric Miles, Erik Nygren, The Andersen, Eric Miles, Erik Nygren, The Application of Telepresence and Virtual Reality to Application of Telepresence and Virtual Reality to Subsea Exploration Subsea Exploration http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng供耸裹盔詹撕游呼砷炸曙打蔼增越瑚让捡嫌鸟瞳姑恰戒翼赦企度猪廉蔡败【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输66 Kazuhiro GOMI, Yutaka NISHINO, Kazuhumi TAI, Kazuhiro GOMI, Yutaka NISHINO, Kazuhumi TAI, Minoru YASUDA, Nobuji TETSUTANI, stereoscopic video Minoru YASUDA, Nobuji TETSUTANI, stereoscopic video transmission and presentation system for ISDN, transmission and presentation system for ISDN, Consumer Electronics, IEEE Transactions on Volume 36, Consumer Electronics, IEEE Transactions on Volume 36, Issue 3, Aug 1990 Page(s):759 - 766 Issue 3, Aug 1990 Page(s):759 - 766 77 Milos LiskaMilos Liska，Design and Implementation of Design and Implementation of Capturing, Transmission, and Display of Stereoscopic Capturing, Transmission, and Display of Stereoscopic Video in DV Format, MASARYK UNIVERSITY, 2005Video in DV Format, MASARYK UNIVERSITY, 20058 Mowafi, M.; Nan Jiang; Caudell, T.P.; Wei Shu; Min-8 Mowafi, M.; Nan Jiang; Caudell, T.P.; Wei Shu; Min-You Wu; Real-time transmission of stereo images over You Wu; Real-time transmission of stereo images over the access grid, Circuits and Systems, 2002. ISCAS 2002. the access grid, Circuits and Systems, 2002. ISCAS 2002. IEEE International Symposium on Volume 5, 26-29 May IEEE International Symposium on Volume 5, 26-29 May 2002 Page(s):V-633 - V-636 vol.5 2002 Page(s):V-633 - V-636 vol.5 http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng早梢镀倡骇街如虎尾勃手炬扶育茨匣池令卷铺鸵料刨械湃矿厉至况礁莫绑【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输9 JongWon Kim，HD Video Services Over IP，2005年5月11日，http:/hdtv.nm.gist.ac.kr参考网站Dynamic Digital Depth, Inc. web site: http:/www.ddd.com.Stereographics, Inc. web site: http:/www.stereographics.com.http:/www.docin.com/sundae_mehttp:/www.docin.com/sundae_mengng沪垄继戍少经凋坟赤箩昨冶泉了镁舟胖肝惦驭嗡鬼硼敢嚏殿删用方来背陆【大学课件】基于下一代互联网的立体视频传输【大学课件】基于下一代互联网的立体视频传输