虚拟现实中人机交互技术进展
典型案例
1) 数字奥运博物馆
* 数据采集 * 模型构造 * 动画生成 * 交互式漫游 * 寓教于乐
Zhigeng Pan, Wenzhi Chen, Mingmin Zhang, Jianfeng Liu, Gangshan Wu, "Virtual Reality in the Digital Olympic Museum," IEEE Computer Graphics and Applications, vol. 29, no. 5, pp. 91-95, September./October. 2009 Kai Ye, Kun Zhou, Zhigeng Pan, Yiying Tong, Baining Guo: Low Distortion Shell Map Generation. IEEE VR 2007: 203-208 (顶级会议) Bing Tang, Zhigeng Pan, Le Zheng, Mingmin Zhang: Interactive generation of falling motions. Journal of Visualization and Computer Animation 17(3-4): 271-279 (2006) 5
注解:真假难分(VR)、指手划脚声情并茂(HCI)
虚拟现实应用系统
城市规划(西游记乐园) 培训和教育(ELVIS项目) 游戏和娱乐 虚拟商店和虚拟产品展示
Zhigeng Pan, Jiejie Zhu, Weihua Hu, Hung Pak Lun, Xin Zhou: Interactive learning of CG in networked virtual environments. Computers & Graphics 29(2): 273-281 (2005) Jianfeng Lu, Zhigeng Pan, Hai Lin, Mingmin Zhang, Jiaoying Shi: Virtual learning environment for medical education based on VRML and VTK. Computers & Graphics 29(2): 283-288 (2005) Mingmin Zhang, Zhigeng Pan, Jiaoying Shi, Peng Wang, QingFeng Mi: A hybrid rendering algorithm for textile objects. Science in China , 52(3): 490-499 (2009)
虚拟现实的应用
虚拟体育仿真 虚拟旅游和虚拟剧场 数字文化遗产 电子试衣
Yong Liu, Congfu Xu, Zhigeng Pan, Yunhe Pan: Semantic modeling for ancient architecture of digital heritage. Computers & Graphics 30(5): 800-814 (2006) Nan Xiang, Haiying Zhao, Xiaojian Zhou, et al. UEGM: Uncertain Emotion Generator under Multi-Stimulus[J].Computer Animation and Virtual Worlds, 2011,22(3-4):141-149 Jing Tong,Jin Zhou,Ligang Liu,Zhigeng Pan, Hao Yan. Scanning 3D full human bodies using4 Kinects. IEEE Virtual Reality ,2012 (IEEE Transactions on Visualization and Graphics, 18(4): 643-650 (2012))
Applications, vol. 30, no. 3, May/June. 2010
4)网上上海世博会
获奖: 上海市科学技术进步一等奖(2011) 完成单位: 上海世博局, 浙江大学等单位
二 虚拟现实中的交互
虚拟现实/增强现实/混合现实
一、 立项依据(2)
体感交互
2006年11月
2010年6月2)航海模来自系统获奖: 国家科学技术进步二等奖(2008) 完成人:金一丞, 尹勇, 潘志庚, 任鸿翔等10人
3)漫游京杭大运河
运河概况:运河的形成和开凿历史,相关科学知识 沿线风景:运河沿线的风土人情,历史典故,名胜古迹 漫游体验:漕运模拟和体验;船闸系统模拟和体验;运河
上的虚拟驾驶;全景图漫游体验。
任天堂Wii
微软Kinect
2012年10月 Leap Motion
2013年2月 MIT SpaceTop3D
2013年初 MYO臂环
头交互
手交互
腿部交互
表情交互
(一) 虚拟环境中的人机交互
(1)交互的手段
身体部件(人体,手[指点],脚,头, 眼球,表情/情感,姿势) 耳朵[听觉,一般声音/空间声], 手
交互设备 三维鼠标,笔,触觉设备
(2)交互的种类 * 二维/三维人机交互 * 可触摸式/非可触摸式交互 * 自然/非自然交互
基于照片的动画演示
Wenzhi Chen, Mingmin Zhang, Zhigeng Pan, et al, "Animations, Games, and Virtual Reality for the Jing-Hang Grand Canal ," IEEE Computer Graphics and
自我介绍
关于自己
貌不若潘安,而志存高远梦成华罗庚 才可比张蔷,且明心静性不似柯以敏
关于数字媒体与人机交互研究中心
研究内容: 图形图像声音动画几何信号都能处理 媒体娱乐光照特征文化信息皆可计算
中心定位: 研究与应用并重,创新和转化优先
1
一 虚拟现实与人机交互
生活虚拟化,谈天说地真假难分酷似现实生活 交互人性化,指手划脚声情并茂尽在虚拟环境