北美时间3月17日至21日,一年一度的GTC(GPU Technology Conference) 在美国硅谷举行。七鑫易维受邀参加本次大会并展示眼球追踪技术新成果。
英伟达NVIDIA创始人&;CEO黄仁勋在主题演讲中指出,Turing RTX是英伟达15年来最伟大的创新,包含一项重要技术——可变码率渲染 Variable Rate Shading(VRS)。
可变码率渲染技术的工作原理是基于眼球追踪传感器提供的用户实时眼动信息,动态改变着色像素的数量,对注视中央区域应用100%的GPU性能进行渲染,对周围区域应用较少的GPU性能进行渲染,从而可以节省GPU一倍以上的渲染计算量,提升渲染效率。光线技术普及应用后,渲染运算会节省更多,渲染画面会更加自然流畅。该技术已经与七鑫易维眼球追踪技术成功结合,成为新一代注视点渲染技术,将广泛应用于虚拟现实(VR)领域。
基于RTX 技术,黄仁勋还发布了数据中心级别的图像服务器 NVIDIA RTX Servers,它能够支持渲染、Omniverse和Geforce Now云端游戏服务,在云渲染、效率和规模上实现了飞跃。七鑫易维VR云注视点渲染解决方案结合了VR云渲染和注视点渲染两种技术,在用户运行VR内容时,基于注视点在云端进行画面渲染,可以缩短渲染延迟,并大大降低用户成本。
在本次GTC上,七鑫易维展示了与RealDrive联手推出的,结合可变码率渲染技术与VR技术的虚拟驾驶模拟系统。RealDrive虚拟驾驶模拟系统包括Cybertron虚拟训练场,能够真实还原现实生活中的道路场景和交通路况给用户带来身临其境的全方位虚拟驾驶体验感。
该虚拟驾驶系统和ADAS辅助系统可以有效针对汽车的辅助驾驶功能进行模拟驾驶,并进行分析研究。在RealDrive中,当你驾驶时间超过一定时长并且检测到你处于疲劳驾驶状态的时候,系统会及时发出提示,提醒你注意及时休息等信息。
黄仁勋还提到,数据驱动的数据科学研究法在计算机领域发展迅速,已经成为科学研究方法第四大支柱。他强调了应用数据科学研究法的三大要素:第一是庞大的数据采集量;第二是机器学习和深度学习算法的优化;第三是计算能力。
(图片来源:英伟达官网)
七鑫易维展示了应用最新眼皮检测模型的虚拟社交眼神交互场景,该场景复现了视线方向、眨眼、眯眼等眼睛活动,使虚拟角色看上去栩栩如生。新眼皮检测模型是七鑫易维利用深度学习技术,设计24层卷积以及2个全连接层的网络架构,在百万张规模的眼图数据集上,训练出高质量的眼皮检测模型,检测率能够达到97%以上,可以满足VR设备上和眼皮相关产品的应用需求。
眼动数据分析被逐渐应用到更广泛的商业领域和学术研究领域。房地产商可以通过设计虚拟现实样板间场景供用户体验,分屏显示客户选择房型的过程,实时获取用户在感受房间时的3D热图,更加直观体现客户兴趣点所在。在体验行为过后,通过系统后台生成包含3D移动轨迹、注视区域时长等其他内容的整体数据报表,供专业人员进行数据研究与分析,最终为B端用户优化消费者等用户体验。
本届GTC,我们看到了英伟达建立基于人工智能GPU生态的宏伟蓝图,七鑫易维也期待与英伟达及其他伙伴一起达成合作,让眼球追踪技术助力AI,共同走向更加美好的未来。