在元宇宙中,要实现一滴水珠映射景物的逼真倒影、雪茄燃烧时烟雾弥漫的意境特效,都需要芯片的计算能力千万倍的提升和图像处理能力千万级的扩展。作为人们对数字世界的终极想象,元宇宙这个舞台足够大、技术挑战也无限高。在通往元宇宙的道路上,芯片是坚实路基和强大底座。为此,《中国电子报》记者采访了英特尔、英伟达、高通等芯片厂商,看它们在构筑元宇宙之“芯”时如何八仙过海、各显神通。
元宇宙芯片的算力提升将是千倍级
在2021年4月的GTC线上峰会,英伟达CEO黄仁勋在招牌式的“厨房演讲”中,使用了约14秒的“虚拟厨房”和“数字替身”,引发全球媒体热议。这个以假乱真的“小魔术”,是通过3D扫描、语音驱动人物口型和动作、衣料等物理材质的还原、厨房建模、可视化预览等一系列图像处理技术来完成的。而完成这些动作的基础是GPU。
“元宇宙首先要有可视化的因素,可视化需要一个具有基于物理正确的光照和材质的仿真环境,也就是图形技术。基于RTX实时光线追踪技术,我们把以前需要大量集群离线渲染才能实现的影视级别渲染画面做到了实时化,RTX技术和其对应的硬件加速单元RTCore正是为此应运而生。”英伟达专业可视化亚太区业务主管沈威在接受《中国电子报》专访时表示。
工信部等五部门:拓展元宇宙入口 加速XR头显、裸眼3D等沉浸显示终端规模化推广:金色财经报道,工信部办公厅、教育部办公厅、文化和旅游部办公厅、国务院国资委办公厅、广电总局办公厅印发《元宇宙产业创新发展三年行动计划(2023-2025年)》。其中提出,丰富元宇宙产品供给。拓展元宇宙入口,加速XR头显、裸眼3D等沉浸显示终端的规模化推广,丰富基于手机、计算机、电视机等终端的元宇宙应用,支持脑机接口等前沿产品研发。创新数字人、虚拟空间开发工具组件,推动数字人制作便捷化、精细化、智能化,推广虚拟会议室、展厅、营业厅、社交空间等产品。培育写作、绘画、编曲等智能内容生成产品。发展全息实时通讯、3D实景地图等超高沉浸感产品。[2023/9/9 13:28:42]
要实现《雪崩》所描述的元宇宙中“每一滴水珠都反射出办公室窗子缩小了的倒影”的逼真感,对于GPU的光线追踪和特性还原能力,提出了前所未有的要求。“元宇宙需要对真实物理世界进行映射,这其中就存在大量的物理计算,比如空气流体烟雾粒子爆炸等特效,这背后都是CUDA通用计算模型的应用。”沈威说。
实际上,在《雪崩》所构想的元宇宙中,模拟雪茄烟雾所需的算力和“模拟整个地球的天气系统”不相上下。日本作家铃木光司的科幻小说《环界》中,允许用户通过VR头盔和数据手套接入并以指定人物的视角体验其人生的虚拟世界“环”,以包含128万台巨型计算机的超算集群作为算力底座。
CZ:每个人对元宇宙都有不同的概念:1月29日消息,Binance 官方博客发布了 CZ 最新 AMA 内容总结,在谈到 Binance 有没有建立元宇宙的计划、以及是否会由 BNB 提供动力时,CZ 表示如果 Binance 构建一个元宇宙,那么它肯定会由 BNB 提供支持,但由于 Binance(还)不是游戏构建者并且没有游戏构建团队,他更愿意投资其他虚拟现实或元宇宙游戏。
但 CZ 强调:没有人真正知道元宇宙是什么意思,每个人都有不同的概念。不过,Binance 产品负责人 Mayur Kamat 透露,今年可能会带来更多由 Binance 提供支持的元宇宙。[2023/1/29 11:35:18]
英特尔公司高级副总裁兼加速计算系统和图形事业部总经理RajaKoduri相信,要如实复现《雪崩》中的元宇宙体验,现有芯片的计算性能要实现1000倍的增长。“我们必须在相同甚至更低的能耗下实现1000倍的算力增长。按照摩尔定律的增长曲线,未来5年我们能实现大约8-10倍的增长。因此算法、架构、神经网络算法等,都要在提高计算效率方面发挥作用。”RajaKoduri表示。
对于RajaKoduri提出的目标,英特尔相关负责人向《中国电子报》记者表示,这是一个从E级计算走向Z级计算的过程。
Meta旗下VR平台副总裁将离职,主要负责元宇宙相关研发:金色财经报道,Meta旗下虚拟现实社交平台Horizon的副总裁Vivek Sharma将离职,其团队将直接向Meta元宇宙副总裁Vishal Shah汇报。
Sharma加入Meta已超过5年,在市场和游戏领域任高级职位,最近还在元宇宙相关业务部门担任要职。据报道,Sharma主要负责研发“持久的沉浸式虚拟环境体验”,以及包括Oculus headsets在内的VR设备。(界面)[2022/8/28 12:53:52]
“从2022年的ExaFLOPS到2028年之前实现ZettaFLOPS——即让现有性能提升约1000倍。这条发展路径将实现架构、功率和散热、数据传输以及制程工艺等领域的全面提升。”该负责人指出。
具体来看,英特尔在算力提升和算力基础打造方面有三个重点。一是提供更多晶体管的核心微缩技术;二是在功率器件和内存增益领域提升半导体性能;三是探索物理学新概念,以重新定义计算。“我们概述了未来技术发展方向,即通过混合键合将在封装中的互连密度提升10倍以上,晶体管微缩面积提升30%至50%,在全新的功率器件和内存技术上取得重大突破,基于物理学新概念所衍生的新技术,在未来可能会重新定义计算。”英特尔相关负责人表示。
Improbable首席执行官:Yuga Labs元宇宙Otherside已成功测试1.5万人同时交互:5月3日消息,据YugaLabs元宇宙Otherside背后的开发公司Improbable官方网站消息,该公司首席执行官Herman Narula表示:Otherside将颠覆人们的思想,同时颠覆数十年来关于游戏和开放平台的想法。
在Otherside的早期开发过程中,利用Improbable的M2技术已经成功地测试了超过15,000人同时在一个虚拟空间中进行交互。通过与YugaLabs合作,Improbable正在奠定元宇宙基础,从而为艺术、娱乐、游戏等领域的新体验打开大门。此前报道,Improbable旗下项目M2已完成1.5亿美元独立融资,a16z和软银愿景基金领投。[2022/5/3 2:47:09]
Meta英伟达将造全球最快AI超级计算机
2021年12月,百度在元宇宙平台“希壤”召开百度AI开发者大会。基于数据传输算法调优、本地渲染引擎调优和声学特性建模,百度打造了容纳10万人的元宇宙超级会场,实现了10万人级的同屏互动、相互可见,用户还能听到实时背景音和空间音效。
元宇宙价值指数今日为897.75点:金色财经报道,据同伴客数据显示,12月27日元宇宙价值指数为897.75点,较前日下跌12.75点,跌幅为1.4%。
构成元宇宙价值指数成分的上市企业或NFT平台皆为目前在虚拟经济领域表现出巨大市场价值和未来潜力的头部机构,该指数能够有效反映元宇宙虚拟经济整体价值的发展趋势。
注:2021年3月10日主要成份股roblox上市并产生第一个收盘价,故选取3/11日为本指数首次推出的基准日,初始值为100。[2021/12/27 8:06:27]
今年1月,Meta宣布设计并打造了当今运行速度最快的AI超级计算机之一,到2022年中期建成后,它将成为世界上运行速度最快的AI超级计算机。
RSC将帮助Meta的AI研究人员构建从数万亿个示例中学习的AI模型,跨数百种语言工作,无缝分析文本、图像和视频,开发新的AR工具等。Meta希望RSC能助力构建全新的AI系统。例如,为一大群使用不同语言的人员提供实时语音翻译,让他们可以无缝协作或一起玩AR游戏,最终为构建元宇宙铺平技术道路。
目前,这款AI超级计算机已经部署了760个英伟达DGXA100系统作为计算节点,共有6080个英伟达A100GPU。在今年晚些时候的第二阶段,RSC将扩展至16000个GPU,提供高达500亿亿次级混合精度AI计算性能。
据了解,Meta与英伟达联合打造的大型AI研究超级计算机是迄今为止最大的英伟达DGXA100系统。该系统实现了数千个GPU集群的系统优化,可以训练包含超过1万亿个参数的AI模型,承担实时识别不法内容等工作。
要实现元宇宙级别的高度模拟和模型创建,AI是必不可少的基础设施。AI模型的识别和处理能力,能够进行精细复杂的图像处理,让创作者更有效率地生产内容。AI的算法调优能力,能提升视觉、听觉和交互体验。同时,具有自监督学习能力的AI,能够通过大量文本训练识别有害信息,守护元宇宙的安全。
“无论是无人驾驶中对物体的视觉识别,还是自然语言处理,或者是Omniverse中通过AI来驱动面部表情,其背后都利用了AI技术,AI技术使创作者能够脱离大量重复性工作,更好地参与虚拟世界以及元宇宙的构建。”沈威向记者表示。
平台级芯片将是元宇宙的终极战场?
无论要进入《雪崩》的元宇宙、科幻电影《头号玩家》的虚拟游戏世界“绿洲”、《环界》的人工生命计划“环”、《三体》中模拟地外文明的游戏“三体”,一副以“头套型屏幕”“电脑目镜”“显示头盔”等各种名目出现的VR头盔都是不可或缺的入场券。
高通技术公司XR业务中国区负责人郭鹏在接受《中国电子报》专访时表示,不论元宇宙会发展成何种形态,人们都会需要终端来把物理空间和数字空间连接在一起,并把大家带入到虚拟现实中。
“元宇宙是一个永远存在的‘空间互联网’,能够连接真实世界和虚拟世界并打造个性化的数字体验,让人和万物都能够在其中无缝地沟通和交互。人们将通过智能手机、PC、AR/VR终端等计算终端,进入全方位反映现实生活的元宇宙。在元宇宙中,大量用户和企业能够以2D和3D形式探索、创建并参与各种各样的日常体验和社区及经济活动。”郭鹏指出。
在很长一段时间里,XR终端都使用手机SoC作为主力处理器。随着XR设备的规格持续优化,对于视野、分辨率、刷新率、用户感知、环境感知、定位技术的需求也不断提升,更符合XR性能和功耗需求的专用处理器被提上日程。
2018年5月,高通推出骁龙XR1平台,该平台是全球首款XR专用平台。2019年12月,高通公司推出全球首个5GXR平台——骁龙XR2平台。骁龙XR2支持5G连接、双眼每只眼睛90fps3Kx3K的分辨率以及七路并行摄像头,且具备计算机视觉专用处理器。目前,已有超过50款搭载骁龙平台的VR和AR终端发布。2020年5月,海思发布XR芯片平台,推出首款可支持8K解码能力,集成GPU、NPU的XR芯片,支持单眼42.7PDD。
在芯片平台的基础上,构建元宇宙体验还需要渲染引擎、内容生态提供商、互联网公司、社交和娱乐企业等产业链各个环节的协同作战。郭鹏表示,高通是整个产业链中底层技术的提供商,主要从四个层面支撑元宇宙的构建和发展。首先是为厂商提供能够解决XR设备技术难题的专用芯片平台;其次,打造基于XR专用平台的参考设计,助力合作伙伴加快终端的规模化商用;其三,针对XR领域的技术挑战,提供软件、空间计算算法和架构;最后,发起一系列硬件和软件生态系统计划,减轻合作伙伴在产品商用化过程中的负担。
构建芯片性能之后,如何有效交付,以“黑盒”的方式让软件开发者、程序员和创作者便捷使用,是不逊于芯片制造本身的头等大事。为此,英特尔、英伟达、高通都面向元宇宙打造了丰富的芯片平台,让开发者更高效地调用芯片性能。
在英特尔的技术构想中,赋能元宇宙的技术基石可概括为三个层次。一是元智能层,旨在提供统一的编程模型以及开放的软件开发工具和软件开发库,以便开发者能够更轻松地部署复杂的应用程序。二是元操作层,聚焦于向用户交付超越本地的可用算力。三是元计算层,为实现元宇宙体验提供其所需的原始动力。
目前,英特尔已经在计算层面形成了XPU异构计算战略,包括CPU、GPU、FPGA、AI芯片和其他加速器,将工作负载与适合的架构匹配,以满足全社会对于算力日益增长的需求。在异构平台上,硬件性能需要软件来加以释放,英特尔基于oneAPI为开发者提供了开放、基于标准的编程环境,打破了封闭式编程模型的限制,并支持多种平台和架构的编程需要。
英伟达定义为“工程师的元宇宙”平台Omniverse,将实时光线追踪等图形能力、AI和计算三大要素打包交付。沈威表示,Omniverse已成为构建元宇宙或虚拟世界的技术解决方案,将助力形成一套以Omniverse为平台,并拥有强劲算力支撑和先进硬件基础的元宇宙体系。“在借助Omniverse构建的未来世界中,所有部分都将由AI计算系统驱动并进行处理,该系统能够处理它所需要的信息,例如视觉信息、传感器信息、物理信息和自动化智能。”沈威说。
而高通也在为元宇宙所需的空间计算提供两个层面的芯片和软件算法,第一个层面是“我在哪里,我在干什么”,也就是用户头部自由度定位、手柄定位以及手势、眼球、表情和腿的定位等身体感知的基础技术。第二个层面是空间定位,即对环境的感知。基于上述技术支撑,高通能更高效地支持开发者把虚拟物体放在现实世界中,与现实世界融合。2021年11月,高通还推出了头戴式AR开发套件骁龙SpacesXR开发者平台,为开发者提供实现创意的工具,使头戴式AR实现更多可能。
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。