BOE IPC·2026 光场论坛精彩演讲内容实录
新浪新闻
智融三维 生态共建
光场显示峰会论坛
时 间:2026年9月23日上午9:00-11:57
地 点:国家会议中心二期254会议室
内 容:
主持人/董学:尊敬的各位来宾、视延的小伙伴、京东方的同事:
大家上午好!我是主持人。首先非常抱歉,本来定的是9点开始,结果时间有点早。我是7点从亦庄出来的,紧赶慢赶到这儿8点50,我一看还可以,不影响开始。老吴在门口说:可以啥,都没人,一问全都在路上堵着呢。确实,我们时间安排得有点不太靠谱。在亦庄住习惯了,对时间路程概念确实是有点误差,所以给早到的嘉宾和同学说声抱歉。
回到论坛主题,之前几年一直有一个元宇宙论坛,把未来的信息三维化方向的,包括近眼VR,很多的技术来做基础性的论坛。经过几年之后,今年做了一个变更,主要是考虑业务发展,因为我们实际落地场景有几个事业,包括硅基OLED的事业,包括光场的事业,包括嘉宾、客户发展阶段差异比较大。去年上半场人还多一些,到下半场的时候,上半场人一走下半场就很尴尬。后来我们说今年做小型化的,本来这几个方向都是面向未来的,都是需要紧密的伙伴,大家把很细分的场景合作聊得更清楚一些。后来市场的也说,把产品相关的能形成初期互动的紧密伙伴联合在一起做小型的发布。像硅基OLED,有很多客户,面向的更多的是成熟品牌的,所以做了变更,主题还是以光场技术、以FAST LCD技术来支撑的面向未来方向做的。这是论坛的背景。
昨天,我不知道大家有没有参加主论坛,可能有很多没参加的。昨天,我们董事长在主论坛上也描述了一下,过去一年整个社会的发展,不是一年,过去三年发展变动最大的,都离不开人工智能AI。实际上,我们每个人也深刻地感受到,人工智能时代习惯潜移默化的变更,不是根据你的主观愿望,你可以不用考虑自己就在变,包括从搜索的习惯到日常工作,特别是做软件工作的,离开AI之后工作效率确实非常低。我们可以回顾一下,从最初的ChatGTP最初只是聊天,到现在基本上问问题都离不开“豆包”。到去年,人工智能代码技术变成行业硬性的工具,不用的时候你会发现效率包括架构能力差异非常大。到今年,像字节发布的Seedance,对视频的生成是颠覆性的。以前的视频制作非常精美的那种,还需要大量的人力、物力、财力。技术升级之后,把这些变成了日常老百姓可以自己做的。
上个月,OpenAI发布了GPT-6,把3D内容的制作变成了一个让老百姓触手可及的东西。我看一个短视频,并不是GPT-6给你生成,因为现在3D内容制作的时候需要很专业的工具,像Blender。但是我又没学,我怎么用?你也不用学,你可以告诉它,它会帮你从下载软件-内容生成-制作出来,做得非常好。而且,所有的大模型公司,现在全球最聪明的那群脑袋瓜子,都在全力以赴地推动大模型能力的提升,半年肯定会升一级。下一步大家押注的重点方向,一定是三维内容的高效生成,不管是世界模型还是基于大语言模型的升级,方向一定是三维内容的生成,这是AI工具化之后形成的推动工具必须要过的点,这也是大家集中精力在押注的。
从这个趋势来看,几年前我们一直觉得未来的机会,一定要体现在AI+3D,因为它是一个基础性的信息交互模式。我们之前的信息交互模式,我个人理解,属于偏精准型、数据型的,信息源不是非常清晰的精准数据。这个过程有个好处,人可以拿到一个非常精确的信息,但是这个世界信息量太大了,让你去搜精准数据,几百辈子这些数据都不可能弄完。因为你搜的同时,几十亿人在创造新的东西,所以它是无穷无尽的。
AI模式解决什么问题呢?它需要的不是精准的,人绝大多数场景需求的,一定是偏模糊的信息,但是它背后的知识是相对精准的。AI升级之后,它能给大家的,核心就是“知识平权”。你以前获取知识的路径非常苛刻,从读书、看报纸、看文献,想一个一个来搞,然后理解,理解之后再提炼。提炼出一个理论到实践,然后再回来,这样一个循环来形成知识。时间效率非常低,但是对每个人的成长是必需的。等你成长到一个阶段之后,它类似于一个能力基础,你要往上走的时候,得获取更多的信息来确保这个,能力模型越来越复杂。这个时候你还是以精准信息为基准的话,就没法成长了。AI时代,包括Agent模式,它让你更多地回归到自身的需求。我需要什么东西,我对问题的敏感度到底是什么东西。
这里面也有一个问题。为什么要三维呢?叫横看成岭侧成峰。平面化的时候,很难理解内部的全貌。什么样的知识才是最有意义的?AI+3D,就是之前说的那个元宇宙的概念,叫虚实融合,知识跟现实能形成匹配、能形成指导、能形成改造,这样的知识是全人类共同认可的。形成的知识不能引导这个,它就一定不会变成整个社会的主流。整个信息时代的下一代,一定要回归到现实的改造基础层面。我们当时思考,AI+3D引导的未来机会,就是这么一个场景,就是之前说的元宇宙论坛为啥来,这一直是我们努力的方向。
后来思考,AI技术的发展,如果按照这个节奏,像军备竞赛一样,包括国内的字节、阿里、腾讯,倾其所有地要买算力,找最多的大脑供这个东西。包括美国也一样,美国那几个公司砸一个数量级以上的资源来做这个东西。按照这个发展趋势,在未来我估计在明年或者后年,三维内容的制作,我个人感觉会形成变革性的内容生成机会。这对我们做硬件定位的公司来说,它是非常好的。之前要形成一个生态,第一个,必须有工具;第二个,必须有内容,硬件核心就是基础工具,怎么样把三维转成效果,怎么样把人的信息交互界面处理得更丝滑,让人更舒服,这就是你的本质。如果没有内容能力的时候,即使做得非常好,它能落地,但是只能落在细分市场(刚需市场)。老百姓用的时候,必须拿到手就可以获得无穷的信息,这个状态才可能达到消费级。这个点非常近了,可能就在一两年发生。
结合我们公司成立的视延公司,核心解决的就是一个点,信息三维化之后人的舒适感一定要确保。你看一个三维的时候,跟一个真的东西明显不一样的时候,人的脑袋瓜就会发出眩晕、不适的感觉,这也是我们从成立开始要解决的。这就是论坛所努力的方向。我们每年会把形成的结果变成产品,在这个平台上来发布,希望吸引更多的合作伙伴,在这个浪潮里面找到我们的机会。
接下来,我为大家介绍一下整个论坛的状况,主要有两个部分:一个是视延科技的三维小伙伴先介绍过去产品技术努力的状况。同时,把我们的两款已经打造得差不多的产品给大家做个说明;第二部分,由B20的小伙伴,把面向超高分辨率FAST LCD技术做的升级给大家介绍一下。首先,我们有请视延的老吴给大家介绍!
吴仲远:各位嘉宾、各位合作伙伴、各位新老朋友:
大家上午好!很高兴又再一次在IPC上和大家相聚。今天发布会的主题是“智融三维,生态共建”,这八个字也是总结了我们对于信息三维化未来发展方向的思考和判断。
信息三维化的普及和发展,需要一种能够将三维内容、三维显示和三维交互都融为一体的智能化终端,同时也需要大家建设一个开放协同、互利共赢的一种产业生态,只有这样才能让三维的信息、三维的体验真正融入到我们的工作和生活中。
这样一种对未来的思考,可以追溯到很多年以前。2023年,我们从京东方的技术研发中心孵化成立了视延科技,视延这个名字的由来,也是基于我们非常朴素而且美好的愿望,我们希望把所有的显示产品未来从二维升级到三维,让它们成为连接虚拟世界和真实世界的桥梁,从而让视觉得到无限的延伸。
围绕这个愿景,我们确定了一个对自身的定位,不只是要做一块3D显示屏幕,而是要为客户提供从内容到展示 端到端完整的3D解决方案。这个方案核心,是从内容生成和采集开始,通过信息的处理和传输,最终以人眼最接近自然观看感受的方式呈现给大家。不仅让人能够看到立体,还要能够看得非常清楚,看得非常舒服,并且能够非常直观地和内容进行互动。整个链路虽然说起来非常简单,但是要想真正把它做通甚至做好,难度是非常大的。因为它的背后涉及很多的领域,比如在方案层面,我们需要对信息处理和交互逻辑进行设计;在器件层面,我们需要开发像显示、光学、芯片等等关键核心器件,以及在加工制作层面,涉及到关键材料装备和工艺,可以说是包罗万象。
经过我们过去几年在这些方面长期的时间和积累,我们发现,传统的3D显示都是基于现有的2D器件的基础上去做方案的优化和开发。这样带来的问题,如果显示本身所能够提供的信息量不够,或者说显示的基础能力不足,即使有再丰富和再细腻的3D内容,也很难给大家呈现出来。
因此,在摸索之后,我们选择了一条跟别人都不太一样的技术路线,就是坚持以提升显示的信息量为核心,同时坚持全栈技术的深度自研,彻底打破了原有传统2D固有的技术架构,从最底层的基础器件设计方案去创新,重新架构了我们独有的3D解决方案。从2023年到2026年,可以说是一步一步地实现了从技术概念验证到最终的产品落地。
2023年首次发布了搭载视延特有3D解决方案的32寸原型机视延SYSPACES 1P,首次实现了3D像素的超大信息量,它是传统同尺寸3D显示信息量的16倍,创造了行业内技术的突破。但是,更重要的是,这款原型机打破了大家原有对3D显示的刻板印象。过去大家一提到3D显示,可能第一感觉是图像比较模糊,重影严重,长时间看了之后眼睛会感觉比较疲劳。SYSPACES它给大家带来的观看体验,是超高清晰度、大纵深的立体感和非流动的移动时差、更舒适的观看体验,可以说,它让大家重新认识了3D显示。很多人看到原型机之后,都觉得非常惊艳,原来3D是可以看得舒服的。
这款原型机获得了行业内外的广泛认可,给了我们非常大的信心,所以我们希望能够把它从技术变成产品,推广到专业的显示市场。在2024年,我们花了一年时间把这款原型机打磨成了一款面向医疗应用场景的正式产品SYSPACES 1M,它是一款32英寸兼容2D、3D显示的专业级医疗显示器。之所以选择医疗场景,是因为在这个场景中,有非常刚需的三维观看需求,同时有非常丰富的3D内容。医生用3D内窥镜去做微创手术的时候,需要长时间盯着3D显示屏幕,整个过程需要保持非常专注的状态去做精细化的状态。所以,3D显示的清晰度、空间感、舒适度,是医生来自临床非常实际和迫切的需求。而我们的3D解决方案,恰好能够完美地契合医生们的实际需求,解决了他们长期以来的痛点。
此外,通过我们自主研发,我们也通过了在医疗场景中非常苛刻的安全性和可靠性的医疗标准,所以在这个产品投放市场之后,我们也收到了来自广大医生的积极反馈。大家都反映说,我们的解决方案,帮助他们提升了手术效率,降低了风险,是非常好的一款产品。
通过这款产品,我们也更加确信了,我们的3D解决方案,不仅仅是一个实验室里的技术。只要产品做对、场景找准,就能够为客户创造实际的价值。
但是,这款产品因为制造成本相对比较高,所以我们暂时只能在像医疗这样高价值的应用场景去推广。但同时我们也在思考,既然专业用户认可我们的显示效果,我们能不能让更多的普通用户也能用上这样的产品,所以在2025年我们设定了一个目标,打造一款面向大众市场的3D终端产品。当我们刚提这个目标的时候,我们的团队都很兴奋,大家觉得我们的3D显示效果已经做得比较好了,是不是只要把成本降下来,就能够获得大众消费者的接受呢?但是我们冷静思考之后,发现问题并没有这么简单。
我们回顾了一下过去信息三维化产业的发展历史。过去十几年,市场上出现了非常多的3D显示产品,这些产品采用了不同的技术方案,同时也推广到了不同的应用场景中。可以说,技术不缺探索,市场也不缺关注。但是,直到今天,仍然没有一款真正爆火的产品被广大消费者所接受。
这背后的原因,很多人也分析过。我们觉得除了价格和体验以外,还有一个主要的原因。对一款3D产品来说,要想吸引客户的关注和眼球并不难,真正困难的是,当客户第一次对我们的产品感到惊奇或者兴趣的时候,能够留住这些用户,让他能够持续地使用。大部分用户不会因为一项技术非常好,就会愿意付出更多的学习成本,用户更关注的是产品买回来对他有什么用、3D内容从哪来、操作是否足够简单。因此,一个产品要想留住客户,就必须要做到有价值、有内容和容易上手。
3D显示终端产品,不能只是一个显示形态的升级,而是要形成从3D的内容生成、处理,以及显示交互,再到最后的终端应用一个完整的闭环。要形成这样的闭环,就需要有信息三维化生态的支撑。坦率地说,目前我们的生态还处于非常早期的萌芽阶段。信息三维化的生态,需要为最底部的基础设施层提供通信算力支撑,在它之上还需要有平台赋能层,提供图形计算和空间计算的计算服务。中间为前端体验层,终端设备要带给用户非常满意的使用体验。最后还有能够触达各种应用场景和用户的创新应用层。
近几年,随着通信AI技术的进步,整个生态中的基础设施和平台赋能发展速度非常快,可以说对信息处理的算力提升速度非常快。但是,我们始终需要解决的问题,还在于前端体验层中的终端产品。一个3D显示终端产品,只有快速把3D内容转化为用户可以直接观看、直接操作的体验,才能更好地支撑上层应用快速落地,创造价值。如果一个3D终端产品只能播放我们精心准备的模型或者视频,而不能非常方便地接入用户已有的3D内容,或者为用户创造更多新的3D内容的话,即使它的显示效果再好,也很难变成一个我们的日常应用。因为从内容到体验,这中间的断点没有被打通,所以整个生态也没有办法循环起来。
因此,我们经过认真分析之后发现,传统的3D显示器产品形态,有很大的局限性。对某些特定的应用场景是比较适用的,像医疗手术场景,因为3D内窥镜可以实时采集生成3D图像的视频流,所以我们只要简单地通过信号连接,就能够实现3D显示的功能,对医生来说是非常容易上手的,但是针对大部分的普通应用场景,情况是完全不一样的。比如,针对需要观看和编辑3D模型的场景,针对一个3D显示器的用户,他可能还需要配置一台高阶电脑,同时安装一个专业软件,可能还需要对内容格式做一些处理。对于行业用户,可能还需要对已有的软件去做二次开发。这些附加的硬件成本,包括时间成本,都阻碍了3D显示器这种产品形态快速被广大用户所接受。
因此,我们对未来理想中的3D终端产品做了这样一个定义,它不仅仅是一个只能等待输入信号的3D显示器,而是一个应该基于开源的操作系统,同时能够把系统软件和显示硬件能力进行深度融合的一种3D智能终端。我们的想法是,尽量把3D内容的生成、处理和显示交互这样的能力集成到一台终端设备里,让普通用户不用配置就容易上手,让行业用户减少二次开发,快速实现应用的落地。同时,我们基于开源操作系统的优势,可以降低开发门槛,吸引更多内容创作者和应用开发者参与进来,加速整个生态的建设。
基于这样的思考,我们在去年制定了3D智能终端产品的开发计划,它是一款12.7英寸的3D平板,我们把它命名为S-PAD。我们的想法是,借助我们在3D显示器所获得的成功开发经验,以及基于我们在3D显示硬件上的技术积累和安卓系统的开源优势,可以很快地把我们的想法进行落地。
在开发这款产品的时候,我们选用了当时最强的系统芯片,以及最顶级的外设配置,同时我们也开发了很多创新应用,包括前后11摄的3D拍照和3D+AI内容生成解决方案。当时我们的想法比较简单,借助最强的芯片算力和最好的外设硬件,以及我们最有信心的3D显示技术,这三者结合,一定能够做出好的产品体验。
但是,我们可能把这件事想得有点简单了,在去年9月份IPC发布的时候,我们当时已经完成了大部分功能的单独测试和验证,我们判断,在年底实现产品的交付没有太大问题,但是,当我们最终在做系统整合和测试的时候,发现出现了很多问题。比如,当多个摄像头同时打开工作的时候,它带来了很大的系统功耗和温升,影响了整个系统的稳定性。当我们运行3D应用的时候,底层很多服务会去争抢系统资源,造成系统延时的增大。这些都影响了最终产品的使用体验。
虽然我们最后经过了很多补救措施,产品体验有了很大程度的条件提升,但是它距离我们理想中的用户体验,还有一定的差距。
最后经过反复权衡之后,我们作出了一个非常艰难的决定,我们不能够向自己去妥协,把我们认为不完美的产品交付给用户,因为用户的体验是我们必须要坚守的一个底线,所以最后我们不得不推迟了这款产品原定的发布计划。
这次经历也让我们认识了自身的短板,我们在显示硬件的技术积累上能力比较强,但是在系统软件能力上,特别是对底层操作系统的理解上,我们还需要加强。决定一个产品的体验,不仅仅是靠硬件,而是要将硬件驱动、系统服务和应用有机协同起来,而系统软件能力就是将我们的硬件优势转化为体验优势的一个关键因素。因此,在过去一年,我们整个团队把软件能力建设放在一个非常重要的位置上,我们补强了整个系统软件的开发团队,并且对原有的方案进行了深入复盘,我们详细梳理了整个端到端的系统链路,从摄像头的图像获取,再到系统计算,再到最终屏幕呈现3D画面,中间有非常多的环节,每一个环节如果延时增加,或者对资源的调度不合理,都会影响整个系统的体验。哪些处理必须实时完成,哪些模块需要简化,包括哪些功能需要优先确保它的使用资源。围绕这些问题,我们从第一性原理出发,对软件底层架构进行了完整的重建,开发了一套适合3D显示的底层服务。
此外,针对芯片方案的选择上,我们也改变了思路。从过去追求单一的峰值性能,转向更加重视系统底层是否更加开放可控。传统消费级的SOC,性能上限虽然很高,但是它已经针对我们非常成熟的应用,把底层的服务封装成一个比较固定的系统。针对我们这种需要深度适配的需求,开放程度还是比较有限,所以这次我们选择了更加符合我们需求的瑞芯微解决方案,它有更加开放的底层服务能力,所以我们可以针对显示、图形渲染、摄像头的图像处理进行更深层次的链路优化。
最终,我们的目标是通过强化系统软件能力,在保持体验的前提下去降低产品功耗和成本,最终为客户提供高性价比端到端的系统解决方案,让产品在性能、成本、功耗和用户体验达到比较理想的平衡状态。
在我们努力做好产品的同时,我们也把自己重新定位,作为一个信息三维化生态的建设者,致力于推动三维显示软硬融合和生态协同。我们也非常希望和在座各位一起,把我们各自的优势充分发挥出来、连接起来。我们希望能够和内容创作伙伴,一起让三维模型和视频以更好的效果呈现给用户,帮助大家创造更大的价值。我们也希望能够和开发者伙伴一起深入合作,通过开放系统接口和开发工具,降低应用接入门槛,帮助大家的应用快速落地。我们也期望和各位行业的渠道伙伴,一起从三维观看的真实需求出发,一起开拓更多的应用场景。
最后,我们也愿意携手和供应链伙伴,共同推进产品的量产化和品质的提升,让我们的产品成为人人都买得起、用得上的消费电子。
回顾过去几年,我们走过了一条从技术概念验证到产品落地的这样一条路径,我们即将发布的全新一代智能3D终端,也代表我们从一个新的起点迈向一个新的征程。我们今天面临的问题,是如何将内容、产品和体验有机协同起来,下面将正式发布今天的第一款产品,有请这款产品的开发负责人孙伟给大家进行介绍!
孙伟:各位领导、各位嘉宾、各位视延的小伙伴们:
大家上午好!当最开始接到我们要把光场技术推向移动端,而且是一个平板电脑的显示项目的时候,是一个很有挑战的技术项目。大家知道,光场产品是以高密度的像素驱动,让我们有入眼更好的体验,这就意味着有更高的算量、更高的能耗。提到平板产品的时候,第一会讨论到平板产品的SOT算量能不能支撑光场显示,产生这么大的能耗能不能支持移动类产品的续航要求,我们就带着这样的课题,进入了第一代S-PAD产品开发。
就像老吴说的一样,我们经历了一段很难的过程,我们正在把更高、更高规的部件堆积起来。当然,我们体会到了高规格部件带来的产品成本的急剧上升,也体会到了应用级不可控的不稳定状态,同时我们也收获了一个产品,一个特别适合在冬天户外使用的产品。当时我们小伙伴也自嘲道:我们的光场产品,不光给大家提供了一个很好的视觉体验,也给大家提供了一份冬天的温暖,一个“暖手宝”的功能。这样的体验,也坚定了我们继续磨炼自己技术能力提升的意志。
经历了将近十几个月的技术攻关,今天给大家带来全新一代光场平板产品S-PAD 1E,这款产品兼具了两个使命,一个是把12.7寸硬件基础更进一步发挥。因为大家知道,12.7寸产品尺寸,既要满足我们对光场显示需求的体验,也要满足用户的便携可以装着带走的体验。全新一代的“新”,就是要把我们这么多年积累下来的硬件基础,升级成新一代端到端的系统解决方案。
首先,我想正式向大家介绍一下整个技术方案的架构图。
大家可以看到,整个架构图分为六层技术栈,自上而下相互支撑,也相互协同。在最底层是显示光学层,这一层包含着高像素密度面板,以及阵列型精度控制的控光器件,还有精密的加工工艺。这一层也是产品的基石,决定了光场产品画质显示能力的上限。第二层和第三层是芯片层和硬件层,包含了几个部分:一个部分是SoC、存储、电源模块,以及硬件和散热单元,其中也包含了自研芯片,包含了信息链路里面的关键实践路径,这些硬件组成了整个产品的硬件底座。第四部分是我们重点加强的软件服务层,主要由两部分组成:一部分是Runtime;另外一部分是配套的SDK。这一部分核心的功能在于:如何智能调控各个硬件的使用,调控算力的分配,在性能和能耗之间的平衡核心工作都是在软件服务层完成的。最上面两层是内容层和应用层,这部分是我们承接各个生态合作伙伴内容的界面,也是应用如何移植到S-PAD 1E上的关键交付窗口。
我们在看了完整解决方案之后,产品规格有哪些变化?
第一部分是显示光学层。这一部分坚持了我们一贯对高画质的要求,所以在3D产品情况下,依旧坚持着2.5K的单眼入眼分辨率。而且,为了增加画质体验,把景深增加到了70厘米,这样在看3D模型的时候,不光有层次感、有立体景深,可以很好地观察您设计的产品的各个角度。在广视角方面,我们做到了针对于移动产品的使用,做到了0.4-0.8米的完美适配产品距离,同时也支持±30度自由使用。当然,低延时也是我们一贯坚持的目标。简单说,如果你需要便携的对画质有极致要求的光场显示产品的话,S-PAD 1E将是一个不错的选择。
在2D层面,我们也拥有比较优秀的产品规格,包括2.5K的分辨率,1000:1的对比度,450nits的高亮,以及我们对色域更高的要求,DCI P3,还有为了支持大家的丝滑操作,540Hz的触控灵敏,满足大家办公、追剧等一系列2D情况下的使用。
第三部分是硬件。我们的外观ID有两部分要跟大家重点描述。第一部分,大家知道我们的光场产品增加了控光层,当这个产品能不能进入一个正常量产的消费级平板显示的时候,第一个要求是这个产品的厚度还能不能保持原来产品的情况,产品的重量还能不能满足便携的要求。所以大家看到,我们这款产品的厚度是8.85毫米,优于市面传统的3D产品,而接近于目前2D产品的水平。同时,我们的重量也做到了750克,大家可以轻松地便携使用。
第二个是这款产品的颜色。我们并没有选择上一代S-PAD 1的天空灰色,而选择了冰晶蓝色。冰的冷寓意着我们的冷静计算、极致工艺,而冰晶的形成过程,又是从无序到有序的过程。所以,冰晶蓝的寓意,象征着我们既有对深海探索的求知要求,也有水晶通透的洞察力,也寓意着我们的团队持续坚持创新,去探索立体显示影像全新的边界。
同样,我们一直在提散热是整个产品的关键部分,所以散热也做了架构的重构。我们除了坚持之前的散热面积以外,还增加了多维度的散热,增加了近6000平方毫米的散热管道,所以,我们不光为大家提供了立体的显示效果,散热方案也在往3D空间升级。
接下来这部分,是我们一直强化的系统服务层。大家知道,我们刚才有描述软件的不稳定性,很大原因来自于安卓架构,之前的应用层是直接通到硬件层的,这样的话,往往不同的应用会面临重复的人力投入、重复的开发,而且不同的应用在前台和后台工作的时候会面临资源抢占,还有权限的失控,这样就会造成系统不稳定。
我们的小伙伴们针对这样的问题,重新构建了整个方式。所以,今天正式为大家介绍我们视延Runtime1.0。这是为了12.7产品专门匹配的,所以是SY RuntimeV1.0-127。SY Runtime肩负着几个历史使命:一个是要负责承接所有应用层的指令,去做统一的调度,服务系统管理,以及对下层硬件的统一调度。作为统一的窗口,可以实现两个功能,一个部分是所有的硬件会从原来的无序变成有序;另一部分,降低了所有开发者、其他APP合作伙伴,在往S-PAD 1E集成应用的时候可以提供标准的API接口。而且,API接口可以同时对景深调整的参数、相机渲染的参数,大家可以快速适配到S-PAD 1E产品中,可以降低合作伙伴的开发难度和创作者的进入门槛。
我们来看一下,在Runtime1.0的加成上,软硬结合的系统应用情况下,这款产品的规格发生了哪些变化?
首先,S-PAD 1E没有追寻之前S-PAD 1的SoC,而是选择了底层更加开放的瑞芯微平台。这个平台跟Runtime深度融合之后,带给我们的第一个好处,就是内容延迟时间降低了60%。这60%对3D体验效果是有质变的。尤其是在人的手持产品上,位置并不固定,所以眼动和屏的关系、和内容的关系会经常发生变化,60%的下降会保证产品可以很丝滑地满足大家对画质观看的要求。另外,通过60%的下降,我们也释放出了更多的算力给应用层去使用。
第二个变化是对摄像头的方案做了优化。大家知道,上一代摄像头是11摄的。有一个好处,但也有一个很大的弊端,就是11摄相互调用的时候,摄像头冲突、底层算量的挤占,甚至一颗摄像头的使用近1W的功耗,11摄就要将近11W的功耗。也许大家对11W的概念不是很清晰,一个平板电脑的使用功耗4-5W的水平,11W的功耗相当于产品的功耗翻了三番。原来一个小时的游戏体验,可能就只有20分钟的体验了,所以这个对续航是蛮致命的。在底层深度打通的情况下,我们把整个产品优化到4摄,既可以满足大家的3D观察,也可以满足轻量化的拍照需求,又可以把产品的运营功耗降低,使续航时间提高30%以上。
这部分是对内容层到应用层的阐述,也是我们今年重点加强的部分。我们的S-PAD产品推广也蛮长时间了,通过跟客户、合作伙伴沟通,大家发现我们的客户画像还是差异蛮大的,一部分客户是轻量化的体验客户,要求的是零门槛入手、快速使用。而另外一部分客户,希望把我们的产品硬件水平发挥到极致,要求的是深入合作、底层开放。所以,我们面向这两个客户人群,提供了完整的适配解决方案。
第一个部分是我们面向轻量化的体验客户来说的。这部分的客户,我们提供大量的预装软件,比如S-PAD Player,它是一个3D视频播放器。您可以按照2D视频播放器的使用操作情况,将一个3D影片在下面完成一次性点击,即可以享受光场显示带来的效果。另外一个部分是S Model,如果您有一个已经完成的3D模型,希望跟您的客户沟通,或者自己校验和展示的话,S Model就可以完成轻量化适配,它也支持大部分的3D模型。通过这样的方式,我们可以给大家一个轻量化、零成本的上手方式。
另一部分是面向深度合作客户,我想通过两个深度合作的典型案例,给大家阐述。
第一个案例是我们针对于弱视训练一体化的解决方案。提到这个方案,是蛮有意思的一件事情。大家知道,视延一直是对人眼看得更好去服务的。当然我们同时也关心,大家看得更好的时候怎么用得更健康。弱视这个部分,就是我们的一个切入点。
先给大家普及一下弱视的概念。简单来说,一个眼睛是正常的,一个眼睛会看不清,算是一个特殊人群。当然,这个人群也不是很少的数量。大家可以想一下国内弱视人群数量是多少。
这个部分是我们调研出来的数字。从官方统计来看,目前国人的眼睛处于亚健康的状态有将近80%以上,而其中主要的人群以近视为主,近6亿人群,弱势人群达到了4000万,其中30%都是青少年人群,这也是干预训练的黄金时期。大家也看到,这个数字还在不断稳定地增长。所以,我们出于人眼健康角度展开了合作。
这是现在传统的针对弱视训练方法,训练方法是先把一个好的眼睛盖上,做一些精细化的运动,比如串珠、描图,去训练弱视的眼睛。另外一个是借助医疗设备,无论是头戴式的医疗设备,还是手持式的医疗设备。大家可以看到小朋友的表情,在这个年纪是很难做枯燥、无聊的事情,针对弱视的训练效果,并没有取得很好的成绩,这也是各个医疗团队一直在思考的问题。
早在2020年,就有团队将传统的3D显示用于相关训练工作了,但是很快就停止了。原因是什么呢?医疗行业也给了答案。很明显的一个数字是,传统3D显示给大家带来的疲劳是正常2D显示的3倍,我们总不能训练了一种亚健康,得到另外一种亚健康,所以那个项目很快就停止了。但是视延产品的好处,清晰度和串扰都特别优秀,反而传统3D带来的负面信息是我们的优势,所以我们在不断寻找合作机会。
我们在寻找的路上,刚好遇到了同仁医院的袁进教授团队。同仁医院的袁进教授团队是非常优秀的团队,是国内眼科健康训练标杆团队,在立体式培训、视觉干预训练等方面,积累了大量顶尖临床经验以及学术成果,所以也是一个很好的机会。给袁进教授看了我们的产品,对我们产品的清晰度、立体效果给了高度评价,也将我们的产品纳入了他们的研究范围之内。这是他的研究报告。
大家知道,如果是一个面向青少年甚至是用眼健康的产品,要想进入这样的行业,第一关要过的就是安全、舒适,这是一个很关键的指标。袁教授团队在这个方面给了很严格的考核,他是按照临床研究来做的测评。做了完善的评测标准,同时招募了试训者来完成测试。
我们的产品是通过了这项测试,他们同期也找到市面上传统的3D产品,并没有通过,对我们来说是一个很正向的认可。不光是通过了测评,而且得出来一个结论,初评的效果对弱视训练的效果更好,而且给了我们一个科学范例的安全使用范围。
基于这样的测评,袁教授团队将我们的整个产品定义为,作为新型显示方式为弱视范式的数字化呈现与临床应用提供了高效载体,也正是加入了他们项目组进行临床试验。大家看到,我们临床试验经历了前三个阶段,其中包含安全测试阶段、人类一体化方案落地阶段,以及伦理委员会评审阶段,我们都已经完成了。目前正在第三个阶段,就是真正的临床试验阶段,团队在进行各个志愿者的部分工作。右侧的图是产品界面的APP。
说了这么多,也想让大家听听专业人士是怎么来评价这件事情的。
-视频-
大家听了专业人士的意见之后,发现我们的产品无非就是清晰度更高、串扰更少,但它的应用场景反而是更广阔的。弱视训练设备,一方面是给大家体验了一个很好的场景;另外一方面,居家使用也是一个很好的状态,既解决了家长奔波劳碌,也释放了医疗资源,所以这个场景是个很好的应用场景。
当然,我们也可以跟大家分享一下我们跟视训团队配合的实际经验。这个项目,原来视训内容是呈现在Web端的,也就是一个网页的3D内容。视延团队通过将网页封装成APP的形式,装到了S-PAD 1E的产品上,已完成了整个产品。同时,我们针对医疗的训练范式,包括UI交互以及外形做了深度定制。这个产品也在同仁医院的视光中心,欢迎各位合作伙伴前去实地考察。我们相信,针对健康领域,我们的光场产品会有很好的应用场景。
另外一个部分是针对于AI合作的。其实,3D+AI这个方向和光场显示产品是一个很好的契合点,不是蹭AI的热度。AI和3D,在我们的理解上是双向赋能的过程。比如,大家知道,3D显示产品虽然每年都会迭代,无论是硬件的升级、技术的升级,一直缺的是优秀内容和优质应用,造成3D显示行业一直属于小众行业。但是,AI的加速反而降低了3D内容的制作成本,所以大家可以看到,3D+AI会形成源源不断优秀的内容,来填充3D显示行业。因为源源不断的内容出现,所以反而对优秀的3D显示产品提出了更高的要求。
反过来,如果您拥有一台很好的,可以把画面细节表现力、景深深度表现出来的3D显示终端,您在做AI创作的时候,可以快速地将您制作的产品看一下它的空间结构是怎样的,景深状态是什么样的,纵深层次是什么样的,是不是有设计漏洞,而不是又要依赖于重新做3D打印、重新建模,或者产品做出来之后要花更多的时间在现在的二维产品上转来转去去看。相当于对创作者的门槛降低了,引入更多的人进入AI+3D的状态,所以我们理解这两个部分是双向互动、互相赋能的过程。
而在寻找3D+AI合作的时候,我们也特别感谢VAST团队。大家知道,VAST是全球AI+3D内容生成的国际领先企业,TripoAI平台具备高速、高质量的三维资产生成,在业内闻名,并且已经有了繁荣的创作者生态。其在游戏、3D打印、工业设计以及创意内容等诸多领域,都有大量的实践案例。
我们跟TripoAI合作的两个大模型,一个是P2.0版本,一个是H3.0版本。首先,P2.0版本是一个面向专业游戏生产管线、原创型内容创作,以及3D Web工具等诸多领域专门打造的模型,具备着在数秒之内就可以生成一个3D资产,而且可以直接用于引擎。无论是在游戏制作环节的模型快速使用等等方向,都会有比较优秀的表现。而H3.1模型是面向工业级的应用,主打的是高精度,所以对几何的清晰度和对细节表现力推向极致的应用场景,这个模型很适配这样的场景。像游戏的制作以及产品的设计,还有我们看到的复杂建筑模型,以及大型装备的3D细节资产,H3.1模型都能很好地驾驭用户需求。所以,基于这两个成熟的模型,我们进行了深入合作。
Tripo AI的APP已经是很成熟的解决方案了,我们用了另外一个方式跟Tipro团队进行合作,视延提供了SDK,以及内容渲染的景深参数建议等信息,由Tripo团队进行APP适配,快速把其内容呈现到S-PAD 1E上。
这是一个小视频,我们的产品上已经搭配了Tripo AI的APP。受限于现场屏幕的2D屏幕,大家可以移步到展台看看Tripo AI高细腻度、高画质模型在屏幕上的表现。
通过这样的情况大家可以看到,我们跟Tripo AI合作的是一站式移动端的解决方案,包含了用文字、用图片快速生成3D内容,以及如何把3D资产搭配场景落地的全链条,对创作者有一个很好的界面,创作者可以随时随地进行三维创作,创作完成之后,可以快速通过光场显示产品看到他所制作产品的实际效果,无论是立体结构、光影结构,以及模型的完整性,可以做调校、修正等一系列工作,加快了创作者的互动。我们相信,这样的一站式解决方案可以赋能很多应用场景,包含教育、文博以及科技。结合当下的3D打印、创客以及机器人等等很多领域,我们期待着这些场景有更好的表现。
相信通过我们的以上介绍,大家可能已经在猜S-PAD 1E的定价是怎么样的。今天也来了很多老朋友,大家也记得去年S-PAD1发布时的定价,19800元。我们今年发布S-PAD 1E的时候压力挺大的,因为大家知道,今年的供应链成本上升得特别快,内存快速涨价,所有的部件价格都在走高,连板材的供货都很紧张。今年S-PAD 1E的价格要做到什么程度,才能满足大家对消费级的心理预期呢?
现场观众:1万以下。
孙伟:是的,我们没有写错,零售价8900元。大家通过这个数字,也感受到了视延团队在光场生态的诚意满满,8900元,仅是去年45%的价格,就能拥有流畅的平板显示电脑,既能赋能您跟客户沟通的场景,也能赋能您在创作的时候快速观看的要求,我相信它是一个生产力的“小帮手”。当然,我们一再强调8900元是产品零售价,而且大家也不用担心,现在的产品已经进入了正式的量产阶段,在今年12月会正式完成发售。我们已经准备了大量样机,希望生态合作伙伴可以提前联系我们,让我们一起合作,把这个产品正式销售之前做得更好。感谢大家一直对我们的陪伴!
虽然我们价格做到了消费级,但是我们清晰地认识到,S-PAD 1E产品还处于迭代和成长期,因为我们的S-PAD 1E还缺少很多优质内容的赋能,以及场景落地的打磨,所以我们一直在尝试着寻找合作伙伴,也欢迎像垂直场景的合作伙伴,去探索在什么样的场景下应用落地方向会更好,我们也欢迎内容制作者、AI内容平台以及3D资产的厂商跟我们一起合作,共建整个生态环境。
我们总说“独行快,众行远”,我们也期待着可以跟更多的同路人一道,将工厂技术推向商业化、规模化的量产。谢谢大家!
以上就是我们今年12.7S-PAD 1E发布内容。相信大家意犹未尽,我们今天还有另外一款惊艳的产品给大家发布,下面有请陈丽莉为我们带来另外一款产品的发布。
陈丽莉:各位来宾、各位合作伙伴:
大家上午好!非常感谢大家来到今天的发布现场,我是视延科技陈丽莉。
前面远哥分享了视延过去几年所做的工作,一直在技术创新、降本增效和合作共创方面做了很多工作。刚才孙总也介绍了我们一款创新型的产品S-PAD 1E。下面由我来介绍我们精心打磨的32英寸桌面级3D一体机。这款产品也融入了我们开发的初心,就是为价值创造而生。
可能有的伙伴会问我,前面你们已经设计了32 MNT产品,为什么还要做一款AIO产品呢?
首先,我们看一下行业现状。裸眼3D技术已经逐步成熟,从显示面板到光学方案,从芯片能力到交互方式,这些关键技术已经得到了很大的进步。但是有一个尴尬的现状,就是内容还不太完善,我们的内容生态远远跟不上硬件的发展,这就造成了一个局面“有屏无内容”,也就是没有更舒适、更好用的应用和内容提供给用户和行业,我们的产品进入到行业中比较困难。
3D行业核心竞争力,屏幕虽然是硬件的一个载体,但是内容才是整个3D产品的灵魂。如果没有内容,我们的产品还是处于不完善,不是特别令人满意的阶段。这就是我们这款产品所要解决的问题,从内容到用户的“最后一公里”,怎么样能在我们这个产品上有所解决。
如何解决呢?我们也确定了方向,从MNT走向AIO。MNT就是传统显示器的状态,高度依赖Windows主机,没有主机也就没有3D内容的显示。第二,它需要单独开发,也需要单独部署。对于终端用户接触3D内容的时候,成本是非常高的,他需要买主机、装系统、配环境、走内容,每一步都是一个门槛,也是没办法迈过去的。但AIO是一体机的形态,它是系统层面的工具,可以交付给客户的是从系统到应用的完整性硬件。也就是说,把每一位用户接触到3D内容的门槛降低了。这也是我们一直做这件事的初心,把复杂留给我们,把简单还给每一位用户。
有的伙伴可能就会问我们,你们为什么要选择安卓系统来作为技术底座呢?安卓系统是消费级的内容主阵地,它有海量的2D内容,我们可以把这些2D内容更加便捷地向3D迁移。安卓同时也可以跟Windows形成互补。安卓系统是面向消费与内容的,但Windows是面向专业与生产的,两者可以各取所长。安卓系统开源生态也支持芯片战略的落地,可以为技术升级保驾护航。从MNT到AIO,也是我们从单一的硬件交付到全链路生态服务的关键一跃。
基于这样的思考,我们也确定了产品和技术的路径。视延科技要携手合作伙伴,一起构建从内容到展示端到端解决方案。最底层是硬件层,包含显示、光学、芯片、传感和处理器。我们经过深度的自研调校,可以把3D显示效果的清晰度、立体感和舒适度都拉满。中间是系统层,包含操作系统、运行环境、开发工具。我们基于安卓开放的生态,可以把3D内容进行更好的适配。最上层是内容,需要我们和合作伙伴一起来建立。我们希望每一台3D产品都有更优质的内容,服务于客户。
基于这样的方案思考,我们做了很多检讨、方案的验证,最终在下面马上要发布的产品上得到了很好的验证。
这就是我们今天要发布的第二款产品——32英寸3D一体机。这款产品相比于之前的32MNT产品,它的设计更加简洁,采用一体化的设计。配色采用云母白的色彩。设计理念主要是考虑明日初升的想法,方圆的结合是承上启下,可以迭代跃迁。同时在接口方面预留了HDMI、USB等接口,可以即插即用。大家可以看到,我们配备了键鼠。您拿到这款产品即插即用,开机就可以使用。
前面都是外在的,我们看看内在是什么样的。首先,我们看它的立体显示效果。这款屏幕采用的是31.5英寸显示面板,3D单视点分辨率可以达到4K,总像素数可以达到1.3亿。3D水平视场角可以达到±30度,观看距离从0.6-1.2米,可以支持2D到3D的自由切换。一个人坐在桌前,可以达到很好的立体观感。
再看一下显示画质,这款产品支持丰富的色域,DCI P3、Adobe专业的色域,让专业开发者,像影视行业或者专业设计行业,可以得到更好的色彩还原。同时,这款产品也支持10bit的色深,可以让显示内容更加平滑、自然。
前面讲了我们有很强的色彩表现能力,有什么样的内核驱动呢?处理器选用的是国产瑞芯微RK3588平台,有8核CPU、6TOP NPU以及GPU。我们充分发挥了这些核的资源,把我们实时的景深计算,以及多视点渲染技术发挥得淋漓尽致。我们的产品也配备了WiFi、蓝牙等模块。这款产品有线、无线都可以连接网络,使端云协同的方案更方便落地。同时,这款产品采用了RGB3摄的方案,可以获得更好的空间探测能力。32AIO产品,不管是从显示效果、色彩表现,以及系统配置,都是一款非常优秀的产品。
在这里可能又会有伙伴问我们,这款产品我们之前已经适配了视延1M、1E的机型,我们能不能把这些内容迁移到S-PAD 1E产品上?我们的答案是“可以”。因为AIO是一款全能型选手,一机两用,多项全能。AIO不仅是一台一体机,同时可以直接连电脑,它也是一台显示器。我们在AIO的模式下集成了系统和应用,也就是说它是一台独立的3D显示设备,可以运行轻量型的内容。作为一款32英寸的3D高端显示器,可以直接连接主机,也就是可以发挥主机生产力的优势,提供更好的渲染内容和模型载入。
这款产品,这两个功能,对于每一位用户都是添光加彩的。为什么这么说?用户用一台的价格,获得了两种使用能力。同时,这台产品也可以自由切换,比如在观影、展示或者娱乐的场景,我们可以自由进行切换。另外,这个产品想怎么用、用来做什么,交给了在场的每一位用户和合作伙伴手中。“出彩由您来定义”是这款产品的宗旨,让每一位用户,不管是曾经有的3D资产,还是未来要有的3D资产,都能够在这个产品上发挥最大的效能。
前面说了功能方面的介绍,我们看一下关键技术的升级情况。
我们的光学方案从第一代升级到Gen2,可以带来更精准的光学表现。可能有的伙伴也会问,它有什么变化?在暗场景的变化下,我们是不希望被重影串扰来打扰的,它会影响一些判断。光学带来哪些变化呢?先看这些数字。串扰水平降低了60%,相对于一代产品。垂直视场角也翻倍,透过率提升15%,成本降低一半。
这些指标可能还是没有直观的感受,我们下面看两个场景。医疗影像场景,医生在读片的时候,希望在暗场的环境下看到更多病灶的细节,是不希望被重影干扰的。这一代光学方案的升级,在暗场景下的显示内容更加清晰、更加干净。大家看一下左侧的画面,它是有重影的,看着很不舒服。右侧的很清晰。可以为医疗场景,不管是术前还是做教学、会诊,都提供了比较好的展示方式。
另外一个产品是文博的展示方式。现在好多博物馆有些文物是在深色背景下的,也希望把文物的细节展示出来。也就是说,想要鲜活的呈现。我们采用最新的光学技术升级,左侧看还是有模糊的现象,右侧已经可以得到非常清晰、干净的画面。验证了一个口号“让文物活起来”。我们希望文博能成为3D显示未来非常重要的场景。光学的升级,对于我们的产品来说,它的每一次升级都是给每一位用户创造价值的。
第二项升级是芯片和架构系统方面的优化。系统和芯片都是产品的“心脏”“大脑”,不管是调度还是各方面的控制,都可以让整个系统流畅运行。我们在这里做了很多的优化工作,像显示方面的控制器,把色深从8 bit提升至了10 bit,输出信息量提升25%;驱动IC集成度也提升了,单位面积驱动信息量提升了160%,显示控制器收发数降低了1/5;背光从PWM调光升级为DC配光,我们长期看屏不会觉得有屏闪,更舒适;摄像头从5颗黑白摄像头升级3颗RGB摄像头。
我们看两个数据,架构的优化最直接的两个数字,成本降低75%。75%是什么概念?把这么高端的3D显示内容拉到更亲民的价位端,也就是说让每一位用户用得起、更好用。另一方面是功耗降低65%,功耗降低带来的是什么?我们可以更长期地使用,散热的压力也小了,而且这个产品是没有风扇的,很静音。功耗的降低,再结合显示效果的提升,这款产品是一个“组合拳”,真正地把我们从性能优化再到显示效果的提升,拉到了让更多人使用的程度。整体来说,为这款产品的架构优化再鼓一次掌。
前面说了很多硬件的,我们再说说软件。前面远哥和孙伟都提到了安卓系统的优化,以及视延的Runtime。这里我们要提一下Runtime。Runtime是整个系统3D内容显示的运行层,向上是面向内容服务,我们可以统一API接口,比如渲染、交互、分发等API,也就是我们交付给客户的,客户是不需要更多关注底层方面的变化的。对于硬件,我们是一个面向于硬件的服务,硬件发生了哪些变化和差异,大多都可以兼容。对于每一位用户来说,您只要做内容的创作就可以了,底层的任务交给我们来完成。视延在做的一件事情是,把难的交给我们,简单容易留给每一位客户。
Runtime有两个关键特性:第一是统一了API。也就是说,客户只要拿到产品和SDK,就可以一套接口通吃;第二个特性是一次开发多端运行。您开发的内容,可以在譬如Pad上、AIO上使用,真正为客户解决硬件难题。
对于这次系统的重构,我们先说安卓系统,它在显示方面,因为安卓系统大部分都用在手机和Pad上,本质上还是2D的显示机制。2D的显示机制想要表现3D的空间能力,还是有许多工作要做的。我们对于安卓系统显示机制的流程也做了重塑,我们把渲染的管线重心做了进一步提升,真正做到了智能地切换2D到3D内容。在Pad上,在AIO上,2D内容该怎么用还怎么用,3D内容由我们一起和合作伙伴来定义。
安卓系统还有一些层级方面的问题。我们在交互的时候,有很多跨层的工作,带来了哪些问题呢?同步的问题,另外一个是延迟的问题。我们对安卓系统做了一个梳理,把整个层级做了链路的减少。也就是说,让系统更快地跟硬件能沟通上、能交互上。这里举了一个数据,是眼追算法时延降低了62%。这个是指在AIO模式下,安卓系统下。功耗降低了36%。Runtime一个管显示、一个管交互,二者相互结合,可以给每一位提供更流畅的体验。
前面说了Runtime的重新定义,上层的系统应用也进行了重新定义,所有应用都是以“S”来命名的,S也代表了视延的生态。S-Model是我们在AIO上运行的一款轻量型查看器。在AIO上,我们实测过,50万面片的模型数据可以跑满60FPS。S-Viewer是一款PC模型渲染工具,在Monitor模式下,我们连接主机就可以把模型在查看器里进行预览、编辑或者是其他的工作。S-Viewer的运行情况,像百万级的3D资产,比如很多大的模型,我们之前有实测,比如在4060的显卡上,都可以流畅运行。3D内容比3D内容至少多一倍。S-Model和S-Viewer两款都支持主流的很多模型格式,像FBX和STL等等。同时,我们也在逐步把兼容的格式做得更全更大,给每位用户带来更便捷地使用。S-Player是3D视频播放器。这是一款依托于RK3588硬件解码能力的播放器,可以跑满8K、60Hz的3D视频。我们也支持side-by-side、line-by-line等多种格式。S-Gallery是3D图片浏览器。在我们的S-Gallery里,可以很自然地浏览2D图片,在3D图片下可以看到非常好的3D效果。如果有高品质的3D内容,不妨在我们的S-Gallery里查看。
示例是我们用Blender光追渲染出来的,这个效果非常逼真,在我们的一体机上也有展示,如果有兴趣的伙伴,可以去看一看。刚才董总也提了AI+3D、ChatGPT-6和Blender的结合,可以把内容从专业的设计,拉到每个人都能去创作、体验,S-Gallery可以更好地还原。
S系列的系统级应用,从模型-视频-图片,相当于是一个“全家桶”,您有哪方面资源,都可以在我们提供的应用里面预览、操作、展示。
前面提了上层应用,我们最想给客户、给每一位释放的是系统能力,可以让更多的用户、更多的合作伙伴更好地使用我们的产品。我们提供了丰富的开发SDK。像安卓系统,我们提供了Unity和Native的开发SDK,目前也在适配gITF、WebGL,后续我们会相应地提供。在Windows平台,我们还沿用之前Monitor所有的SDK,而且是完全兼容的。同时,我们还支持Linux的SDK。
SDK的API都包括哪些方面呢?有四个方面:您可以了解设备信息,也就是您可以知道运行在什么样的设备上;第二,3D交互,我们把眼追和键鼠、触控等操作封装好,提供给每一位开发者、每一位用户,调用我们的SDK就可以直接获得相应的体验。在显示和渲染方面,我们提供了高品质的立体渲染SDK,您接入我们的SDK,可以在我们的产品上获得更好的立体观感。
在性能方面,我们开放了硬件接口,您可以在做应用的时候,如果想了解设备资源和性能优化,我们都可以支持。也就是说,视延在做的事情是,我们不止提供应用,我们还提供工具。把前面的路已经铺好了,等着每位合作伙伴一起来繁荣这个生态。
前面讲了SDK,讲了软件,如果您已经有模型和3D视频,只要接入我们刚才提到的视延几款应用,都可以快速地看立体效果。已有的2D内容,如果想要做3D呈现,我们可以提供设备连接和立体画面生成的SDK,最小的改动,可以让二维变成三维的呈现。说一下最小改动,我们想的是能不改就不改,能少改就少改,让每一位用户不要在这个上面浪费时间,在自己的模型设计或开发设计中,真正把3D显示效果发挥出来。
前面讲了这么多软硬件方面的情况,这里我们要说一下32AIO产品,不是简单的3D显示设备,是3D的可交互平台。我们的目标是让3D模型、3D内容真正活起来。这里为什么重点提了一下“活”呢?因为“活”这个字也是我们一直想贯穿在整个产品的理念和策略。比如在医疗场景,我们想让器官活起来,可以更方便地让医生和患者理解。在教学场景,我们让知识模型活起来,让每一个受教育的人都能理解它是怎么来的、该怎么用。在工业场景,我们让设备模型运行起来,不管是从生产流程到售后,都能更高效。
3D可视化平台需要整个生态合作伙伴一起来建设,我们下面分享三个案例,看一下我们是怎么来实际使用的。
首先是我们和Hi3D的合作,让创意跃出屏幕。Hi3D是国内非常优秀的企业,它可以做高品质的AI生成,像PPT上的“龙”和戒指,都是非常高的模型,我们看到的时候都非常惊艳,终于有非常好的模型可以用了。这些模型以前可能需要好多周才能由专业的开发团队开发出来,这个只有几分钟我们就能拿到,可以更好地呈现给每一位客户。
3D前面提了很多,前面也提到我们面临的局面,有屏无内容。传统建模周期长、门槛高,也是大规模使用的内容短板。这两年非常火的,就是我们刚才反复提的AI,我们跟Hi3D是怎么来结合的呢?是怎么样来打通这个链路的呢?
Hi3D有Agent智能体的创作,只要输入自然语言的描述,就可以生成高精模型,这些高精模型同视延的SDK对接,就可以适配到3D显示设备上,也可以在设备上做实时的呈现,那就是做预览、做操作各个方面都可以实时。整个链路,从AI生成到SDK、到实时呈现,三步中间是没有断层的。也就是说,我们在做这部分链路的打通,同合作伙伴一起,想要给客户、给用户提供更好的创作平台,每个人都可以成为创作者,不管是我还是在座的每一位。
这个链路可以在哪些场景进行落地呢?这里举了两个例子。一个是游戏创意设计,我们基于Hi3D的Agent AI游戏创作能力,用户可以通过自然语言生成3D游戏角色和道具。在视延的3D显示屏上,可以畅想沉浸式的3D游戏体验。这里可能有很多伙伴说,到底给我们带来了什么?像我们之前在PC运行的3D游戏,都需要几万、几百万的模型,在这里我们就可以方便地体验到。
像珠宝客制化行业,是高端服务行业,依托Hi3D API管线能力,为珠宝行业提供从结构化设计到3D预览的全链路客制化解决方案。在32AIO上可以呈现非常高保真效果。这里带来一个变化,珠宝行业的销售模式和体验形式会发生很大的变化,也就是更高效了,也许马上有现金到账。
我们与Hi3D的合作补齐了两端,让3D内容资产的创作门槛更低了,大家都可以使用AI大模型,让每一位非专业人士生成3D资产,告别了长周期、高成本的模型建模,人人都能成为光场屏幕的创作者。另一方面是生态更加健全,我们可以通过AI快速建模,直接在终端上展示出来。光场显示也不再是有屏无内容的状态,内容供给也得到了很大的提升,可以说,与显示硬件构建了完整的生态。
前面讲到了内容创作方面,另一个案例,是我们和CAXA数码大方的合作,这是比较传统也是更厚重的一个案例,最主要的是让经验看得见。对于制造行业和设计行业,最宝贵的是什么?人才、知识。最宝贵的是经验。这些经验的背后,怎么样体现出来,怎么样传承出来,这就是我们跟CAXA合作想要进一步让我们经验看得见的一个方面。也就是说,让我们更容易看清楚,更容易看懂、学会和做出来,也更容易沟通和验证。
CAXA是中国制造业有很多积累,不管是设计规范还是模型的建模,都做了很多积累的工作。国产软硬件的协同,怎么样把设计端到显示端真正发挥出来,是我们和CAXA合作最想要突破和看重的一点。怎么样把CAXA三十年工业CAD的沉淀,在三维的世界里更好地展现。
在工业设计里的两个环节,像评审环节,我相信每一位做设计、做开发、做制造的,都非常了解这个环节。之前我们可能是拿着幻灯片、2D截图在会议室里大家一起看,看的过程中,就会有认知的偏差,能力上的偏差。在设计评审环节加入了3D显示的呈现,可以让数据原样流转,设计端无需改造,显示端转换不需要等待,整个评审环节不再依赖于屏幕截图口头描述,评审更高效、更直观、更容易理解。
在教育环节,像中职和高校里面,传统的方式是老师在前面讲,在2D屏幕上进行教学,学生在底下听,听得懂那就是听懂了,听懂了有可能画不出来也装不上,造成了理论与实践的脱节。我们与CAXA的合作,也是希望在教学方面做更新的尝试,也就是裸眼3D的教学。老师在前面讲,学生可以看得见,也可以看到比如机械的结构怎么样装配的,理解里面的过程。深度信息可以一目了然,空间上的认知也有了很大提升。每一个学生不只是听得懂了,还能看得见。再结合老师的教程,我们真正可以做得出来。
这样有一个好处,从认知方面做了升级,从2D教学到3D教学,对每一个学生,对于这方面有非常多诉求和理解的,也是一次比较创新的理念。这样的方式,在未来的工作中,也可以更好地发挥它的作用。
我们跟工业设计行业这么好的一次合作,也是想把我们的设计成果直接立体呈现,也是国产工业软件与国产显示终端协同的正确方向。我们这里提到了四个收益,可以将企业经验沉淀下来,资产可以真正被用到、被看到;提升工作效率,用3D呈现效率可能是指数型的倍增;降低研发过程中重复工作量,可以减少建模;降低用人门槛,现在可以通过3D的呈现,降低培训、教学的使用周期,让新人或者让新接触行业的可以更快地进行工作和开展。工业软件的这部分合作,我们做了很多配合和调试的工作。
再介绍另外一个场景,是我们跟IO树的合作。IO树是数字孪生的高新企业,主要是做3D引擎方面的工作。之前的数字孪生大部分都是在浏览器上来使用和观看的,如果在3D里进行呈现,最主要解决的问题是,本身数字孪生就是3D资产。可以看到,所有的模型都是3D的资源,裸眼3D场景的结合,可以把屏幕里的内容真正让它立起来。
这里介绍了数字孪生的本质。它主要承载了三维数据的空间关系。刚才也提到了屏幕端都是二维的,二维的时候,三维模型是被压缩成了二维平面。在光场显示里真正呈现三维,真实空间深度,所见即真实。
我们跟IO树合作是怎么打通的呢?IO树在做场景的三维建模和仿真可视化系统的建设。结合视延开放的Web端SDK,可以与3D显示更好地结合。模型经过SDK的通路,可以直接到显示屏上,这样就可以达到实训效果和巡检实时观察的效果。四方能力的互补,打通了数字孪生到裸眼3D最后一端链路,我们也希望数字孪生可以在各个行业、在裸眼3D上发挥最大的效能。
前面讲了三个场景,这时候可能在座的合作伙伴就会问了,我们的价格是什么样的呢?前面也提到成本降低了很多,很多人在关心。再回顾一下32AIO产品,它不仅是AIO,还是一个MNT,一机两用。我们做了很多光学系统和软件的升级,把最好的效果给每一位客户。我们也提供了SDK等更多的工具,让我们未来有更多的显示内容可以在平台上发挥出来。
这时候很多伙伴就会想,我们的价格到底是多少呢?我也不卖关子了,我们激动一下。市场指导价57900元!不是六位数了,是五位数。32AIO也准备了样机,如果有这方面的需求,可以同我们的市场伙伴沟通,支持每一位合作伙伴的场景落地。
32AIO不仅在场景上得到了很好的实现,偶然也希望这些场景能够无限延伸,比如影视、游戏、文博、医疗、营销,这些场景有丰富的3D资源,我们也非常欢迎在座的伙伴加入我们的生态建设中,我们会开放合作,一起共赢未来。
以上就是我们的产品发布环节。下面有请陈延青做元宇宙的技术分享,有请延青!
陈延青:尊敬的各位来宾、各位领导、同事:
大家上午好!
在看过了刚才视延小伙伴们发布的两款(Pad、AIO)产品之后,心情非常激动,也觉得对于未来的3D显示更有了信心。今天是光场的论坛,为什么VR的站在这儿了呢?早在开场的时候学哥也讲过,大家都在做3D显示,能够把三维的信息更多地传给每个人。大家的形态不一样,最后都是殊途同归,所以我在这儿给大家再介绍一下FAST LCD在VR领域的进展。尤其是结合近两年AI的飞速发展,内容也在逐渐升级,以及应用场景也在扩展。在这个时期,各个应用场景又对显示有了不同的需求,未来VR到底要怎么去走,FAST LCD的路还有多远,希望今天的会上能给大家一些启示。
首先,我的报告有四部分内容。回顾一下VR的发展历程。从上世纪30年代就有VR的概念出来,只是受限于当时显示技术以及制造的难度,大家整体的器件并不是很好,有一些甚至非常庞大。逐渐到了21世纪的2015年之前,陆续有一些游戏公司或者类似于Meta大的社交媒体公司逐渐开发硬件出来,前期还是需要整机做驱动,如果做成一体式的话,还是受限于芯片的能力。这个时期大家只是觉得它刚刚能用,至于后边够不够用,如果大家有试用过的,觉得又回到了很古早的一个产品。从2016年到2026年这十年的发展,可以说是发展非常迅速的。
我分成了两个五年,前一个五年是一体化布局,之前的VR产品依托于笨重的主机,大家很难带着它来回走动一下,体验一下空间感,沉浸感也大大打了折扣。一体机的诞生,让大家更方便、舒适地去携带,以及显示技术的诞生,最开始的时候是OLED的技术,后边FAST LCD也进来了,成本逐渐下降。2012年发布的Oculus Rift价格是300美金,这个价钱在当时相对来说是比较亲民的,也使得VR逐渐走入了大众视野。从2012年之后,“元宇宙”的概念出来,发展得到了更大的激发,像空间计算、MR运算能力逐渐凸显出来,显示器件也增加了像硅基OLED这样的显示器件加入。同时,结合Pancake Lens技术,使整机的尺寸更小,也就是大家能够长时间佩戴它,光学指标也有一定提升。
再回到2026年,AI的驱动可以使场景更加丰富,未来VR的路线是什么样子的呢?这里有大概几个方向。第一个,一定是应用场景化的,针对不同的场景,可以做定制化的产品出来。第二个,要有高性价比,适合大家使用。元宇宙概念出来之后,大家可能体验的比较少一些,我们要以高的性价比让所有人都去尝试。另一个,伴随着光学性能的升级。
我们看一下AI+时代有哪些应用场景。比如娱乐、虚拟办公,办公环境自己不满意的话,戴上VR想去哪去哪,可以在海边开会。还有工业设计,比如器件怎么装配,平时看的是2D的,我也不知道它后面是什么东西。用了这个使用场景之后,可以快速进行操作。医疗、文博旅游以及仿真类的,都是我们的应用场景。每个应用场景对于器件的要求也是不一样的。总结一下,需要我们更高的清晰度、更大的视场角、更高的色彩还原性,以及低的运动延时。
说完VR的整个发展历史,再说一下FAST LCD的,因为我是做FAST LCD这部分的。FAST LCD从一开始讲的十年就一直在跟进,从2015年开始,FAST LCD就推出了第一代VR应用器件。最开始的时候,LCD产品基本上是PPI比较低一些,响应时间也上不来,之前的响应时间都在二十几毫秒。我们经过采用精细化的LTPS器件,通过精细的设计以及工艺的匹配,还有液晶材料的开发以及低盒厚技术的研发,第一代FAST LCD产品得以问世,也是首款应用在VR产品上的产品。这个时候它的PPI来到800,响应时间可以达到5毫秒。这个是刚才所说的勉强能用。
我们后来又对这个产品进行了不断迭代,在第一个五年的后端,我们逐渐提升它的PPI,因为PPI决定了清晰度。如果清晰度做不到高清,大家第一眼就觉得它是玩具,就扔在一边不想看了,所以我们第一个升级的是PPI。PPI从800升级到1200。在这个过程中,因为物理因素的限制,PPI越高像素之间的间距就会越小,像素之间免不了会有串扰的问题。我们这里应用了两项技术对抗串扰,熟悉LCD的同仁们知道,里面会有一个叫做PS的东西,它用来支撑液晶盒。它在相对滑动的时候会把一层PI膜滑掉。为了解决这个问题,我们使用了Smart PS技术,这两项技术支撑我们做到1200PPI。
后面的五年,到2025年我们做到了2000PPI。这个器件我们是怎么做到的呢?一年的PPI是从800逐渐上升到2000,但是下面的光学性能没有损失的,甚至色域还在逐渐上升。依托六大核心技术,核心技术是支撑我们现在的产品能够做到更高PPI的基础,也是未来AI时代我们需要在这个基础上进行提升的。
首先讲一下LTPO。LTPO相对来说也不太陌生,看这个对比图就可以知道,右边是LTPS,左边是LTPO,LTPO的优势是,可以把双栅变成单栅,在拮据的空间里面可以极大增加开口率。开口率代表着亮度、功耗。这个对比来看,我们可以提升相同的PPI,这是基于1500PPI做的计算,大概能提升10%。
第二个是COA的技术。刚才提到了,像素的尺寸越来越小,相互的电场干扰是不可避免的。再加上生产制造工艺能力的限制,串色的问题一直是困扰我们的。COA工艺的开发,可以极大降低串色,同时还有助于我们对于透过率的提升,毕竟之前是上下两层玻璃的对位,不可避免地会有一些遮光层会相互遮挡,现在没有这个问题了。同样的,透过率也可以提升10%。
第三个是高效像素,这里只是举了一个例子。京东方是专业做LCD产品的公司,我们对于精致像素的研究深耕多年。这里的一个例子,金属层,我们在TFT上会有多层的金属层,两层金属层之间会有干扰,我们想要的水平电场就受到了抑制,经过突破性设计是可以增加透过率的。大家可以看到,左边的像素是有些暗区,右边完全没有这个问题。
第四个是PLN填平技术,这也是一个创新的技术。我们做了COA之后孔洞太深了,液晶在这个位置会比较紊乱。同时,这个位置存在的话,金属电极就不能往左侧进行延伸,它的有效驱动场就太弱了,我们通过PLN填平技术,增加了一层填平层,液晶在这个位置就可以平行的排列一顺,电极也得到了延伸,光效也是可以得到提升的。
下一部分是Mini LED的使用。相当于是Mini LED的二代。大家都知道,Mini LED可以做一些Local Dimming算法局部调光。在这个基础上,我们继续研究。有两个方向,一个是动态CR,我们增加了局部的亮度调整,可以使对比度提升20%。第二个是光晕,因为Mini LED可以进行局部调光,但是它的光晕实在是太大了,对于Monitor来说,一个光晕如果是2厘米,这可能是比较常见的一个尺寸。对于VR来说,一个屏幕尺寸可能才3厘米、4厘米,光斑就相对比较大了。我们经过定制化的膜层优化,可以使光晕降低到20%,也可以认为光晕直径可以降低20%。
最后一个是精细化材料的技术研发。VR的尺寸小了之后,我们会受到曝光的影响,我们想做一个直角,结果做出来的是一个椭圆或者圆形的角。因为现在的VR基本上都在B20工厂去做,我们有先进的曝光机设备,同时有大量的厂商跟我们配合做材料开发。对于像色阻材料、BM材料,都可以做到精细的Pattern化。刚才说的那个支撑物,可以做到更小的TOP和底部的比,这个对设计是有优势的。
AI+时代,刚才提了好多应用场景,我们再度升级的方向是什么?回到最开始的问题上,还是基于PPD,我们觉得这是第一重要的。不同的PPD,大家的感官是不一样的。每个人看到的,我都不喜欢要第一张图,我都想要最后一个。现实是什么样子的呢?可以看到,这个是之前Meta发布的一款产品,PPD大概是20多。Vision Pro我们认为是业界的标杆,我们也都有佩戴者。如果看过那个显示效果的话,那个已经很惊艳了,PPD也只有30。我们在今年的SID上有发布一个2540的产品,PPD接近40。在这个过程中,我们遇到了什么样的问题,怎么解决的呢?
首先,材料体系的难题。左边两个是不同PPI的示意图。如果我们的PS、BM材料不做升级,透过率就会降低70%,只有30%。如果这些尺寸下不去的话,空间就这么多。再一个,PPI升高之后,对于线宽的要求会更小,微米的线宽再下去就要到纳米级别了,之前市面上的曝光机设备是不支持这个线宽的。同时,对于像素设计的难度,前面说过COA的像素,但是到2500PPI的话,做出来的坑上面的尺寸5.5,平坦的地方只有4.5,坑比平坦的地方都多,电场怎么能够均匀呢,会带来各种不均匀的问题。
对应的解决方案是,2540上我们首次采用了Delta像素的排列。Delta像素有一个优点,不像往常的SPL像素,会损失一些物理的分辨率。Delta像素,一个亚像素的面积是保持不变的。你可以理解为,一样的屏幕上亚像素数量是不变的,这样就保证了清晰度。同时,把横向距离拉长,可以减小对线宽的需求。之前线宽必须设计成1微米,现在可以到1.2,对均一性和设备就没有那么挑剔。
第二个是COA2.0技术,我们做了一个创新性设计,增加了一个PLN0的结构,可以在底部导通电极,使顶部的坑尺寸大大减少,这样一来有效的平坦区会更大。目前我们是想要黑色的PLN材料,只不过材料开发比较漫长。在此,想呼吁一下,如果有合适材料的小伙伴们,可以联系我。如果技术攻克了,对未来2500、3500PPI都是有机会做到的。
第三个是材料的内容。因为我们想要做高色域的东西,我们想要增加产品的分辨率,我们也会受限制。如果材料升级的话,现在是70%sRGB的色域,后面我们做DCI。做了COA之后,因为我们把RGB都做到了TFT上,膜厚的堆叠会极大影响后段的稳定性,我们希望膜厚越薄越好,但同时又要求色域在增加,这部分开发的难度也是比较大的。再一个,我们还要保证它有一定的存储电容,这么小的面积下,面积没有办法增加了,所以想从介质层上去想办法增加介电常数。如果提升1倍的话,我们是有机会做到3000以上PPI的。
在这儿,如果众多的供应商有优秀材料的话,可以找我们一起合作。期待合作伙伴与我们共同推进FAST LCD的再度进化。谢谢!
主持人/董学:感谢延青精彩的技术讲解。虽然数字很枯燥,但是到基础器件层面,这就是耗命的一种活儿。投一次EN,基本上两个月、三个月,还经常出不来良率。反正谁敢谁知道,这个东西绝对难。我在京东方从2015年到今天,十一年,从600PPI干到3000,非常难,展示出来的东西感觉特别骨感,但是没办法。要是做超高分辨率,就只能这样做,这也是京东方的基石。感谢工厂辛苦决绝持续的努力!
最后我总结一下。这次会议有几个事,给大家总结一下。
第一,把我们光场的事业做一个复盘。事业公司成立三年了,团队原来的基础是一个研究团队,相当于我们带着研究院的人,都是搞研究的。发表的人都是搞研究序列的,很有技术的个性,一看就不是容易互动的人,比较内秀。现在三年了,我们从一个基础概念验证,最终公司的本质一定是要变成产品跟服务的。那好,视延到底应该怎么定位自己的能力?前两年要投入做研发。从去年开始,我们要把好的技术落到老百姓家里面,这是我们不变的。我们追求的也很简单,就是让大家的信息交互界面从二维全部升级到三维,这也是不变的。我们努力的点也特别简单,我们一开始要先把效果打出来,让大家觉得就应该是这样一种效果。这两年是怎么样把性价比打下来,让大家能买得起、够得着,这个努力的方向也没变。
我们现在调整的一个点,京东方一直是搞硬件的,去年做的产品,刚才老吴说得还是比较委婉的,本身还是一个点,京东方形成的能力在系统软件层面还是比较薄弱。从去年12月份开始,到今年3月份、4月份,一直在讨论我们做一个产品应该怎么定义,而且一定要从软硬一体化的进行定义。之前硬件定义产品的思维本身就是有问题的,所以在4月份才把我们对产品能力建设的基本模型聊清楚。
4月份之后,我们的软件一定要强化。我们团队今年加了大概30个人,全部都是搞软件的。为什么?场景落地的时候,人需要的一定是内容,需要的一定是交互,第一界面一定是软件能力,没这个能力基本上落不了地,这就是为什么我们的产品不做MNT,后续的产品发布都没有MNT,最少是AIO。到场景的时候,没人愿意学习,你可能觉得很简单,插上就可以用。废话,插上之后还得下载一个这个东西,再弄一个啥,基本上就没人用了。我们做的一切,就是要把信息交互路径的短板全部补上,这是我们的目的。
这两款产品怎么定义呢?一个是32寸的AIO,我们定义成类似于生产力工具,偏细分市场,主要是以合作伙伴在细分市场形成的服务升级。为什么?很多细分市场的三维内容已经很成熟了,刚才描述的几个案例,也都是我们实实在在合作的,而且模式一定要绑死,战略性合作,最少三年,把一个场景做扎实,一个场景一个场景做。这是我们给合作伙伴的承诺,彼此生态建设的定位。
视延把32寸作为我们的细分市场生态建设的基本抓手,后续每年都会把这个产品做升级的,包括性价比,包括性能。即使现在觉得很好,实际上还有很多问题需要升级。包括交互,还是缺失的。包括UI界面,现在操作系统只是顺起来了,硬件太硬的话,UI界面不太人性,这些都需要建设能力。
第二款12.7,我们一直想做一款相对性价比高的产品,把刚才描述的弱斜视问题形成落地。我们从去年、前年开始做12.7,今年也做这个东西。刚才说AI的引领,引领的是全球视景图(音)的副作用,叫芯片电子料价格暴涨。本来是想定义一个更有性价比的产品,结果干到一半的时候发现所有材料都涨价了,而且不是涨价10%、20%的,基本上就是几倍几倍地涨,现在这个行业确实非常疯狂。心里面很纳闷,显示也是电子料,为啥不涨呢?有时候觉得很不合理。
另一块,要努力把性价比成本做下去,做到老百姓都买得起,弱斜视偏知识层面、健康层面的东西,让大家能接触到,确实解决一些核心问题。这两款产品现在的状态,本身都是缺失内容的,内容非常稀少,所以我们合作的重点,就是找有内容的合作伙伴,跟我们一起往场景去落,这是希望借这个大会形成的呼吁。
视延的定位,我个人判断,信息三维化升级一定是生态层面非常大的动作,它对任何一个公司的产品来说都是一个大动作,所以它涉及到生态层面建设的持续性问题。视延这个公司,本身就是要把从内容到展示的端到端,之前定义的叫硬件,现在定义要改成系统方案的能力,把它做扎实,跟内容伙伴一起把这个做起来,持续做生态建设,有更好的技术、更亲民的技术,把它做起来,这就是我们未来持续的主攻方向。
希望我们明年再会,到时候再把更好的产品、更好的交互方式给大家展示出来。谢谢大家!