关注我的朋友应该知道,我们从vision Pro发布之后,就开始在做空间计算,团队已经上线了几款空间计算App,同时随着Transformer技术架构成熟,我带着团队正在以科研与工程的方式继续推进,越来越认为这是人类能力补全计划。
![]()
已经脑机接口的操作系统,在空间计算里。以MindSoulApp上线在AndroidXR、与vision OS平台。
得益于这一恰逢其时的开放研究浪潮,我们感谢 Meta 开源 TRIBE v2,并发布基于 MEG 的 Brain2Qwerty v2 训练代码与研究资源,才加速我们推进MindSoul的大模型研发与伦理证明。
虽然Meta QwertyV2到现在还没有release,但其相关成果已经证明了在Transformer下,随着相关scaling的数据集增加,脑机接口的数据标注同样可以标注,是可以通过大模型来完成大脑的解码,并且达到语义准确度78%。
基于Meta的实验,我们团队更加肯定我们的方向,计划完成4个模型,会接下来和MEG相关机构或脑磁仪公司合作、以及科研机构或医院合作完成Fmri的数据采集,所以现在在寻找fmri机构与设备公司来合作。
![]()
如下是我们团队利用公开数据集以及相关公开文献的方法完成的工程实现,完成了脑机接口的空间可视化,并且我们正在朝着锁定每个人大脑兴奋区域可视化、以及大脑具体信号EEG实时可视化与解读进展。
![]()
我们一直把MindSoul本质上就是一个大模型公司,只是我们依托于MR眼镜的空间计算,放在空间操作系统上。
因此形态是空间操作的一个App,所以称之为一个脑机接口的操作系统,我们将侵入式神经元信号进行transformer训练、以及FMRI、以及MEG,将其文字、图像、以及情绪、以及空间四肢、甚至是十根手指来完成提取,从而完成EEG不能达到的数据质量、数据维度,来建设更加精细化控制、识别的大模型。
并且用相关神经元数据、以及Fmri数据来蒸馏EEG数据,完成更高准确度的EEG大模型,因为给予用户端的,我们认为一定是EEG会更加容易普及至少在最近3年,而随后则是超声波脑机接口才可能。
通过空间计算操作系统的空间定位与锚点,我们可以随时匹配到每一个带脑机接口头环的用户上方头上的脑部区域可视化,通过情绪、娱乐化、甚至是感兴趣与否来解读,人类真实的反应。
并且让人类可以用意念来完成控制万物的底层逻辑。
当然现在我们团队称之为人类能力补全计划
当然这一切还有对应的基于眼球、手势以及上体姿势的意图模型,这个是围绕世界理解的模型。
我们还在努力,现在还在积极完成相关的科研工作,因为有了这部分MEG、与FMRI的数据以及训练,才能说真的完成金标准,因为这是神经元以及最接近神经元的数据,FMRI采集脑部供血变化。
如下是团队阶段成果,以下来自公开数据集与公开文献的产品框架与方案
今天的分享就到这里。
找我交流与合作 空间计算与脑机接口系统开发
题图来自 Unsplash ,基于 CC0 协议, 如有侵权,请联系pmtalk123删除
“分享产品经理改变世界的点滴”
产品顾问| 产品咨询|培训合作
请添加微信PMxiaowanzi
最近我的原创
不好意思,Axure仍然是我主流的原型工具
每日案例拆解库,AI等产品打卡群
我创建的产品设计打卡社群,加入后365天,每天体验一款APP。提升产品设计能力,同时有1300份体验报告帮助你找到竞品
在这里你可以随时查询到你想找的各类竞品行业APP,无须自己亲自下载就可以马上得到APP的一手产品优化、交互设计、功能描述信息。
从优化&建议、商业模式、运营、功能描述、交互设计、产品定位至少6个维度,体验一款应用。
平均1天1块钱,扫码购买即可加入
连续体验48款应用,通过后原路退回
报名后添加星球助理
PMTalk123
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.