网易首页 > 网易号 > 正文 申请入驻

自动驾驶终于有了彩色三维眼睛:它能同时看清物体的颜色和距离吗

0
分享至


汽车已经能测出物体有多远,却未必知道它是什么颜色

一辆车在夜间接近十字路口。传感器发现前方有一个圆形灯具,距离约30米,三维位置也测得相当精确。

但如果系统不能可靠判断这个灯发出的是红光还是绿光,光知道距离并不能帮车辆做出正确决定。

这里藏着一个容易被忽略的事实。摄像头和激光雷达看到的根本不是同一种东西。

摄像头采集的是颜色、纹理、文字和图像细节,适合识别交通标志、车道线和信号灯的状态。激光雷达发射激光脉冲,根据光往返的时间计算距离,反复扫描后拼出一张三维点云,擅长回答"东西在哪里"这个问题。

传统方案把这两套数据硬拼在一起,让系统知道图像里那个红色信号灯,究竟对应三维空间里的哪一个点。

问题出在拼接这一步。摄像头和激光雷达往往安装在不同位置,有不同的视角、分辨率和采样时刻。车一旦动起来,近处物体的相对位置变化特别明显,标定或同步稍微有点偏差,颜色就可能被贴到错误的空间坐标上。

美国公司Ouster今年5月推出的Rev8系列,想解决的正是这个拼接环节的麻烦,把颜色信息和深度信息直接整合进同一套传感器架构。

机器看见一个物体,和机器知道这个物体在三维空间里的准确位置,原本是两件事。

把两套数据拼起来这么麻烦,能不能从传感器设计阶段开始,就让颜色和距离天然对应?

真正的变化不是给激光雷达加一台摄像头,而是让颜色直接进入芯片

先澄清一个容易产生的误解。过去的车并不是完全拿不到彩色三维地图,把摄像头和激光雷达装在同一辆车上,再用算法把彩色图像映射到点云表面,这种融合方案已经相当成熟。

Rev8想改变的,是数据产生的方式,而不是从零开始发明彩色三维感知这件事。

根据Ouster公布的技术资料,这款产品的L4芯片采用单光子雪崩二极管探测器,把激光测距和环境光颜色采集整合进了同一套感光架构。激光回波用来算距离,环境光经过光谱过滤处理之后提供颜色信息,芯片把两者在物理层面对应起来,让输出的每一个三维点天然带着颜色。

这里要特别小心一个误区。不是激光打到一个红色物体上,仅凭激光回波本身就能知道它是红色的。测距和颜色采集依赖的是不同的信息来源,只是这次它们被安排在了同一套传感器里同步完成。

可以这样类比。传统方案像两名测绘员分头画地图,一个人专门记坐标,另一个人专门记颜色,最后把两张图拼在一起。原生彩色方案则试图让每一个空间测量点,从生成的那一刻起就自带对应的颜色标签。

Ouster公布的Rev8指标包括48位色彩数据,每秒最高200亿个光子级别的探测能力,旗舰型号OS1 Max的最大探测范围达到500米。这里需要提醒一句,500米是厂商公布的理论最大值,不等于所有目标在这个距离上都能被可靠识别出来。

真正的升级不是机器终于长出了两只眼睛,而是颜色和空间位置不再需要完全依赖后期拼接。

当每一个三维点都带上颜色,机器得到的就不再只是一团轮廓,而是一张带着丰富视觉信息的空间地图。


从20米外的一辆车,到500米级探测范围,机器究竟多看懂了什么?

先说清楚三维点云是怎么来的。激光雷达发射脉冲,接收目标反射回来的光,根据往返时间算出距离,大量这样的测量点累积起来,就构成了物体和环境的三维结构。

如果这些点还带着颜色,系统就能在纯几何结构之外,多拿到一层视觉线索。

在交通场景里,这能帮系统把信号灯颜色、道路标志和它们的三维位置直接对应起来。在工业机器人作业里,这能帮机械臂区分外观相近但颜色不同的零件。在测绘领域,这能让建筑和设备的三维模型保留更直观的表面颜色信息。

Ouster给出的数据是,旗舰型号OS1 Max最大探测范围500米,在反射率只有10%的条件下标称探测距离为200米,采用的是45度视场设计。不同型号的视场角和探测能力并不一样,这不是一个放之四海而皆准的单一数字。

这一步必须提醒读者,探测到一个点,不等于已经正确识别了一个物体。点云的密度、目标表面的反射率、光照条件、天气状况、是否被遮挡,以及后端感知算法的水平,都会影响系统最终能不能准确理解看到的东西。500米这个参数,不能直接等同于"500米外的红绿灯都能被看清楚"。

彩色三维数据提供了更多线索,但机器能不能据此做出正确判断,仍然取决于整套感知系统,而不是某一个传感器单独的参数。

【配图建议:同一条道路的三张对照图,依次是普通摄像头拍摄的彩色图像、传统黑白点云、新型彩色点云,分别标出车辆、路牌、信号灯和路沿的识别效果差异】

颜色和空间信息能在同一传感器里天然对应,听起来很合理,那为什么过去的系统没有直接这样设计?因为把两种功能塞进同一块芯片,远远不是把两个模块焊在一起那么简单。

## 每秒处理200亿个光子,难点不是数字大,而是如何从光里同时提取两种信息

激光雷达要测距,必须精确判断激光回波到达的那个瞬间。时间测量哪怕只有微小误差,距离计算结果就会跟着偏。

与此同时,颜色采集需要区分不同波段的光。传感器既要拿到足够丰富的颜色信息,又不能让环境光干扰到激光测距的精度。

把这两件事放进同一套架构,首先要在光学层面把测距信号和颜色信息尽量分离干净,避免互相污染。其次,激光回波的到达时间决定了最终的距离测量结果,不能因为要兼顾颜色处理,就牺牲掉测距的精度。第三,不同光照条件和不同表面反射特性会让探测到的光发生变化,系统得想办法把颜色尽量稳定地还原出来。第四,高密度的三维点云再叠加颜色信息,对芯片的数据处理和传输能力也是不小的压力。

Ouster公布的数据显示,Rev8能在芯片上实时处理每秒最高1040万个点,测量频率最高达到40千赫兹,并且使用了嵌入式的富士胶片色彩技术。这些都是厂商公布的技术指标,不能直接等同于任何实际场景下的识别准确率。

这里有个挺鲜明的对比。普通相机主要回答的问题是"这个像素是什么颜色",激光雷达还得额外回答"这个空间点离我多远"。原生彩色激光雷达想做的,是让这两个答案从同一个传感器系统里同步产生出来。

难点从来不是让激光雷达"拍出一张彩色照片",而是让颜色信息与每一个三维测量点精确对应,同时不能损害测距本身的能力。

【配图建议:芯片内部工作流程图,分别画出激光发射与回波计时、环境光颜色采集、空间点与RGB信息对应这三个环节,最后汇总生成一份彩色三维点云】

这套技术确实减少了后期数据融合的难度,但这不代表摄像头马上就要被淘汰出局。

## 彩色激光雷达会取代摄像头吗?短期内更现实的答案是否定的

摄像头在高分辨率图像、文字识别、细小纹理和视觉语义理解方面,有它自己的优势。激光雷达提供的则是直接的三维测距信息。两者不是简单的谁比谁更先进的关系。

彩色激光雷达确实有可能减少独立摄像头和点云之间的标定工作,但剩下的问题还不少。恶劣天气、雨雾和遮挡都会影响传感器获取可靠信息的能力。目标物体的颜色本身也会受到照明条件和表面反射率的影响而发生偏移。三维点云的密度和普通相机图像完全不是一回事,不能想当然地认为它在所有视觉任务上都能达到同等效果。更重要的是,自动驾驶系统需要综合多种传感器、多套算法和多层安全机制共同决策,不可能仅凭一个传感器的输出就决定车辆的下一步动作。

市场上的竞争态势也说明这项技术还处在早期阶段。中国激光雷达厂商禾赛科技在今年4月已经公布了名为EXT的彩色激光雷达产品,计划随后量产,面向2027年推出的车型供货。路透社的报道里同时提到,并不是所有汽车厂商都认同激光雷达是必需配置,一些厂商依然坚持以摄像头为主的感知路线,典型的例子就是特斯拉。

所以更稳妥的说法,不是彩色激光雷达将要取代摄像头,而是它正在努力成为一种更容易和机器视觉系统协同工作的三维感知设备。


真正值得关注的,可能不只是汽车多装了一种传感器,而是机器人正在获得一种更完整的现实世界数据形式。

当机器人看到的不再只是轮廓,下一步是让它真正理解现实世界

把视角从汽车扩展到更广泛的机器人领域,这件事会显得更有意思。

机器人要在仓库里搬运货物,在工厂里操作设备,或者在陌生环境中自主移动,光知道"前方有一个障碍物"是远远不够的。

它还得弄清楚,这个物体究竟是什么,它处在什么具体位置,表面有哪些可以辨认的特征,和周围其他物体之间又是什么样的空间关系。

彩色三维数据能为这些任务提供更丰富的输入,也可能被用来训练具身智能模型和世界模型,让模型学会现实物体的空间结构、外观特征和周边环境之间的关系。Ouster已经把Rev8定位成一个面向机器人、自动驾驶和物理AI的数据采集与感知平台,而不只是一款汽车零部件。

但这里仍然要把两件事分开看。看见更多,不等于理解得更深。传感器提供的始终只是原始数据,机器能不能真正识别出物体、推断环境的变化、预测其他车辆或行人接下来会怎么做,依然要靠算法、训练数据和一套足够可靠的决策系统来完成。

过去,机器获得三维空间信息和颜色信息,往往要依靠不同传感器各自采集,再由软件把两份数据拼接起来。原生彩色激光雷达尝试把这一步从软件层面前移到传感器内部,让颜色和深度从一开始就建立起对应关系。

它没有让机器一夜之间拥有人类的视觉能力,也没有证明摄像头即将被淘汰。但它确实在改变机器获取现实世界信息的方式。

对自动驾驶和机器人来说,下一步要做的已经不只是看得更远、测得更准,而是让每一份空间数据,从诞生的那一刻起,就能为理解这个现实世界提供更多有效线索。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
北大才女蒙曼50岁至今未婚,朱迅问她:“你最想嫁给谁?”谁承想,她脱口而出说的一个名字,却让全场观众哄堂大笑!

北大才女蒙曼50岁至今未婚,朱迅问她:“你最想嫁给谁?”谁承想,她脱口而出说的一个名字,却让全场观众哄堂大笑!

背包旅行
2026-10-17 15:51:52
“出卖”父亲后果凄凉?傅作义之女傅冬菊为何至今仍被黑得如此惨?

“出卖”父亲后果凄凉?傅作义之女傅冬菊为何至今仍被黑得如此惨?

舆图看世界
2026-09-06 11:40:12
尊界事件反转!多家媒体发声:速成车的帽子,中国车企不戴!

尊界事件反转!多家媒体发声:速成车的帽子,中国车企不戴!

一个有灵魂的作者
2026-10-19 09:51:09
陈滢与张智霖破格演出!秀蜜桃却引发AI质疑,网民意见两极:十分尴尬

陈滢与张智霖破格演出!秀蜜桃却引发AI质疑,网民意见两极:十分尴尬

TVB资讯台
2026-10-17 00:18:24
国家统计局副局长毛盛勇:前三季度最终消费支出对经济增长的贡献率接近五成

国家统计局副局长毛盛勇:前三季度最终消费支出对经济增长的贡献率接近五成

每日经济新闻
2026-10-19 12:20:42
马斯克、黄仁勋齐发警告!中国机器人让美国科技界从乐观转向焦虑

马斯克、黄仁勋齐发警告!中国机器人让美国科技界从乐观转向焦虑

碧海孤航
2026-10-17 20:33:19
深圳倡导企业在11月16日至20日统筹安排职工带薪年休假

深圳倡导企业在11月16日至20日统筹安排职工带薪年休假

21世纪经济报道
2026-10-19 13:23:59
孙艺珍分享度假照,和玄彬同坐游乐设施,素颜出镜穿搭有点太雷霆

孙艺珍分享度假照,和玄彬同坐游乐设施,素颜出镜穿搭有点太雷霆

东方不败然多多
2026-10-18 18:54:29
为什么千万不要边做饭边用湿毛巾清洁灶台?有啥科学解释?

为什么千万不要边做饭边用湿毛巾清洁灶台?有啥科学解释?

向航说
2026-10-16 11:44:22
王曼昱打佐藤瞳那场,看台上有个大老爷们咬着后槽牙的那种吼法

王曼昱打佐藤瞳那场,看台上有个大老爷们咬着后槽牙的那种吼法

江启
2026-10-18 18:00:05
从《中国达人秀》到邪教教主:一名69岁女信徒,死在他的“方舟”里

从《中国达人秀》到邪教教主:一名69岁女信徒,死在他的“方舟”里

半耳聆
2026-10-19 09:30:42
轰20咋迟迟不亮相?美专家想明白了:不是技术问题,中国无法弥补

轰20咋迟迟不亮相?美专家想明白了:不是技术问题,中国无法弥补

柏拉图的诉说1
2026-10-18 21:18:29
中国太聪明了:曾趁着俄罗斯武器滞销,一口气就订购20架大飞机

中国太聪明了:曾趁着俄罗斯武器滞销,一口气就订购20架大飞机

老头的传奇色彩
2026-10-18 23:50:18
30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

三农雷哥
2026-09-05 12:16:13
中科院院士发声:磷酸铁锂是上天的礼物,现有电动车足够好用。

中科院院士发声:磷酸铁锂是上天的礼物,现有电动车足够好用。

音乐时光的娱乐
2026-10-19 06:26:57
安洗莹夺得丹麦公开赛冠军,47冠登顶羽毛球女单历史第一人

安洗莹夺得丹麦公开赛冠军,47冠登顶羽毛球女单历史第一人

懂球帝
2026-10-19 09:10:11
20岁小伙奔驰试驾70次不买,女销售:你下单,我任你处置,他买后傻眼

20岁小伙奔驰试驾70次不买,女销售:你下单,我任你处置,他买后傻眼

如烟若梦
2025-08-25 18:45:03
海港把接力棒交给大连!斯坦丘发战斗檄文!球迷:最支持大连夺冠的一集

海港把接力棒交给大连!斯坦丘发战斗檄文!球迷:最支持大连夺冠的一集

刀锋体育
2026-10-19 08:33:52
深圳倡导16日至20日统筹休年假

深圳倡导16日至20日统筹休年假

第一财经资讯
2026-10-19 11:37:39
谁将夺冠?新赛季10大最贵先发:76人第7、勇士第6!

谁将夺冠?新赛季10大最贵先发:76人第7、勇士第6!

运筹帷幄的篮球
2026-10-19 13:56:40
2026-10-19 16:51:00
来自星星的小胖子 incentive-icons
来自星星的小胖子
一个来自星星的小胖子
1018文章数 707关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

男子称入狱20多天被贷款、转走超38万 报警1年多无进展

头条要闻

男子称入狱20多天被贷款、转走超38万 报警1年多无进展

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

旅游
时尚
教育
游戏
手机

旅游要闻

西宁下南关:千年古道上的烟火街巷

重阳寻香:一炉香,一枚囊,她们以手传香

教育要闻

新华视点|校园焕彩 文脉新生

小岛秀夫将在《边缘行者2》登场 饰演“大岛秀吉”

手机要闻

iQOO Neo12「争锋」图赏:赤金弧光流转,更强立体视觉

无障碍浏览 进入关怀版