网易首页 > 网易号 > 正文 申请入驻

东南大学牛亚峰教授:眼控交互范式设计

0
分享至


牛亚峰,东南大学机械工程学院教授、博士生导师,研究生院副处长(挂职),江苏省紫金文化英才,东南大学“至善青年学者”(A类),中国人类工效学学会理事、设计工效学分会秘书长。担任Scientific Reports 期刊编委、International Journal of Industrial Ergonomics 客座编辑。研究领域为先进人机交互(眼控、脑控、VR、声致触觉)、设计工效学、人因工程、工业设计。主持装备预研项目、173项目、装备预研教育部联合基金、国自然3项、国家重点研发计划子课题、航空科学基金2项、上海航天科技基金以及其他企业合作项目等30余项科研项目,主编/参编国家(军用)标准3部,一作/通讯发表SCI/SSCI论文26篇(包括Nature Communications、npj Flexible Electronics、Computers in Industry、ADVEI、AAP 等TOP期刊),出版专著2本,一作申请/授权发明专利21项(转化2项),指导学生获美国Spark铂金奖等国际设计比赛大奖8项。

目者,心之符也。

——《韩诗外传》

在人类数千年的演化历程中,视觉始终是人类感知世界、理解环境、传递信息的重要通道。眼睛不仅是获取信息的窗口,更是认知和情感表达的重要载体。随着人机交互领域的不断拓展,人类与机器之间的交互方式从传统的机械按键、鼠标、触控操作发展到自然语言和手势交互。与此同时,眼控交互技术作为一种基于视觉通道的直观、非接触式交互方式,正在以其独特的优势走进学术研究与工程应用的前沿。


手持移动设备眼控示意

眼控交互并不是一个完全新颖的概念。早在20 世纪80 年代,研究人员就开始尝试利用眼动轨迹来辅助残障人士进行输入操作。然而,受限于硬件性能和算法能力,早期眼动系统的应用多停留在实验室阶段,实际落地受到极大限制。近年来,随着近红外传感器、深度学习算法和计算机视觉等技术的飞速发展,眼动追踪设备的精度、稳定性和实时性不断提升,逐步具备了普及应用的条件。越来越多的研究和实践证明,眼控交互不仅能提高人机协作的效率,还能在多样化的场景下提供新的交互体验,拓展交互技术的边界。


眼控交互在文本标绘系统中的应用


六种基础眨眼交互动作示意图


眼-脚协同交互


透视驱动鱼眼视图的几何原理

眼控交互范式设计一书以“范式设计”为核心理念,系统梳理和提炼了眼控交互技术的关键理论、设计方法和实践路径。所谓范式,既是一种结构化的设计思路,也是一套可迁移的研究范本。本书立足于“工效学-认知科学-交互技术”三者的交叉视角,构建了包括界面设计、交互动作、视线点击增强和多模态融合等在内的整体框架,旨在为科研人员和开发者提供一份体系化的参考与指导。


Midas 问题示意图

眼控交互并非单一技术的简单应用,而是一种融合了人眼生理机制、认知行为特性、交互工效学和算法的复杂系统工程。针对“Midas 接触”这一交互领域长期存在的难题,研究人员提出了基于凝视时间阈值、多模态辅助、意图识别算法等多种规避策略,探索出一条兼顾自然性与准确性的设计路径。对于低空间精确度的问题,诸如气泡光标、吸附增强、区域光标等技术的持续优化,显著提高了眼控输入的可用性和用户体验。平滑追踪交互和眨眼交互的引入,则为高安全性、低干扰的输入方式开辟了新的空间。


虚拟现实鱼眼视图键盘设计原型

眼控交互正加速融入虚拟现实、增强现实、移动设备、智能座舱和各类辅助技术,特别是在车载环境、教育训练、医疗康复等对安全性和无接触交互有高要求的场景。眼控交互技术为解决现有交互方式的痛点提供了新的思路和突破口。伴随移动设备计算能力的提升和深度学习方法的成熟应用,基于普通摄像头的眼动估计等低成本方案也正逐渐涌现,使眼控交互从“小众研究”走向“普适应用”成为可能。







☜左右滑动查看更多

Slide for more photos

眼控交互范式设计购买

牛亚峰 著

北京 : 科学出版社, 2026.7

(智能人机交互前沿技术丛书)任选

ISBN 978-7-03-083699-1

本书内容分为八章,涵盖从眼动基本理论、眼控交互界面设计、凝视交互、眼势交互、平滑追踪交互、眨眼交互,到视触觉双通道交互、视线点击增强的系统性论述。每一章既注重理论方法的系统化,也辅以丰富的设计案例和实验数据,力求兼顾学术性、实用性与可操作性。在撰写过程中,作者参考了大量最新的学术研究成果,力图为读者提供一份兼具深度与广度的专业著作。为便于阅读,本书提供部分彩图的电子文件,读者可扫描封底彩色二维码查阅。

在全球人机交互范式不断变革的今天,眼控交互不仅是一种技术,更是一种重构人与机器(或计算机)关系的语言。它让机器(或计算机)能够理解人类最自然的注视与微妙的意图,让人机边界变得更加柔和、亲切。期望本书能成为推动这一领域发展的重要参考资料,也希望它能激发更多学者与工程师投入到眼控交互研究和应用的探索中,共同开拓人机自然交互的未来。

本书是科学出版社前沿项目“智能人机交互前沿技术丛书”中的一种,编写工作得到了国家自然科学基金项目的资助,谨此致谢。

“智能人机交互前沿技术丛书”由军事科学院国防科技创新研究院联合多家国内的顶级科研院所精心组织策划,聚焦于人机交互领域的最新研究成果与技术突破,旨在通过多维度、多层次的视角,全面展现智能人机交互的理论基础、关键技术、创新应用以及未来趋势,既有对人机交互模式、界面设计、系统架构等核心问题的深入探讨,也有对人工智能技术在人机交互中的应用创新,以期突出我国在该重点前沿领域取得的基础性、原创性和变革性成果。丛书已出版4种。

智能人机交互前沿技术丛书

本文摘编自《眼控交互范式设计》(牛亚峰著. 北京 : 科学出版社, 2026.7)一书“前言”,有删减修改,标题为编者所加。

(智能人机交互前沿技术丛书)任选

ISBN 978-7-03-083699-1

责任编辑:孙伯元 史小静

本书系统阐述了基于眼动行为的人机交互原理、关键技术和设计方法,围绕眼控交互界面设计、交互动作设计、多模态融合与增强机制等核心议题,结合双通道交互、视线点击增强、行为参数计算等内容,构建了完整的交互范式设计框架。内容涵盖基础理论、设计规范、实验范式和典型应用实例。在虚拟现实、车载交互、辅助技术等应用背景下,本书展现了眼控交互技术在优化用户体验、增强系统智能性等方面的重要作用。

本书面向人机交互、虚拟现实、人因工程等专业领域的科研人员、工程技术人员及研究生。


(点击图片选购)

新一代人工智能理论技术及应用

(本文编辑:刘四旦)

专业品质 学术价值

原创好读 科学品位

一起阅读科学

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
凯斯:自己一开始拿到了很大的领先,然后我就开始非常害怕

凯斯:自己一开始拿到了很大的领先,然后我就开始非常害怕

懂球帝
2026-09-06 10:43:40
家长自报干部身份请老师关照,一句"有需要联系"把公权力明码标价

家长自报干部身份请老师关照,一句"有需要联系"把公权力明码标价

网易新闻出品
2026-09-04 19:11:29
从135到98,肚子瘪下去才明白:内脏脂肪最怕的,从来不是跑步

从135到98,肚子瘪下去才明白:内脏脂肪最怕的,从来不是跑步

健身狂人
2026-09-06 02:07:39
27岁博主去世引关注,发病到死亡仅1天多!妻子痛悔"全家都被误导了""两个女儿还太年幼"……

27岁博主去世引关注,发病到死亡仅1天多!妻子痛悔"全家都被误导了""两个女儿还太年幼"……

鲁中晨报
2026-09-05 16:50:05
“官宣”只能官宣了?

“官宣”只能官宣了?

圆方你怎么看啊
2026-09-05 20:05:53
史诗逆转!郑钦文2-1决胜盘连赢7局逆转凯斯 第3次进美网16强

史诗逆转!郑钦文2-1决胜盘连赢7局逆转凯斯 第3次进美网16强

醉卧浮生
2026-09-06 01:37:23
难以置信!女大学生支教偏远地区,发现女学生频繁索要卫生巾,这些女学生生理期来了,家长不给钱买卫生巾,小卖部也没有卫生巾卖

难以置信!女大学生支教偏远地区,发现女学生频繁索要卫生巾,这些女学生生理期来了,家长不给钱买卫生巾,小卖部也没有卫生巾卖

火山詩话
2026-09-06 07:22:20
这一次,特斯拉可能真的要改变世界

这一次,特斯拉可能真的要改变世界

罗sir财话
2026-09-05 16:32:26
沟通无果后,中方撤展退场,不足24小时,韩方紧急向华提一诉求

沟通无果后,中方撤展退场,不足24小时,韩方紧急向华提一诉求

共工之锚
2026-09-06 00:32:03
突发!伊朗导弹袭击美航母

突发!伊朗导弹袭击美航母

极目新闻
2026-09-06 10:12:33
10万亿转移支付的真相!一旦沿海税源萎缩,体制内会面临什么?

10万亿转移支付的真相!一旦沿海税源萎缩,体制内会面临什么?

说故事的阿袭
2026-09-05 06:47:30
加拿大白人发文爆料:两周内在深圳第10次被女孩拦下合影,言语满是嘲讽

加拿大白人发文爆料:两周内在深圳第10次被女孩拦下合影,言语满是嘲讽

小徐讲八卦
2026-09-06 11:00:36
9月7日至12日 中国人民解放军陆军将派出兵力赴俄罗斯参加实兵演习

9月7日至12日 中国人民解放军陆军将派出兵力赴俄罗斯参加实兵演习

每日经济新闻
2026-09-04 18:03:32
王楚钦再创历史,将成第一个把世界第一拱手送给日本的国乒运动员

王楚钦再创历史,将成第一个把世界第一拱手送给日本的国乒运动员

人类的关注
2026-09-06 04:32:21
联通反诈大模型立功,揪出涉诈VOIP黑盒

联通反诈大模型立功,揪出涉诈VOIP黑盒

IT之家
2026-09-06 09:16:06
赖清德,有望成为新中国历史上,第一位任上出事的台湾地区领导人

赖清德,有望成为新中国历史上,第一位任上出事的台湾地区领导人

老脸科普君
2026-09-06 09:06:27
阿萨德父子恐怕怎么也想不到,两代人几十年都办不到的事,朱拉尼上台才二十个月就干成了

阿萨德父子恐怕怎么也想不到,两代人几十年都办不到的事,朱拉尼上台才二十个月就干成了

人生录
2026-09-04 00:30:06
游客称在苏州住店遭遇停车“刺客”,停车18小时6分钟收费380元;酒店:曾发送停车指引

游客称在苏州住店遭遇停车“刺客”,停车18小时6分钟收费380元;酒店:曾发送停车指引

大风新闻
2026-09-05 18:58:11
26岁女孩“上门服务”,4个男人一起招嫖都要睡她,2014年她被4个男子抛尸

26岁女孩“上门服务”,4个男人一起招嫖都要睡她,2014年她被4个男子抛尸

汉史趣闻
2026-09-06 09:33:05
中小学一定要买校服吗?教育部回应

中小学一定要买校服吗?教育部回应

新京报
2026-09-06 09:27:11
2026-09-06 14:20:49
科学出版社 incentive-icons
科学出版社
科学出版社官方号
6439文章数 27947关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

美媒炒作中国成"孤家寡人" 数天后美国成"唯一反对方"

头条要闻

美媒炒作中国成"孤家寡人" 数天后美国成"唯一反对方"

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

低调富养!郭富城两女儿入读香港名校

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

亲子
健康
家居
公开课
军事航空

亲子要闻

平时忙碌,亏欠了孩子很多陪伴。趁着闲暇,带两个小朋友出门撒欢,看着他们开心奔跑的样子,瞬间觉得一切都值得,简单的幸福莫过于此。

脑梗取栓成功≠活下来,还有这三关

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美伊互袭油轮 伊朗军方称或对美进行更大规模打击

无障碍浏览 进入关怀版