网易首页 > 网易号 > 正文 申请入驻

断网也能查PDF,答案还带页码:小办公室的AI不上云

0
分享至

“What are the termination terms in the Sharma contract?”——把这句话敲进去,屏幕上给出的不只是答案,还有这句话出自哪个文件、第几页。整个过程,Wi-Fi是关着的。


这是PrivateDesk做的事。它面向的是小型专业办公室:会计师事务所、诊所、小型律所。这些地方堆着成摞的PDF——合同、发票、登记表、政策文件,却常常没法把它们上传到云端AI工具,因为涉及客户保密。结果只有两条路:干脆不用AI,或者把敏感文件贴进一个自己控制不了的服务里。

PrivateDesk想解决的就是这个卡点。把PDF丢进去,用大白话提问,拿回来的答案带着确切的文件名和页码。语言模型、向量嵌入、数据库,全部跑在办公室自己的电脑上。

拆开看这套东西怎么转

运行时用到的组件都是开源且本地的。模型是一个小的开放权重Gemma模型,通过Ollama运行,默认gemma3:4b,可配置;它只依据从用户文档中检索出的片段来回答问题。

嵌入用nomic-embed-text,同样由本地Ollama提供,负责把文档分块和问题转成向量。PDF用pdfjs-dist逐页解析,再在每一页内部切成有重叠的块,这样每个块都保留着精确的页码。

块和向量存进MongoDB。对一个小办公室的文档量来说,在已存向量上做余弦相似度足够快,架构就保持简单。匹配度最高的几个块进入一个严格的提示词:只依据片段回答,每个结论都要标注[文件, 第N页],找不到就回一句“I couldn't find that in the uploaded documents”。生成的token边出边推到界面上。

应用层是Node/Express后端加React(Vite)前端,左侧上传栏、中间对话面板,来源以可点击的chip呈现,点开就是被检索到的那段原文。

引用不是装饰

作者把这一点列为最重要的设计选择:法律或临床文档给出一个错误答案,比不给答案更糟。所以应用始终展示答案从哪来,并且拒绝猜测。

现阶段的限制也说得直白:只支持文本型PDF,扫描件还没有OCR;小的本地模型在长条款或复杂条款上可能漏掉细微差别——这也是为什么来源片段永远只隔一次点击。

为什么开放创新在这里是前提

隐私就是产品本身。整套卖点就是文件不离开这台机器。换成闭源API,这句话立刻变成假话,目标客户在法律和伦理上都没法用这个工具。

成本决定生意能不能成立。托管API按token计费,而且是永远计费,文档密集的办公室每个月都要堆出一笔账单。本地模型没有按次查询成本,所以可以卖一次性部署加支持。

没有锁定。模型是一个设置项(CHAT_MODEL),不是对某家厂商定价或政策变化的依赖。出现更好的开放模型,办公室直接升级,不用重建任何东西。

离线可用。演示里关掉Wi-Fi它照样回答,这是闭源API做不到的。

商业模式很朴素:一次性部署加支持。装到他们的机器上,导入文档,负责更新。没有按席位订阅,没有按token账单,也没有厂商攥着他们的数据。愿意掏钱的画像也清楚——三五人的会计或律所,想要AI帮忙,但承担不起客户数据离开大楼的风险。

演示里的所有文档都是假的,名字和数据均为虚构。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1-9月社零数据出炉:汽车暴跌14.9%%,烟酒狂飙12.6%!钱到底去哪了?

1-9月社零数据出炉:汽车暴跌14.9%%,烟酒狂飙12.6%!钱到底去哪了?

即时刘说
2026-10-20 07:27:17
德比战5球惨败!曝英超首位下课主帅浮现 上任仅3个月

德比战5球惨败!曝英超首位下课主帅浮现 上任仅3个月

球事百科吖
2026-10-20 05:33:27
UFC冠军张伟丽发布妆后视频,一改硬核形象,变身甜妹

UFC冠军张伟丽发布妆后视频,一改硬核形象,变身甜妹

扬子晚报
2026-10-19 16:03:40
负债千亿!有省会城市地铁,开始暴雷了?

负债千亿!有省会城市地铁,开始暴雷了?

西部城市
2026-10-19 13:02:51
“旭日旗”事件通报第二天,他不但支持台独,还疑似公费留学?

“旭日旗”事件通报第二天,他不但支持台独,还疑似公费留学?

再战五百回合
2026-10-20 09:38:40
烂番茄38%却冲上全球第二,安雅新片打了谁的脸

烂番茄38%却冲上全球第二,安雅新片打了谁的脸

浅遇时光
2026-10-19 10:50:33
优衣库“抗日装”爆火,全网绷不住了哈哈哈

优衣库“抗日装”爆火,全网绷不住了哈哈哈

广告案例精选
2026-10-19 14:31:22
马斯克卷的不是参数,是人类从未实现过的可能性

马斯克卷的不是参数,是人类从未实现过的可能性

砺石商业评论
2026-10-19 10:25:07
陌生亲密性行为五年降幅76%!北大复旦联合调查结果显示,年轻人快餐关系遇冷,引发热议

陌生亲密性行为五年降幅76%!北大复旦联合调查结果显示,年轻人快餐关系遇冷,引发热议

火山詩话
2026-10-19 13:18:35
十个里能认识一半算你牛!40年前的老物件,最后一个就难住我了!

十个里能认识一半算你牛!40年前的老物件,最后一个就难住我了!

一口娱乐
2026-10-19 14:55:32
弱冷空气将自北向南影响广东全省!广州下周或再迎新冷空气

弱冷空气将自北向南影响广东全省!广州下周或再迎新冷空气

南方都市报
2026-10-20 11:41:46
宏大叙事救不了普通人的工资单

宏大叙事救不了普通人的工资单

文青大叔说
2026-10-18 11:28:22
中央亮剑!多地开启机关事业单位大整顿,这几类人受影响最大

中央亮剑!多地开启机关事业单位大整顿,这几类人受影响最大

职场资深秘书
2026-10-19 15:13:49
王俊杰NCAA疯狂砍下31分,赛后坦言:国家队教练打战术,大学教练让我做正确的事!

王俊杰NCAA疯狂砍下31分,赛后坦言:国家队教练打战术,大学教练让我做正确的事!

爱体育
2026-10-19 23:56:24
罕见立案!刘国梁事件持续升级!国际乒联正式调查!25岁孙颖莎紧急发文“切割”!国乒大整顿来了,一个都逃不掉

罕见立案!刘国梁事件持续升级!国际乒联正式调查!25岁孙颖莎紧急发文“切割”!国乒大整顿来了,一个都逃不掉

篮球热嗖
2026-10-20 10:53:26
马斯克给每个美国儿童送股票,我们的有钱人,忙着送自己的孩子出国

马斯克给每个美国儿童送股票,我们的有钱人,忙着送自己的孩子出国

走读新生
2026-10-20 06:25:11
中国大陆首次发现,广西深山现"日本独有兰",来源至今难解

中国大陆首次发现,广西深山现"日本独有兰",来源至今难解

万象硬核本尊
2026-10-19 15:05:04
为啥迟迟不解决台海?外媒:北京可能在等,等3大问题解决再动手

为啥迟迟不解决台海?外媒:北京可能在等,等3大问题解决再动手

凉湫瑾言
2026-10-19 19:32:41
OpenAI高管:蒸馏是中国AI模型紧跟美国的原因,大约占50%

OpenAI高管:蒸馏是中国AI模型紧跟美国的原因,大约占50%

西虹市闲话
2026-10-19 12:46:14
甘孜州纪委监委通报:一干部被查

甘孜州纪委监委通报:一干部被查

甘孜传媒
2026-10-20 12:06:28
2026-10-20 12:28:49
爬虫饲养员
爬虫饲养员
业余养了只叫“龙虾”的AI爬虫,主业是给互联网打工。
205文章数 86关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

媒体:菲律宾对中国的有些举动已经属于蹬鼻子上脸

头条要闻

媒体:菲律宾对中国的有些举动已经属于蹬鼻子上脸

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

港媒曝刘恺威与32岁黎纪君恋情,秘密恋爱两个月

财经要闻

这些科技股王,为什么总输给茅台?

汽车要闻

方盒子家族再添新成员 捷途自由者7实车体验

态度原创

亲子
数码
本地
公开课
军事航空

亲子要闻

天然奶源如何进入配方科学,周鹏教授解析婴幼儿胃肠消化健康

数码要闻

双十一学生党装备全升级 七彩虹国补+叠券游戏本8999元一步到位!

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

泽连斯基:若乌“被要求”举行战时选举 他将竞选连任

无障碍浏览 进入关怀版