端侧 AI 能力实战手记
智绘鸿蒙 · 如 7 而至
鸿蒙端侧 AI 能力的实测记录:能做什么、边界在哪、坑怎么绕。
27 篇·5.4 万字
- 一张 320 像素的老照片,端侧 201ms 变 1280 前阵子我妈翻出一张 1985 年的全家福,翻拍成电子档之后只有 320×397,人脸糊成一团,让我"想办法弄清楚点"。
- 平行视界在哪些设备上真的会分栏:三台鸿蒙 7 真机实测 平行视界这个能力,官方文档写得挺清楚,但我按文档配完之后,在自己手上三台鸿蒙 7 设备上,只有一台分了栏。
- 端侧文搜图:先搞清它按什么匹配,再决定搜索框怎么写 假设你在做一个旅行相册应用。用户拍了几千张照片,文件名全是 IMG_20260924_183207.jpg,按时间排序帮不上忙,标签系统又没人愿意手动打。
- 买家发来的糊图,怎么直接上详情页 做电商工具的都懂这个流程:买家在聊天里甩过来一张商品图,说"用这个做主图"。你点开一看——250 像素宽,压缩过,糊得连拉链都看不清。
- 手把手:拍一张发票,让报销单自己填好 出差回来要贴发票。一百多张,每张都要把金额、日期、发票代码抄进报销表,抄错一个小数点就得重来。
- 实验报告:predictIndex 的算法本质被这 6 组数据暴露了 FAST Kit 在 API 26 新增了智能序列预测(mathPrediction.predictIndex),官方描述只有一句话:
- 排障手记:人脸检测返回的这四个值,都不能按字面理解 需求很朴素:做个证件照 App,用户拍完立刻告诉他"这张能不能过"。
- 白底主图:八步做完,两个开关必须显式打开 电商平台上架要求白底主图。人工抠图一张 3–5 分钟,一天两百张不现实。
- 文搜图工程化:scope 隔离能信,但 clearData 没有 scope 参数 上一篇(《端侧文搜图:先搞清它按什么匹配,再决定搜索框怎么写》)聊的是检索质量。这一篇聊另一件事:把它做成一个能长期运行的功能时,会撞上的结构问题。
- 我们想用多目标识别做冰箱清点,结果被 15 个标签教育了 需求听起来特别自然:打开冰箱拍一张,App 告诉你"香蕉剩两根、鸡蛋还有六个、牛奶喝完了"。
- 工地翻拍的图纸看不清,端侧超分 + OCR 把它变成能查的台账 做过工程管理的都见过这个场景:现场拍一张墙上的图纸,回来想核对某个尺寸,结果照片糊得连房间分隔都看不分明。
- 让 AI Agent 自己把鸿蒙工程跑到真机上 先说结论:在鸿蒙 7 这一代,"改代码 → 编译 → 装机 → 点开 → 看效果"这条链,已经可以完整交给一个不会看屏幕的 Agent 去跑。人手只需要出现…
- 手机架着就能数深蹲 产品需求原本只有一句话:"用户把手机靠在墙上,自己做深蹲,应用负责数次数。"
- 左自选右行情的单应用多任务 平行视界的官方定义只有一句话:未适配分栏的应用,靠一份配置在宽屏上分成两栏。
- 一天两百个单号怎么进表 仓库那边找到我:一天两百多个快递面单,两个人拿键盘敲进 Excel,敲到下午四点眼睛是花的。老板的原话是"你不是搞技术的吗,这个东西不是很简单"。
- 一张脸换一个工位 行政提的需求很朴素:门口放台平板,员工路过刷一下就算签到,不想再排队按指纹。
- 把滑动掉帧交给系统调度 上周产品在同一条消息里 @ 了我两次:「首页下滑有点糊,鸿蒙 7 不是有个性能提示的接口吗,加上试试。」
- 家里老人说,把宝宝照片给我看看 需求是我家老人提出来的,不是产品经理。她把平板递过来说"帮我找找宝宝在海边的照片",我打开相册的搜索框,输入"宝宝 海边",结果是空的。
- 长截图放大后字还是糊的怎么办 群里转发的长截图,第一眼看是清楚的,双指放大以后字是糊的。
- 红底蓝底一秒切换 证件照换底色是个很具体的需求:报名系统要红底,签证要白底,工卡要蓝底,而手机里只有同一张正面照。
- 端侧重建一座园子 立项时想做的事很清楚:带一团人逛苏州园林,走完把手机递过去——"刚才那座亭子,你手机上能看到三维的"。全部在端侧完成,不上传云端。
- 散会前拍一张就完了 会议纪要这件事,最贵的不是写,是抄。白板上一整面,散会时有人拍一张发群里,然后第二天三个人对着这张图敲字,敲出来的还不一样。
- 拍的照片碰一下就落到那位嘉宾名下 会务组提的需求:圆桌会议上大家各自拍照片、记笔记,散会时把自己那份"碰一下"递给对面的嘉宾,不用加微信、不用传群、不用点名选接收人。
- 一张大合影里有几张脸 需求表述为"统计合影人数",但这句话里有两个未定义项:"一张脸"的判定条件是什么,以及"人数"是否等于检测框数量。工程上必须先固定这两项,否则任何准确率数字…
- 左屏共享PPT右屏写批注 线上会议最常见的一个动作:主讲人共享一页 PPT,参会者在另一侧写批注。平板横过来用平行视界分栏,正好一边一个。
- 出门前拍一张确认没落东西 我这人出差必落东西。充电器、耳机盒、牙刷,每次到酒店才发现躺在我家抽屉里。
- 后排拍的PPT,超分没救回来 这个功能立项时叫"板书救星":学生在后排拍 PPT,回家看不清,App 用端侧超分把字放大变清晰。需求来自一次用户访谈,三个人里有两个说"看不清老师放的公式…