商场 AI 导览 App 界面示意(方案设计稿)
本页依据 2026 年 9 月《商场 AI 导览 App · 纯摄像头视觉方案 v5》整理,属于方案案例,记录设计思路与落地路径。文中的周期、成本对比、精度分级均为方案口径,不是交付后的实测数据。
项目概况
| 应用场景 | 购物中心室内导览、店铺讲解与优惠触达 |
|---|---|
| 方案形态 | 手机 App + 云端商场知识库(纯摄像头视觉) |
| 核心技术 | 店招识别、店铺库比对、多模态语义理解、地标序列导航 |
| 部署方式 | 零硬件、零施工、零布线;商场侧只提供店名与门头照 |
| 当前阶段 | 方案验证(v5),待首个商场试点 |
| 方案日期 | 2026 年 9 月 |
| 实施方 | 深圳市奇点大数据科技有限公司 |
一、商场导览为什么一直做不起来
把顾客的抱怨和商场的难处放在一起看,会发现问题是一体两面:
| 顾客的真实体验 | 商场的技术困境 |
|---|---|
| 楼层导览图要看得懂,还得先找到「你在哪」 | iBeacon:数百个硬件加进场施工布线,贵且慢 |
| 问路只能找服务台或店员,高峰期没人理 | 蓝牙 / WiFi 指纹:精度差(约 ±10m),还要逐层采集 |
| 优惠散落各店,逛完才发现错过一大半 | 室内定位 SDK:依赖物业持续维护与供电,容易烂尾 |
| 品牌导购 App 要单独下载,用完即弃 | 整套做完,用户依然不爱打开,ROI 说不出口 |
最后落到一句:体验差 + 落地贵,商场导览就停在了「楼层图 App」。要突破,得同时把这两头解开,而不是再做一个更漂亮的楼层图。
二、换个起点:看见即所在
方案的核心假设只有一句:你看到的东西,就是你的位置。摄像头同时是眼睛和定位器,不需要基站、信标,也不需要进场施工。
| 01 摄像头 = 定位器 | 拍一下店招,与店铺库里的门头照比对,锁定「我在哪家店门口」。看见什么,就知道在哪。 |
|---|---|
| 02 AI = 讲解员 | 看懂画面语义,讲这家店做什么、答问路、播当季优惠。一个会说话的本地导游,随叫随到。 |
| 03 商场 = 知识库 | 每家店 = 名称 + 门头照 + 活动。App 端最轻,知识全部在云端统一维护、实时更新。 |
传统方案的部署按「周 + 施工队」算;这套方案从「拍一张门头照」开始,方案口径是半天录入一层。
三、用户怎么用:四个场景
| 场景 | 怎么用 |
|---|---|
| 识店导游 | 镜头对准任意店铺,语音开讲:这家店做什么、现在有什么活动、值不值得进 |
| 问路导航 | 说一句「海底捞怎么走」,用沿途地标指路,全程不用低头看地图 |
| 边走边讲 | 低耗识别沿途店招,AI 像真导游一样边走边播报店铺与当季优惠 |
| 拍海报问优惠 | 对着橱窗海报问「这个满减怎么用」,直接回答,完全不依赖定位 |
第四个场景值得单独说:拍海报问优惠不需要知道你在哪。它只依赖多模态模型读图,所以即使定位失败,这个入口依然可用。这是「识别不了也有用」的设计。
四、两条视觉链路:看懂世界 + 知道在哪
同一次取景,系统并行回答两个问题——这是什么,以及我在哪。
| 链路 A · 看懂世界 | 多模态大模型直读画面,理解语义:这是什么店、海报写了什么、人多不多、有没有排队 |
|---|---|
| 链路 B · 知道在哪 | 端侧店招识别,与店铺库门头照比对,锁定「在谁家门口」;连续帧比对跟踪移动方向 |
一次识别的完整流水是四步:识别到店 → 查店铺库 → LLM 组导览词 → 语音播报。
成本上有两个设计:云端多模态只做语义兜底,端侧 OCR 负责便宜的前置过滤;同一店招在短期内不重复调用(关键帧缓存)。这两条决定了它能不能被大量用户日常使用,而不是只在演示时跑得漂亮。
五、视觉定位的四个等级
起步只需要每家店 1~2 张门头照。精度逐级升级、成本逐级增加,但始终不碰硬件。
| 等级 | 能力 | 精度 | 依赖 | 用途 |
|---|---|---|---|---|
| V1 拍店定位 | 拍一下店招,锁定具体店铺 | 店级 | 店铺库 + 门头照 | 拍照问答(MVP) |
| V2 地标序列导航 | 边走边识别店招序列,匹配走到路线哪一段 | 路线段级 | V1 + 地标拓扑图 | 语音问路导航 |
| V3 VPS 视觉定位 | 走道建视觉地图,连续定位 | 米级连续 | 一次性采集(半天/层) | AR 箭头叠加 |
| V4 连续 SLAM | 端侧 SLAM 加店招校正,平滑连续 | 平滑连续 | V3 的地图 | 自动到店讲解 |
方案判断是 V1 + V2 已覆盖约 90% 的需求(拍照问答、语音导航)。AR 箭头才需要 V3,而到那一步也只是一次性采集,不是部署硬件。
六、四层架构,端云协同
| 01 App 客户端 | 摄像头智能抽帧(省电)、端侧 OCR 预筛、语音问路与 TTS、识别结果浮层 |
|---|---|
| 02 视觉服务层 | 店招识别(多模态语义兜底)、V1 / V2 视觉定位、关键帧缓存 |
| 03 商场知识层 | 店铺库(名称 / 门头照 / 优惠)、地标拓扑图、店到店路径引擎 |
| 04 AI 大脑层 | 导览词生成(游客 / 购物 / 遛娃多模式)、会员优惠对接、商场运营后台 |
第四层与团队现有的 Agent 技术栈同构:识别链路、话术编排、运营后台可以直接复用,不需要从零造一套。
七、从「坐标 + 箭头」到「地标 + 语音」
| 传统导航 | 要厘米级定位硬件,箭头才画得准;走两步对一次图,误差还会漂移;坐标图加施工维护,场越大越贵。卡在贵、难、每栋楼都要定制。 |
|---|---|
| 纯视觉导航 | 沿途店铺就是天然路标,边走边指;每过一家店就校准一次,不会累积漂移;从坐标图变成认路图,纯软件运行,V1 就能起步。 |
它最终播报出来的不是「向东 30 米」,而是人话:
「直行约 40 米,右手边是优衣库;过了 HM 左转,乘扶梯上二楼——海底捞在扶梯右手边,今天午市 7.8 折。」
这句话里的每个地标,都是用户抬头能看见的东西。这是它相比箭头导航真正的优势:不需要用户相信一个抽象的坐标,只需要他看见下一家店。
八、落地路线:三步,每步先验证
| 阶段 1 | 拍照识店 MVP(4–6 周):店铺库 + 门头照 + 多模态识别;拍店即讲;商场后台可录店传照、维护优惠。验证识别率、用户留存、商场付费意愿。 |
|---|---|
| 阶段 2 | 地标式导航(+2–3 个月):建店到店的地标拓扑;语音问路;反向找车(拍车位编号寻回)。验证导航成功率、周活跃。 |
| 阶段 3 | 真视觉 AR(+3–6 个月):每层半天视觉采集建图(V3);AR 箭头、到店自动讲解;优惠核销与会员打通。验证 AR 使用率、商户续费率。 |
顺序不能倒。每个阶段都先验证再投入:先证明「有人用、商场愿意付」,再往体验升级。反过来做,很容易做出一个技术很完整、但没人打开的产品。
九、对商场意味着什么
| 零硬件、零施工 | 不进场、不施工、不供电维护,物业零负担,合同阻力最小 |
|---|---|
| 半天录入一层 | 商场只需提供店名与门头照,运营人员自己就能随时增删改 |
| 三个转化抓手 | 引流到店、优惠曝光、会员沉淀,在同一个 App 里闭环 |
| 商户零学习成本 | 扫码物料即用;后台自己传照片、改活动,不需要 IT 支持 |
| 对比项 | 传统室内定位 | 本方案 |
|---|---|---|
| 硬件采购 | 数万至数十万 / 商场 | ¥0 |
| 进场施工 | 布线调试数周 | 0 天 |
| 内容录入 | 指纹采集按周计 | 半天 / 层 |
| 用户入口 | 多个品牌 App | 1 个 App 覆盖全商场 |
十、四个风险,和对应的兜底
| R1 店招会变 | 装修、换装、促销横幅遮挡 → 每家店存多张历史门头照;商户后台一键更新,秒级生效 |
|---|---|
| R2 反光与遮挡 | 玻璃反光、人流遮挡、光线差 → 多帧投票加智能等待重拍;识别不了就用语音引导「往前走两步再拍」 |
| R3 隐私敏感 | 摄像头常开 → 只处理店招区域、本地裁剪、不上传路人影像,正面回应合规 |
| R4 同品牌多店 | 两家 HM 在不同层 → 地标序列加楼层上下文消歧:前面经过哪家店、在几楼,天然不会认错 |
一条设计铁律贯穿全部:识别不了不等于死路。每个场景都有语音兜底——报店名、搜索、转人工。
十一、这个方案的边界
写方案容易只写好处,这里把做不到的部分说清楚:
- 识别率不是 100%。玻璃反光、人流遮挡、门头被横幅盖住,都会失败。系统能重试、能引导重拍,但不能保证每次都成。
- 它不是厘米级定位。V1 只知道「你在哪家店门口」,V2 只知道「你走到哪一段」。需要箭头贴地的 AR 体验,得先做 V3 的视觉建图。
- 内容不维护就会过期。店铺换了、活动结束了而库里没更新,AI 会一本正经地讲错。这件事只能靠商场运营,不能靠模型。
- 不承诺客流与转化。它能做的是缩短「看见 → 听懂 → 进店」这条路径,不负责把人变多。
- 隐私需要正面处理。摄像头常开是这类方案的命门,必须在试点前和商场法务确认告知方式、数据留存与删除策略。
十二、适合什么样的商场
- 层数多、店铺密、动线复杂,顾客容易在 B1 和 L2 之间迷路;
- 有会员和优惠体系,但散落在公众号、海报、商户各自的小程序里;
- 不愿意为了室内定位停业施工,或物业明确不接受大规模布线;
- 有一个运营岗位能持续维护店铺库和活动信息。
反过来说,如果商场只有一两层、店铺几十家、顾客本来就不会迷路,那这套方案的收益有限——直接做好楼层图和商户目录,成本更低。