日常语言提示
用一句话描述要关注的内容。随时更换问题,无需重新训练模型。
01挑战
工厂、仓库和门店早已装有摄像头,但录像往往在出事后才被调看。传统计算机视觉每个问题都需要一个定制模型。视觉语言模型能理解用日常语言描述的场景,一套系统即可实时回答众多运营问题。

02功能
用一句话描述要关注的内容。随时更换问题,无需重新训练模型。
通过 WebRTC 接入浏览器摄像头,通过 RTSP 接入 IP 摄像头,持续向模型输送画面。
开放视觉语言模型在本地运行,视频和结果都留在现场。
观察结果在数秒内回传,并同步显示延迟和 GPU 利用率。
发现的情况可记录下来、按班次汇总,并推送至看板或告警。
观察结果是供主管复核的参考指标,而非针对个人的自动化决策。
03工作原理
采用 NVIDIA Live VLM WebUI(一款面向视觉语言模型的开源实时界面),开放模型在设备上运行。Logic Sonata 在此基础上提供摄像头集成、提示设计、事件记录、看板和治理。

添加网络摄像头或现有 IP 摄像头。大多数场所无需新增摄像头硬件。
编写提示,例如“4 号工位的操作员是在工作、等待还是离岗?”
设备持续采样画面,由视觉语言模型解读每个场景。
主管可查看实时观察结果和班次汇总,并在约定事件发生时收到告警。
随着团队摸清哪些信息有用,调整提示、增加摄像头和新问题。
04工时与动作分析,用日常语言完成
无需为每个问题训练一个模型,主管只需描述自己关心的内容。模型持续作答,结果汇总成班次报告。
4 号工位的操作员是在缝纫、等待来料,还是离开了工位?
3 号和 4 号工位之间是否有裁片堆积?请描述排队情况。
标示的叉车通道内是否有人未穿高可见度反光背心?
22:00 之后,报告装卸区门口附近出现的任何人员或车辆。
05应用场景
识别闲置工位、待料和多余动作,以平衡产线、消除瓶颈。
多一双眼睛,发现污渍、跳线或色差等可见瑕疵。
标记未戴安全帽或未穿反光背心、通道堵塞,以及人员过于靠近运转设备等情况。
下班后的活动、在限制区域门口徘徊、无人看管的物品,都用日常语言描述出来。
按班次掌握装卸位占用、装货进度和不安全的托盘堆放。
排队长度、空货架和试衣间等候情况,让员工去到最需要的地方。
06安全与治理
每套 Logic Sonata 系统都运行在您掌控的硬件上,访问、审计和数据边界从一开始就纳入设计。
07常见问题
通常不需要。网络摄像头和大多数提供 RTSP 视频流的 IP 摄像头都可以接入。我们会在评估阶段检查您的摄像头。
该系统旨在改善流程、安全和安保。我们建议提示聚焦于工位和事件而非个人,事先告知员工,并遵守当地数据保护法律。发现的情况仅供人工复核。
视觉语言模型擅长描述场景,但也可能出错,因此观察结果被视为参考指标。我们会在试点期间优化提示和摄像头位置,并对照真实录像衡量准确度。
08Logic Sonata 更多产品
一款受治理的智能助手,依据您的 SOP、规格、政策和报告回答问题。每个答案都注明出处,每位用户只能看到其角色允许的内容。
代码补全、理解代码仓库的对话、代码审查和智能体编程,直接在开发人员惯用的工具中使用,由您自有硬件上的开放编程模型驱动。
基于 Hermes Agent 或 OpenClaw 构建的自托管 AI 智能体,可在您的各类工具中调研、撰写和执行任务,运行于沙箱内的私有模型之上,任何关键操作都需经过审批。
基于 ComfyUI 构建、即装即用的图像生成工作室,预装精选模型和模板,设计师创作印花、概念图和营销视觉时,作品无需离开公司。