电商及零售行业
一 摄像头的使用
AI巡检
问题?
过去公司里有多少视频巡检员?
检测漏检率是多少?
通报的及时性如何?
有可能7x24小时作业吗?
1.1 百果园
通过摄像头ai巡检店内情况,
- 考核员工:检查包括货架空置,卫生,工装规范,口罩检测等
- 数据分析:客流实时检测,消防安全
PS: AI巡检中的工装识别
- 1 准备数据资料及数据标注(工装规范的,未戴口罩的,未戴手套,未戴帽子......)
- 2 模型训练,总结规律
- 3 部署应用
1.2 微店24 让门店24小时营业
通过摄像头ai巡检店内情况,
- 店长面对面:门店加装显示屏,真人面对面(商品介绍,投到警示,亲切服务)
- 派单制:ai检测门店有顾客进入,分配讲解员
1.3 海底捞
通过摄像头ai巡检店内情况,
- 标准1 锅底菜品上桌时间
- 标准2 智能检测顾客离开座位场景
- 标准3 顾客离场收台完毕
- 标准4 收台合规,A抹布 -> B抹布 -> C抹布
二 LLM 的使用
2.1 限制类服务
-
海底捞的限制服务,例如顾客点餐提问,活动提问,使用大模型解决 (
解决:问答助手 + RAG)- 点餐 高尿酸能吃哪些?正在减脂适合吃什么?
- 付费 代金元,优惠券怎么使用?
-
奈雪的茶工作助手,帮助新店员做奶茶 之前pdf:例如做霸气草莓 现在:大模型+ RAG
2.3 销售相关
2.3.1 辅助聊天
整理提示词
1 用户咨询商品及活动等话题
2 门店往期与顾客聊天风格提示词
3 总部针对咨询商品及活动准备的文案话术
1 + 2 + 3 提示词 => 大语言模型 => 生成回复话题
2.3.2 智能标签:基于对业务情况和会员状态的判断,AI 推荐标签
2.3.3.素材创作:利用AI创作新的素材
- 例如 总部创作商品素材
Q: 请帮我生成红毛丹的素材文案,{文案风格:活泼)、{文案文笔:清秀隽永}、{创作文案数量:2份}
新鲜到货#红毛丹
红红火火惹人爱
晶莹剔透醉心田
浑身毛茸茸,个性十足
酷炫内里确实小清新一枚
2.3.4素材审核:Al审核,可快速识别关键字与新内容推荐
- 例如 总部创作商品素材
审核
2.3.4.5场景导航:让 AI可以可控的推进销售达成
-
场景: 根据不同的运营场景,有针对性的设置快速回复的素材内容
-
功能特性:
-
场景化导航引擎帮助门店识别用户意图,根据顾客话术快速判断其需求,如在电商场景中精准识别用户的购物意向。
-
基于实时意图识别,为用户规划最佳交互路径,引导用户快速找到所需信息,提升用户体验。
-
通过精准的导航和引导,有效提升用户的转化效率,例如提高电商平台的下单率
-
三 营销内容的生成
- 线上营销内容推广视频内容, 抖音,哔站,天猫,淘宝
为什么要营销内容生成?
ps:中长尾商品,买的时间中长的商品,不好卖
主体思路是视频片段组合
1、视频由多条视频片段拼接而成 (fancyTech专业拼接)
2、如何得到视频片段:品牌视频切片、产品展示切片、模特展示切片、直播切片等
3、如果每条视频片段都有足够丰富的文字描述,则LLM 应该有能力去组合视频片段
探索有效的切片方式
- 品牌视频切片、产品展示切片、模特展示切片、直播切片
1、AI+人工切片,1-10秒视频
2、通过代码或工具,将视频中的音频分离
3、从音频中提取文字
4、通过多模态模型对画面进行文字描述
5、人工补充修改文字描述
6、整理成结构化信息
没有用模特拍过视频的商品怎么办?
- 大量商家95%以上的商品没有拍过模特展示视频
1、文生视频,可控性普遍还不够
2、图生视频,生成几秒钟的展示视频,效果是可用的
3、你的商品如何上身到模特?
4、Flux 是很强的开源生图模型,而且有很多基于Flux 或 Stable Diffusion的变体模型
没有用模特拍过视频的商品怎么办? 解决!!!
-
基于以上前提,我们再来梳理一下从电商商家出发,这样的 AI 产品都需要哪些步骤
1、商家都有什么?商家都缺什么?
商家有很多商品图片,商家缺版权模特
解决方案:用 Flux 模型帮助商家生成足够多的模特,且没有版权问题
2、需要一个模型,将服饰穿到模特身上
解决方案:调研大量开源模型、闭源模型API,找到合适的换装模型,这里我们使用CatVTON如果测试的足够多,就能找到这类模型的特点
3、给图片增加合适的场景
4、让商品图、模特图动起来(海螺)
5、给文案配音,并且配上音乐
二 案例
电商回复助手
- 通过大模型回复直播间用户提问
直播间问题 - 大模型回复 - 直播间回答
准备工作:工作流id + 工作流api key
主播间 大模型回复 提示词
- question -> 大模型 -> 回复
#角色
你是一个直播助手,负责回答直播的相关问题。你应该扮演一个人类年轻的文性的口吻进行回复
#规则
你负责回是用户的疑问,你要判断用户的消息是否应该去回答。
聊天类的消息就不要回答了
回复要尽可能的简短,最长不超过100字
#输出格式
输出一个 Json [needReply: false,msg: “string"]其中 needReply 表示是否需要回答,如果不需要回答则needReply 为 fasle, 并且 msg 为 空字符串(“”),如果需要回答則 needReply 为 true、并且 msg 为回复内容
直接输出 json 字符串,前面不要加```json,后面不要```
AI换衣生成视频
| 项目 | 说明 | 开源项目地址 |
|---|---|---|
| ComfyUl | 绘图工作流 | github.com/comfyanonym… |
| ComfyUl-RemoveBG | ComfyUI去除背景插件 | github.com/cubiq/Comfy… |
| ComfyUI-ReplaceBG | CofyUI替换背景工作流 | openart.ai/workflows/m… |
| Fatvton | Al换装 | github.com/Zheng-Chong… |
| 海螺视频 | 图生视频 | platform.minimaxi.com/document/vi… |