视频图片儿分析模型。

This commit is contained in:
spllzh
2025-10-12 09:37:43 +08:00
parent b047a3be90
commit 5f2c952a6e
33 changed files with 1935 additions and 104 deletions

View File

@@ -0,0 +1,28 @@
-- 创建AI图像分析记录表合并请求和响应
CREATE TABLE `video_image_analysis` (
`id` VARCHAR(36) NOT NULL COMMENT '主键UUID',
`model` varchar(50) NOT NULL COMMENT '使用的AI模型',
`video_image_url` varchar(500) NOT NULL COMMENT '图像URL',
`user_question` text COMMENT '用户问题文本',
`response_content` text COMMENT 'AI返回的内容',
`role` varchar(20) DEFAULT 'assistant' COMMENT '角色',
`finish_reason` varchar(20) COMMENT '完成原因',
`choice_index` int(11) DEFAULT 0 COMMENT '选择索引',
`usage_prompt_tokens` int(11) COMMENT '提示词token数量',
`usage_completion_tokens` int(11) COMMENT '完成token数量',
`usage_total_tokens` int(11) COMMENT '总token数量',
`request_data` json COMMENT '完整请求参数JSON',
`response_data` json COMMENT '完整响应数据JSON',
`user_name` varchar(100) COMMENT '用户姓名',
`user_phone` varchar(20) COMMENT '用户电话',
`session_name` varchar(200) COMMENT '会话名称',
`status` tinyint(4) DEFAULT 1 COMMENT '状态1-成功0-失败',
`created_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
`updated_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
PRIMARY KEY (`id`),
KEY `idx_model` (`model`),
KEY `idx_status` (`status`),
KEY `idx_created_at` (`updated_at`),
KEY `idx_model_created` (`model`, `created_at`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_unicode_ci COMMENT='AI图像视频分析记录表';

View File

@@ -0,0 +1,46 @@
### 语音播报
#### 一、个人生活与日常便捷场景
此类场景的核心是 “解放双手 / 双眼”,让用户在不专注于设备操作时(如移动、家务)仍能获取信息,提升日常效率与体验。
移动出行场景:
导航语音播报:地图软件(如高德、百度地图)实时播报路线(“前方 500 米左转,进入主路”)、路况(“前方路段拥堵,预计延误 10 分钟”),避免驾驶员频繁看屏,保障行车安全。
交通站点提示:公交 / 地铁 APP 播报车辆动态(“您乘坐的 301 路公交已到站,距离本站还有 2 分钟”)、共享单车解锁 / 还车提示(“解锁成功,骑行时长已开始计算”)。
智能家居交互:
设备状态播报:智能音箱(如小爱同学、天猫精灵)播报指令反馈(“已为您打开客厅灯光,当前亮度 70%”)、家电故障提示(“洗衣机进水异常,请检查水龙头”);智能门锁播报开锁结果(“指纹识别成功,门已开启”)。
生活提醒播报:闹钟语音(“早上好,今日气温 25℃有小雨建议携带雨伞”、日程提醒“下午 3 点有会议,地点在 1 号会议室”)、待办事项播报(“记得今晚 8 点取快递”)。
信息获取场景:
碎片化信息播报:新闻 APP “语音读新闻”(“今日热点:我国首条跨海高铁开通运营”)、电子书 / 文章 “听读模式”(适合通勤时 “听” 小说、公众号文章);天气 APP 播报未来 24 小时天气(“夜间最低气温 18℃风力 3-4 级”)。
设备操作反馈:手机验证码播报(“您的验证码是 654321有效期 5 分钟”)、支付成功提示(“微信支付收款 19.9 元”)、电量低提醒(“手机电量已不足 20%,请及时充电”)。
#### 二、公共服务与社会保障场景
此类场景聚焦 “信息普惠” 与 “公共安全”,需向大量人群(或特定群体)快速、清晰传递关键信息,覆盖公共空间、特殊需求人群服务等。
公共空间提示场景:
交通枢纽播报:机场 / 火车站的登机 / 检票提示(“前往北京的 CA1234 次航班开始登机,请旅客前往 3 号登机口”)、站台安全提醒(“列车即将进站,请站在安全线内候车”);地铁站播报换乘信息(“下一站人民广场,可换乘 2 号线,往徐泾东方向”)。
公共场馆提示:商场 / 超市的广播(“请失主到服务台领取遗失的黑色钱包”“生鲜区今日特价活动即将结束”);医院的叫号播报(“请 305 号患者到内科 3 诊室就诊”);图书馆的闭馆提醒(“距离闭馆还有 30 分钟,请尽快整理借阅书籍”)。
特殊群体关怀场景:
视障人士辅助:屏幕阅读器(如 NVDA、VoiceOver播报手机 / 电脑界面内容(“当前打开微信,未读消息 3 条,联系人列表第 1 位是‘家人’”)、盲道导航播报(“前方 10 米有十字路口,左侧是超市入口”)。
老年群体适配:简化版 APP 语音播报(“您的养老金已到账,金额 5000 元”)、智能家电语音指引(“按‘开始’键启动洗衣机,水温已设为 40℃”降低操作门槛。
#### 三、工作与生产效率场景
此类场景的核心是 “减少信息处理成本”,让用户在专注工作(如办公、生产)时,通过语音快速接收任务、状态反馈,避免频繁中断流程。
办公协作场景:
即时通讯播报:企业微信 / 钉钉语音提醒(“张经理发送了新的项目文件,请查收”“明天 9 点的项目会已提前至 8 点 30 分”)。
日程与任务播报:日历软件播报当日工作安排(“上午 10 点与客户沟通需求,下午 2 点提交方案初稿”)、待办工具播报紧急任务(“距离‘周报提交’截止时间还有 1 小时,请尽快完成”)。
数据与通知播报Excel 表格语音反馈(“数据计算完成,总销售额为 85 万元”)、邮件 APP 播报重要邮件(“收到来自合作方的‘合同修改意见’邮件”)。
生产与作业场景:
工业设备播报:工厂生产线设备实时播报运行状态(“机床 A 转速异常,当前转速低于标准值 10%,请检查”)、仓储系统播报货物位置(“您查找的‘零件 A位于 3 号货架第 2 层,库存剩余 50 件”)。
物流与配送播报:快递员 APP 播报订单信息“下一单收件地址XX 小区 3 号楼 2 单元 501联系人李女士”、物流系统播报运输状态“您的货物已到达上海转运中心预计明日送达”
#### 四、安全与应急警示场景
此类场景是 “生命与财产安全的重要保障”,需在紧急情况下(如灾害、危险)快速传递警示信息,要求语音播报 “及时、清晰、有穿透力”。
灾害预警场景:
自然灾害播报:气象部门的台风 / 暴雨预警(“预计今晚 8 点发布台风橙色预警,风力可达 10 级请居民减少外出加固门窗”、地震预警系统播报“10 秒后将发生轻微地震,震感较弱,请保持冷静,远离窗户”)。
公共安全预警火灾报警系统播报“3 楼东侧发生火情,烟雾浓度超标,请立即通过安全通道疏散,不要乘坐电梯”)、燃气泄漏报警器播报(“检测到燃气泄漏,浓度已超过安全阈值,请立即关闭阀门,打开门窗通风,禁止使用明火”)。
危险提示场景:
交通危险播报:车辆 ADAS 系统(高级驾驶辅助)播报(“前方车辆急刹,距离过近,请立即减速”“您已偏离车道,请注意回正方向”);铁路道口播报(“火车即将通过,请关闭道口栏杆,禁止行人车辆通行”)。
工业安全播报:化工厂车间播报(“检测到有毒气体泄漏,浓度超标,请立即启动应急预案,撤离至安全区域”)、建筑工地播报(“塔吊作业范围内有人员靠近,请立即离开危险区域”)。
#### 五、商业与服务营销场景
此类场景通过语音播报 “传递商业信息”,兼顾服务告知与营销转化,常见于线下消费、线上服务触达等场景。
线下消费场景:
零售门店播报:便利店 / 服装店的促销提示(“今日新品奶茶第二杯半价,活动仅限今日”“夏季服装全场 8 折会员可享折上折”餐饮店的取餐播报“12 号桌的汉堡套餐已做好,请前来取餐”)。
服务场所播报:酒店前台播报(“您的房间已打扫完毕,可前往 5 楼 508 房入住”);加油站播报(“当前 92 号汽油单价 8.5 元 / 升,加满可参与‘满 200 减 20活动”
线上服务场景:
电商售后播报:网购 APP 播报订单进度(“您购买的商品已发货,快递单号为 YT123456789”、售后处理结果“您的退款申请已通过金额将在 1-3 个工作日内到账”)。
会员服务播报:视频 / 音乐 APP 播报会员权益(“您的 VIP 会员还有 7 天到期,续费可享 8 折优惠”)、专属活动(“会员专享演唱会直播将于今晚 7 点开始,记得准时观看”)。