简要规格描述或项目基本概况介绍、用途:本项目内容为构建覆盖监所、控申、公益诉讼、刑事办案等检察业务多模态大模型分析应用场景,结合AI小模型+多模态大模型的方式,在检察视频网中构建视频智能分析能力。
本项目的主要建设内容包括:
1、视频管控与分析
为各应用场景提供模型调用及管理功能,内容包括监控视频流管理、案件视频管理、告警消息审核管理、行为预警库管理、统计分析等。
2、检察场景模型算法
实现检察各应用场景所需的模型算法定制化建设,包括识别检测与异常判断,识别检测主要实现接触行为、敏感信息、敏感信息、文字内容检测等,异常判断包括人员身份、谈话场景、接触行为异常、提押场景、谈话场景、超过违规、搜身行为等的合规判断。
3、模型全流程能力调度
1)小模型
实现对人员入侵拌线、奔跑、离岗、打架、聚众等行为的智能布控分析,包括算法布控配置和API接口,以满足特定场景下的实时监控和预警需求。
2)大模型
提供具备文本理解、图片理解、视频理解能力的多模态大模型,支持多模态融合推理,结合文本、图像等多源数据进行综合推理,并提供多轮问答、上下文管理、归纳分析、内容生成和知识对话等功能,以满足不同场景下的复杂需求。
3)开发功能
涉及小模型和大模型的能力调度,支持动态加载解析插件以执行智能解析任务。任务管理涵盖创建、分配、执行和监控,服务调度负责**分配和执行效率优化。小模型服务专注于低延迟、高并发的实时分析,通过视频解码和抽帧处理实现异常行为的快速响应。大模型服务则构建场景化推理链,结合视频帧序列和时空上下文进行因果归因,提升误报过滤率和关键事件召回精度。此外,业务流编排包括视频接入、算法布控、视频预处理和分析,提供多种接口能力,如告警事件二次研判、视频摘要生成、问答交互以及关键内容打点,支持上层业务平台的安全管理决策。
4、配套软硬件支撑**
配套软硬件支撑环境包括硬件设备、产品软件以及安全产品。硬件设备配套交换机、GPU、服务器、存储等设备,并实现机房的电力改造,产品软件包括多模态大模型产品、小模型产品、流媒体转发模块、1000 路授权、操作系统、中间件、数据库,安全产品包括服务器端防病毒软件。
系统清单:
云头条声明:如以上内****公司、机构、单位或个人权益,请联系我们说明理由,我们会配合,无条件删除处理。