视频融合赋能平台建设方案【完整版】

下面是小编为大家整理的视频融合赋能平台建设方案【完整版】,供大家参考。

　

　视频融合赋能平台建设方案

　 为实现项目建设目标，构建龙港市机器视觉，本期项目具体包括如下建设内容：利用先进的人工智能视频分析技术实现平台建设，最大化利用雪亮工程的基础上搭建流媒体层和算法调度层，通过 AI 赋能中心向用户呈现数据；结合用户权限管理、视频与 AI 算法流程审批模块以及 AI 算法超市等功能，满足实际视频流转发需求、赋能场景算法、统一协同流程，打造集约化、安全化、标准化、规范化的视频融合赋能平台。

　序号 类 型 子模块 描述 备注 单 位 数量 一、基础资源硬件清单 1

　平台硬件 高 性 能计 算 服务器 1、（CPU）

　(2.1GHz/20 核/27.5MB/125W) CPU *2

　2、（GPU）NVIDIA Tesla T4×5,最大支持 8 张单款 GPU 显卡。

　3、（内存）32GB ×8，支持可扩展至≥768GB。实配≥256GB（32*8），单节点（单服务器）具有 24 个内存插槽，支持 DDR4 2666MHz 规格内存条，单槽最大支持 64G 内存条。

　4、（阵列卡）RAID-P460 Raid 卡

　 5、（系统盘）SATA SSD 960GB

　 6、（数据盘 1）

　SATA SSD 1.9TB x3

　7、（网口）2 个千兆电口 、万兆光口*2

　台 4

　 2 雪 亮 视频 汇 聚平 台 流媒 体 服务 器 扩容（视频专网侧）

　1.CPU：

　(16C/2.4G) CPU *2； 2.内存：32G ECC DDR4*2； 3.硬盘 1：SAS 600G 15K 2.5*2，8 盘位，RAID 1； 4.阵列卡：8 口 SAS_HBA*1； 5.默认扩展卡：2 口千兆铜缆网卡； 6.扩展卡 1：双光口万兆网卡；

　台 4 3

　视 图 安全网关 1.设备高度 2U，CPU (2.4GHz/10 核) 2．内存，32GB ×2，支持可扩展至≥768GB 3．阵列卡，Raid 卡（缓存≥4GB）

　4．网口，万兆光口*2,提供万兆光模块 2 个 5.视图水印功能 支持单例和平铺两种水印模式； 6.视图动态脱敏或加解密功能 支持人脸、车辆等数据脱敏或加解密功能； 7.视频加解密功能 支持标准 AES 加密算法；支持视频数据加解密；图片数据加解密 8.视频安全规格 支持 H.264、H.265、JPEG 等多种编码格式；自适应 1080P、2K、4K 多种分辨率 9.图片安全规格 支持 jpg 格式图片；支持多种分辨率图片；大图小图分别叠加水印

　台 1 2.1 AI 算法组件中心 1

　算法类型 占 道 经营识别 1、算法使用场景：未经允许的小摊贩不能占用城市道路违规经营，有安全隐患。因此该算法 套 1

　 常部署在街头巷尾等次公共区域、人流量大的道路上方等； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到地摊、货物小贩等（不包括三轮车等）则产生告警到平台，提醒管理人员尽快处理、补员； 5、算法准确度：85% 2

　沿 街 晾晒检测 1、算法使用场景：公共区域禁止晾晒居家衣物被褥等，因为影响市容且容易四处飘落，有影响城市秩序的风险。若使用街头电线等，更是有事故隐患。该算法适用于室外道路边监控； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到飘扬的被褥，明显衣物等则产生告警到平台，提醒管理人员尽快制止； 5、算法准确度：85% 3 乱 搭 广告牌 1、算法使用场景:临街的门头店招；

　 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别画面区域内的广告牌是否增多； 5、算法准确度：85% 4

　悬 挂 条幅检测 1、算法使用场景：做广告、煽动闹事等常伴随横幅悬挂。该算法可部署在公共区域所有用于社会治安管理报的点位； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到明显的悬挂条幅等则上报告警信息到平台，附带告警画面； 5、算法准确度：85% 5

　垃圾/物料 堆 放检测 1、算法使用场景：规范城市园区等的管理，检测管控区域垃圾物料随意堆放并报警。该算法可部署在园区，楼道，垃圾桶等需要管控的区域； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测；

　 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到明显的垃圾堆放上报告警信息到平台，附带告警画面 5、算法准确度：85% 6

　垃 圾 乱倒检测 1、算法使用场景：规范城市园区等的管理，检测管控区域存在小件垃圾并报警。该算法可部署在园区，楼道，垃圾桶等需要管控的区域； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到明显的打包垃圾报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　7

　乱 搭 雨棚、伞架检测 1、算法使用场景：违规撑伞常伴随违规经营，且极易占用公共区域、遮挡视线等，有事故隐患。该算法可部署在公共区域所有用于社会治安管理报的点位； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用；

　 4、算法描述：识别到大型经营用伞或类似小棚则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　8

　垃 圾 桶满 溢 检测 1、算法使用场景：垃圾桶满溢可能是人员懈怠、人员不足、或者有特殊情况，识别次行为有助于城管部门工作。此算法常部署在城市垃圾桶附近点位，要求能清晰的看到垃圾桶周边情况； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到垃圾桶有明显溢出且盖子无法盖上的现象则上报告警信息到平台，附带告警画面； 5、算法准确度：85%。

　9

　井 盖 异常检测 1、算法使用场景：部署于道路监控，可能会出现地面排水井的监控场景。有井盖的位置需要额外关注井盖状态； 2、算法识别区域：可根据业务需要，手动划定视频中的多个区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到城市道路地面井盖破损、丢失则上报告警信息到平台，附带告警画面。

　 5、算法准确度：85%。

　10

　出 店 经营检测 1、算法使用场景：店铺经常违规摆放桌椅板凳或大件货物在店外公共区域，该算法部署在街道有经营场所的监控点位； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别店外区域的大件货物或者桌椅板凳，认为出店经营则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　11

　（ 渣 土车）车牌识别 1、算法使用场景：所有渣土车需经过的区域监控； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别指定区域渣土车车牌，如出现则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　12

　渣 土 车抛 洒 滴漏检测 1、算法使用场景：所有渣土车需经过的区域监控；

　 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别指定区域原本路面干净，渣土车驶过后路面即出现污渍，即判定渣土车存在沿路抛洒违规行为（带有车牌识别功能），则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　13

　渣 土 车车 身 不洁检测 1、算法使用场景：所有渣土车需经过的区域监控； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别指定区域经过的渣土车车身是否清洁，若存在不洁问题，则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　14 渣 土 车棚 盖 密闭检测 1、算法使用场景：目前主要用于工地出入口场景，规范渣土车作业，评估工地绿色施工情况。

　2、算法识别区域：工地入口，卡口等进行渣土车辆识别，判断是否密闭。支持绘制区域，不绘制区域时默认全屏检测。

　 3、算法使用要求：需在光线充足、无明显遮挡、正面或背面场景为宜，能清晰抓拍目标车辆，画面倾斜角较小，肉眼能清晰观察到车辆未密闭； 4、算法描述：检测出未密闭渣土车并上报平台，携带抓拍画面告警； 5、算法准确度：85%。

　15

　道 路 防涝检测 1、算法使用场景：排涝不畅导致的道路积水影响交通，因此该算法适用于室外路面等容易出现积水的场景的监控视频； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：识别到路面上有明显的积水区域则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　16

　河 道 防洪检测 1、算法使用场景：河道水位超过警戒线容易引发洪水，因此该算法适用于水位需严格监管的河道场景的监控视频； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用；

　 4、算法描述：在识别区域内，首先人工将河堤水位警戒线的位置划线，当实际监控到的水面有明显超过该线则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　17

　人 员 集聚 检测 1、算法使用场景：主要用于检测某些特定区域是否存在人员数量超过设定阈值人数的情况； 2、算法识别区域：可根据业务需要，手动划定视频中的全部或部分区域为算法检测区域，非算法检测区域算法不检测； 3、算法使用要求：需在光线充足、无明显遮挡、目标检测物大小适宜且肉眼清晰可辨的条件下使用； 4、算法描述：在识别区域内，检测是否存在人员数量超过设定的阈值人数，当实际监控到的人数有超过该设定数则上报告警信息到平台，附带告警画面。

　5、算法准确度：85%。

　1 算法仓管理 基 础 功能 1、录像上传，支持录像上传、存储及分析 2、全目标解析功能检查，支持对实时视频和历史录像进行全目标（人脸、人体、机动车、非机动车）解析，支持配置感兴趣区域，仅对感兴趣区域内的目标进行解析；支持目标关联显示；支持目标检测算法和目标识别算法在不同解析卡上独立运行 3、智能分析管理，支持通过授权形式（License IP）调用算法仓库中不同的算法；支持对视频进行人像（人脸）、人体、车辆的全分析.

　套 1

　 2 算 法 调度 1、业务调度功能，支持业务节点和显卡配比自主配置 2、算力资源管理功能，支持多地多中心计算资源的统一调度，将多个中心的各种 GPU 资源、CPU 资源等进行统一的监控和管理 3、存储管理功能，支持 SDK、Restful、NFS 三种协议的设置选项；支持配置接入的存储为“只读”、“可读可写”两种模式，且写入存储支持负载均衡 4、数据回流功能，支持将误报数据回流到训练平台进行重新训练 5、任务管理调度功能 提供视频流和图片流解析任务的创建、批量删除、修改、查询、导出功能；支持授权分配审批； 提供设定定时任务、轮训任务、准实时任务，可设置任务的优先级功能 6、资源调度管理，支持多分辨率混合调度、亲和性调度（视频流相机和解析服务尽量分配到一个服务器节点上）、智能调度、负载均衡调度、定时调度等多种调度策略。

　3 算 法 仓库 1、算法仓功能 提供对 IPC 摄像机、解析平台、视图库平台的算法管理 支持算法资源动态监控显示功能，支持通过界面展示查看每种算法已使用/预分配的资源 支持通过授权的形式去调用算法仓库中的不同的算法

　 2、算法仓库管理 提供通过界面展示查看算法仓库支持的算法列表功能，列表展示内容包括算法名称、分析类型、算法厂商、芯片平台、算法版本和详细信息； 提供集成运行第三方（其他厂商或组织）算法功能，并可对算法进行管理（包括添加、删除、安装、卸载等）； 针对视频流或图片流，支持的算法包括人车（混合）分析算法、人像（人脸）/人体检测算法、车辆分析算法和卡口车辆分析算法，并可按照算法类型、厂商类型等条件进行算法查询； 提供算法资源管理功能，包括根据需求进行硬件计算资源预分配，以及针对后台没有启动对应算法服务的突发（临时）分析任务，优先进行处理，处理时可对计算资源（算法类型和...