用途:在 VSS(Video Search and Service)部署上对归档视频执行顶层融合搜索,并支持把视频文件或 RTSP 流接入以用于搜索,以及删除已接入的搜索源。官方标注为 Alpha 功能,不建议用于生产。
主要能力:基于自然语言的视频检索,使用 Cosmos Embed1 生成嵌入;查询可触发三种行为——仅属性(如“穿红夹克的人”)、仅嵌入(如“叉车”)、融合(动作+属性,先嵌入检索再按属性重排)。支持文件上传、RTSP 流接入与源删除。
使用方式:需先具备可访问的 VSS 部署($HOST_IP),安装 vss-manage-video-io-storage 技能,配置 $NGC_CLI_API_KEY 与 $NVIDIA_API_KEY,并在调用方具备 curl、jq、Docker。接入前先探查:curl -sf --max-time 5 "http://${HOST_IP}:8000/docs" >/dev/null && curl -sf --max-time 5 "http://${HOST_IP}:9200/" >/dev/null。检索默认走 REST:curl -s -X POST http://${HOST_IP}:8000/generate -H "Content-Type: application/json" -d '{"input_message": "find all instances of forklifts"}' | jq .;也可用 Agent UI http://${HOST_IP}:3000/。文件接入为三步流程(申请上传 URL、分块上传、调用 /complete);RTSP 走 POST /api/v1/rtsp-streams/add;删除走 DELETE /api/v1/videos/<video_id> 或 /api/v1/rtsp-streams/delete/<name>。
限制:必须部署匹配的 VSS profile/微服务;NGC 模型与 NIM 可能受限流、显存和许可限制;并发、显存与存储受主机硬件和 compose 文件约束。资料中未提供价格与收费信息。