
nvidia-ai-blueprints/video-search-and-summarization
Developer toolsЭта страница переведена автоматически. Технические детали смотрите в оригинале. Открыть оригинал
NVIDIA AI Blueprint для поиска и резюме видео (VSS) — это эталонная архитектура с ускорением GPU для создания видеоаналитических агентов с верифицированными оповещениями в реальном времени, визуальным Q&A, а также автоматизированной...
Обзор
NVIDIA AI Blueprint: Поиск и резюме видео (VSS) NVIDIA Blueprint for Video Search and Summarization (VSS) предоставляет набор эталонных архитектур для создания агентов видения и приложений видеоаналитики на базе ИИ. Эти архитектуры объединяют ускоренные микросервисы зрения, модели языка зрения (VLM) и большие языковые модели (LLM), чтобы вы могли использовать их в существующих приложениях, как самостоятельные микросервисы или как часть более крупного агента зрения. VSS организован в три области обработки и анализа: (извлечение признаков, встраивания и понимание потоков с результатами, опубликованными в брокере сообщений), (обогащение метаданных на траектории, инциденты и верифицированные оповещения) и (координированные инструменты для поиска, вопросов и ответов, суммирования и поиска клипов, включая протокол Model Context Protocol).
Обзор (машинный перевод)
NVIDIA AI Blueprint: Поиск и резюме видео (VSS)
Создавать видео-ИИ-агенты с ускорением GPU, которые ищут, анализируют, резюмируют и рассуждают по живому или записанному видео с использованием естественного языка.
NVIDIA AI Blueprint for Video Search and Summarization (VSS) объединяет модели языка видений, RAG и микросервисы NVIDIA NIM для обеспечения видеоаналитики в реальном времени, визуальных вопросов и ответов, проверки оповещений, извлечения клипов и обобщения длинных видео.
- Поиск видеопотоков или архивов с помощью запросов на естественном языке
- Суммировать часы видео
- Задавать визуальные вопросы и автоматически генерировать отчёты
- Обнаружение и проверка оповещений в реальном времени с помощью VLM
** 🚀 Попробуйте демо** · ** ⚡ Быстрый старт** · ** 📚 Документация** · ** 🏗️ Архитектура** · ** 📦 Последний релиз**
Содержание
- Обзор
- Описание случая использования / Проблемы
- Рабочие процессы агентов
- Программные компоненты
- Целевая аудитория
- Обзор структуры репозитория
- Документация
- Предварительные требования
- Требования к аппаратному обеспечению
- Руководство по быстрому старту
- Вклад
- Лицензия
Обзор
Blueprint NVIDIA for Video Search and Summarization (VSS) предоставляет набор эталонных архитектур для создания агентов зрения и приложений для видеоаналитики на базе ИИ.
Эта страница переведена автоматически. Технические детали смотрите в оригинале.
README
Показан фрагмент оригинального README. Открыть оригинал.
NVIDIA AI Blueprint: Video Search and Summarization (VSS)
Build GPU-accelerated video AI agents that search, analyze, summarize, and reason over live or recorded video using natural language.
NVIDIA AI Blueprint for Video Search and Summarization (VSS) combines vision-language models, RAG, and NVIDIA NIM microservices to deliver real-time video analytics, visual Q&A, alert verification, clip retrieval, and long-video summarization.
- Search video streams or archives using natural language queries
- Summarize hours of video
- Ask visual questions and automatically generate reports
- Detect and verify real-time alerts with VLMs
🚀 Try the Demo · ⚡ Quickstart · 📚 Documentation · 🏗️ Architecture · 📦 Latest Release
Table of Contents
- Overview
- Use Case / Problem Description
- Agent Workflows
- Software Components
- Target Audience
- Repository Structure Overview
- Documentation
- Prerequisites
- Hardware Requirements
- Quickstart Guide
- Contributing
- License
Overview
The NVIDIA Blueprint for Video Search and Summarization (VSS) provides a suite of reference architectures for building vision agents and AI-powered video analytics applications. Those architectures bring together accelerated vision microservices, vision language models (VLMs), and large language models (LLMs) so you can use them in existing applications, as standalone microservices, or as part of a larger vision agent.
VSS is organized into three areas of processing and analysis: real-time video intelligence (feature extraction, embeddings, and stream understanding with results published to a message broker), downstream analytics (enrichment of metadata into trajectories, incidents, and verified alerts), and agentic and offline processing (orchestrated tools for search, Q&A, summarization, and clip retrieval, including via the Model Context Protocol).
This repository implements the blueprint and powers the NVIDIA build experience for natural-language video agents—search, summarization, visual Q&A, and related workflows—backed by generative AI, VLMs and LLMs, and NVIDIA NIM microservices as configured in the stacks below.
Use Case / Problem Description
Рекомендуемые инструменты
Попробуйте другой запрос или уберите фильтр.
Установка
npx skillfish add nvidia-ai-blueprints/video-search-and-summarization