Агентная диалоговая аналитика видео на базе AWS
aws ·
В статье описывается решение для интеллектуального анализа видео с использованием агентов и диалогового интерфейса, разработанное на базе AWS. Система позволяет пользователям запрашивать информацию из видеоконтента с помощью естественного языка. Для динамической оркестровки таких сервисов, как Amazon Transcribe и Amazon Rekognition, в зависимости от намерения пользователя во время выполнения, применяется SDK Strands Agents совместно с Amazon Bedrock, что устраняет необходимость в фиксированных конвейерах обработки. За счет кэширования результатов анализа агент обеспечивает мгновенные ответы на последующие вопросы, тогда как первоначальная обработка новых видео занимает примерно пять-десять минут. По данным одной из медиакомпаний, внедрение этой архитектуры сократило время ручного просмотра записей совещаний на 80%. Решение поддерживает различные сценарии использования, включая мониторинг безопасности, расследование страховых случаев и анализ совещаний, благодаря сочетанию транскрипции аудио и анализа визуальных сцен. Развертывание осуществляется с помощью Amazon ECS и Fargate и включает надежные меры безопасности, такие как доступ только по приглашениям и изоляция данных для каждого пользователя. Авторы подчеркивают, что данный шаблон является расширяемым: команды могут добавлять новые возможности, просто определяя новые функции инструментов, без изменения основной логики рабочего процесса.
aws