Плеер метаданных Full Motion Video

Доступно с лицензией Image Analyst.

Full-motion video (FMV) позволяет работать в ArcGIS Pro с архивными и потоковыми видеоданными в реальном времени с помощью системы просмотра и анализа метаданных, называемой плеером метаданных. Он работает с видеоданными, которые включают важную информацию о геопозиции, датчике и ориентации платформы, закодированную в потоке видеоданных, что позволяет узнать, где видеоизображение размещено на карте. Эта возможность придает видео географический контекст при просмотре и анализе данных.

Работа с плеером метаданных аналогична вьюеру карт ArcGIS Pro, его можно перемещать в любое место на экране, изменять размер, сворачивать и закрывать.

FMV и плеер метаданных

Характеристики видеоданных, совместимых с FMV, и ArcGIS Pro определяют форму и функциональность плеера метаданных Full Motion Video. Плеер метаданных работает с глобальными и локальными сценами. Функция Ориентировать камеру сцены ориентирует камеру вида сцены в соответствии с перспективой видеосенсора. Эти характеристики и то, как они влияют на плеер метаданных, описаны ниже:

  • Видеоданные, совместимые с FMV, содержат информацию о наведении камеры, положении и высоте платформы, а также другие данные, которые закодированы в видеопоток, так что каждый видеокадр связан с геопозиционной информацией.
  • Плеер метаданных связан с отображением карты, что позволяет:
    • Отображать на карте контур видео, местоположение датчика и поле зрения.
    • Обновлять карту, чтобы приблизить ее к кадру видео, или следить за видео по карте.
  • Отображение плеера метаданных и отображение карты связаны с двунаправленным преобразованием изображения и координат карты. Любая информация, собранная в плеере метаданных, проецируется и отображается на карте вместе с существующими данными ГИС.
  • Одновременно может быть открыто и воспроизведено любое количество плееров метаданных. Каждое видео и связанная с ним графическая информация идентифицируются уникальным цветом при отображении на карте.
  • Работайте с прямыми трансляциями и архивными видео.
  • Используйте интуитивно понятные элементы управления.
  • Отображайте метаданные в режиме реального времени во время воспроизведения метаданных.

Панель Содержание

Когда вы добавляете видеофайл на карту, этот видеофайл отображается на панели Содержание. Также перечисляются отдельные элементы, связанные с видео, включая значения Центр кадра, Контур кадра, След платформы и Положение платформы. Отметьте элементы на панели Содержание, чтобы отобразить их в виде карты. Для получения подробной информации о видеофайле щелкните правой кнопкой мыши на видеофайле в панели Содержание и выберите Свойства. Подробные сведения о видеофайлах представлены для элементов Источник данных, Информация о программе, Информация о кадре, Метаданные потока - видеопоток и Поток данных.

Видеофайл и связанные элементы на панели Содержание и на карте

Примечание:
После того, как элементы отмечены или не отмечены, может потребоваться выбрать воспроизведение в плейере метаданных, чтобы обновить их на карте.

Выберите Источник данных на панели Содержание, чтобы развернуть видеофайлы и отобразить элементы потока KLV. Вы можете включать и выключать отображение потока KLV, если источник видео имеет один или несколько потоков KLV. Снимите отметку с потока KLV, чтобы отключить обработку данных KLV. Установив отметку, элементы KLV можно включать или отключать для просмотра на карте. При использовании Метаданные в CSV или Метаданные в объекты, отмеченный поток KLV передает данные в процесс экспорта. Если никакие элементы KLV не отмечены, или если они отключены, в виде будут сохранены последние известные данные, а воспроизведение файла продолжится без обновления карты.

Поддерживаемые форматы видео перечислены в таблице ниже:

ОписаниеРасширение

Файл MOV

.mov

MPEG-2 Transport Stream

.ts

MPEG-2 Program Stream

.ps

Файл MPEG

.mpg

Файл MPEG-2

.mpg2

Файл MPEG-2

.mp2

Файл MPEG

.mpeg

VLC (mpeg2)

.mpeg2

MPEG-4 Movie

.mp4

Файл MPEG-4

.mpg4

MPEG-Dash

.mpd

Видео файл¹ H264

.h264

Видео файл¹ H265

.h265

Файл VLC Media (mpeg4)

.mpeg4

Файл VLC Media (vob)

.vob

HLS (Адаптивная скорость передачи данных (ABR))

.m3u8

¹ Требуется мультиплексирование

Чтобы воспроизвести заархивированный видеофайл, перейдите к видеофайлу и добавьте его на панель Содержание или на экран. Щелкните правой кнопкой имя видеофайла и выберите опцию Плейер метаданных. Плеер метаданных открывается с загруженным видеофайлом. Плеер метаданных можно перемещать и размещать в любом месте экрана. Его размер можно изменить, переместив угол или край плеера.

Плеер метаданных

Выберите цвет, чтобы идентифицировать видеофайл и связанную графику, например контур видео, на карте, а также данные класса пространственных объектов, которые вы хотите собрать на видео. Вы можете фильтровать отображаемые метаданные по имени и значению поля во время воспроизведения видео, используя поисковую строку.

Управление воспроизведением видео в плеере метаданных

Если открыто несколько плееров метаданных, активный проигрыватель будет управляться клавишами быстрого доступа.

Элементы управления плеера

Элементы управления воспроизведением метаданных описаны в следующей таблице:

Элемент управленияПодписьОписание
Play

Воспроизведение

Воспроизведение метаданных в соответствии с частотой кадров в видео.

После нажатия кнопки Воспроизвести элемент управления изменится на Пауза во время воспроизведения метаданных.

Pause

Пауза

Ставит метаданные на паузу.

После нажатия кнопки Пауза элемент управления изменится на элемент управления Воспроизвести.

Step Forward

Шаг вперед

Перемещает метаданные вперед на количество секунд или кадров, указанное на панели инструментов Full Motion Video.

Step Backward

На шаг назад

Перемещает метаданные назад на количество секунд или кадров, указанное на панели инструментов Full Motion Video.

Fast Forward

Быстрая перемотка вперед

Перематывает метаданные вперед в зависимости от скорости воспроизведения плеера метаданных.

Скорость увеличивается на целое число каждый раз, когда нажимается Быстрая перемотка вперед.

Скорость воспроизведения сбрасывается до 1x, когда плеер поставлен на паузу или остановлен.

Rewind

Обратная перемотка

Перематывает метаданные назад в зависимости от скорости воспроизведения плеера метаданных.

Скорость увеличивается на целое число каждый раз, когда нажимается Обратная перемотка.

Скорость воспроизведения сбрасывается до 1x, когда плеер поставлен на паузу или остановлен.

Jump to End

Перейти в конец

Переходит в конец метаданных.

Jump to Start

Перейти в начало

Возвращает к началу метаданных.

Вы можете выполнять поиск в полях метаданных по ключевым словам во время воспроизведения видеофайла.

Отображение информации о кадре видео

Информация о каждом кадре видео отображается в плеере метаданных в режиме реального времени по мере воспроизведения архивного видео.

Отображение информации о видеоплеере

Элементы пользовательского интерфейса, пронумерованные на изображении выше, описаны в следующей таблице:

Отображение информацииОписание

1 — бегунок воспроизведения видео

Бегунок воспроизведения видео указывает относительное местоположение на временной шкале видео, которое отображается в плеере метаданных. Щелкните на ручку бегунка воспроизведения видео и переместите ее вдоль бегунка воспроизведения.

2 — Временная метка метаданных

При воспроизведении видео отображается всемирное координированное время (UTC) в удобочитаемом формате. Эта временная метка отражает положение ползунка видео на временной шкале видеофайла. Щелкните для обновления функции перехода к временной метке.

3 — Время воспроизведения видео

Отображает время текущего видеокадра относительно общего времени видеофайла. Время отображается в 12-часовом формате.

4 — Время начала видео

Дата и время начала видеофайла.

5 — Время конца видео

Данные и время конца видеофайла.

6 — Настройка скорости воспроизведения

Отрегулируйте скорость воспроизведения с помощью бегунка точной настройки во время воспроизведения видео, а плеер метаданных настроит и воспроизведет новую скорость.

7 - Элементы управления плейером

Элементы управления воспроизведением видео, такие как воспроизведение, пауза, перемотка вперед и другие. Элементы управления воспроизведением подробно описаны ниже.

Настройка скорости воспроизведения

Вы можете настроить скорость воспроизведения с помощью элементов управления Быстрая перемотка вперед и Обратная перемотка:

  • Скорость воспроизведения указывается рядом с элементами управления.
  • Скорость воспроизведения отражается целыми числами.
  • Когда вы щелкаете по кнопке Пауза, чтобы остановить видео, скорость воспроизведения сбрасывается до 1x.

Вы можете отрегулировать скорость воспроизведения с помощью бегунка точной настройки:

  • Бегунок тонкой настройки воспроизведения позволяет точно контролировать скорость воспроизведения.
  • Скорость воспроизведения представляет собой дробное число, зависящее от положения бегунка. Разрешение составляет 0,01 секунды.
  • Скорость воспроизведения варьируется от 0,01x до 8x скорости воспроизведения. Это означает, что вы можете воспроизводить видео в замедленном режиме при воспроизведении на скорости менее 1x.
  • Скорость замедленного воспроизведения сбрасывается до 1x всякий раз, когда используется любой из бегунков времени или стандартные элементы управления.

Переход к Метке времени

Элемент Метка времени метаданных (отображение времени воспроизведения видео, элемент 2 в таблице выше) отражает время бегунка видео на временной шкале видеофайла. Во время воспроизведения метаданных вы можете щелкнуть правой кнопкой мыши в окне отображения времени, чтобы скопировать, вырезать или вставить отметку времени. Когда вы вставляете метку времени в окно отображения времени, проигрыватель метаданных перемещается в эту позицию в видеофайле.

Инструменты плейера метаданных

В дополнение к элементам управления воспроизведением, доступ к функциям FMV осуществляется с помощью инструментов плеера метаданных. Эти инструменты поддерживают общие операции и рабочие процессы анализа и управления видео.

В следующей таблице перечислены инструменты плеера метаданных:

ИнструментПодписьОписание
Отобразить метаданные

Отобразить метаданные

Отображение встроенных метаданных.

Orient Scene Camera

Ориентировать камеру

Ориентируйте камеру SceneView на перспективу контура кадра и положение платформы.

Zoom To Video

Приблизить к видео

Приблизиться к местоположению видео на карте. Вид внутри отображения карты включает в себя видеокадр, а также наземный трек платформы съемки.

Zoom To Frame

Приблизить к фрейму

Приблизьтесь к местоположению текущего кадра видео на карте.

Start Follow

Автоматическое следование

Постоянное центрирование отображения карты на видеокадре и наземной дорожке датчика во время воспроизведения. Отображение карты перемещается по мере того, как видео достигает края дисплея.

Чтобы прекратить следование за видео, снова нажмите кнопку Автоматическое следование.

Display VMTI Graphics

Отобразить графику VMTI

Отобразить графику VMTI в видео и на карте.

Метаданные в пространственные объекты

Метаданные в пространственные объекты

Сохранить метаданные платформы, центра кадра и контура кадра в качестве класса объектов в базу геоданных проекта, если вы не измените их конфигурацию в параметрах Настроить рабочую область.

Метаданные в CSV

Метаданные в CSV

Сохранить метаданные платформы, центра кадра и контура кадра в файле значений, разделенных запятыми (.csv).

VMTI To Features

VMTI в объекты

Сохранить данные центральной точки VMTI в базу геоданных.

Buffer Playback

Буфер воспроизведения

Буферизируйте воспроизведение, чтобы обеспечить полный контроль над воспроизведением видео.

Панель инструментов быстрого запуска

В связи с ростом возможностей видеоплееров и плееров метаданных в ArcGIS Pro, стали доступны дополнительные элементы управления для взаимодействия с видео и картой. Не все кнопки используются всеми аналитиками, поэтому вы можете настроить кнопки плеера, чтобы настроить его для вашего экземпляра ArcGIS Pro.

Раздел Настроить панель инструментов быстрого запуска

Разверните раздел Настроить панель инструментов быстрого запуска, чтобы настроить инструменты на панели плеера метаданных. Выберите элемент на первой панели и щелкните Добавить, чтобы переместить элемент на вторую панель, которая отобразит и активирует элемент на панели плеера метаданных. Используйте следующие быстрые клавиши в окне Настроить панель инструментов быстрого запуска:

  • R - удаление кнопок из списка используемых.
  • A - добавление кнопок в список используемых.

Видео индикатор движущейся цели

Full Motion Video поддерживает отображение и захват информации видео индикатора движущейся цели (VMTI), встроенной в поток видеоданных, совместимый с FMV. VMTI – это метод искусственного интеллекта машинного обучения для обнаружения движущихся объектов в видео. Обнаружение объекта выполняется и кодируется в видеопоток сторонними поставщиками программного обеспечения, как определено в документе Совета по стандартам индустрии движения (MISB). Если данные VMTI закодированы в видео, совместимом с FMV, вы можете отображать данные в плеере метаданных и сопоставлять их по мере воспроизведения видео. Щелкните кнопку Отобразить графику VMTI Display VMTI Graphics, чтобы отобразить прямоугольную графику, обозначающую объекты, указанные в видеофайле.

Full Motion Video также поддерживает отслеживание объектов с использованием методов глубокого обучения. Дополнительную информацию см. в разделе Отслеживание объектов в движущихся изображениях.

Уровень достоверности или идентификатор объекта, связанный с каждым идентифицированным объектом, также может отображаться в плеере метаданных и на карте. Выбрав видео с поддержкой VMTI на панели Содержание щелкните Автономное видео > Данные > Настроить рабочую область, чтобы открыть диалоговое окно Свойства полномасштабного видео (FMV): Рабочая область. Щелкните категорию VMTI в диалоговом окне, чтобы указать параметры VMTI для отображения в плеере метаданных и на карте. Вы можете указать значение Порог уровня достоверности для идентифицируемых объектов, а также отобразить надписи Уровня достоверности, Местоположения объекта или Object ID для объектов, идентифицированных в плеере метаданных и на карте.

Щелкните кнопку VMTI в объекты VMTI To Features, чтобы сохранить все объекты, определенные в каждом видеокадре, в базу геоданных. Укажите имя файла и местоположение базы геоданных, а также значение Частоты сбора данных для идентифицированных объектов. Записанные данные класса пространственных объектов включают центральную точку каждого обнаруженного объекта и все метаданные FMV, относящиеся к соответствующему видеокадру. Связанная таблица атрибутов объектов позволяет вам использовать существующие инструменты геообработки для создания треков объектов и другой статистической информации для объектов VMTI.

Диалоговое окно VMTI в объекты
Укажите путь, имя файла и частоту захвата объектов, которые будут идентифицированы в видео с поддержкой VMTI.

Если у вас есть информация VMTI в отдельном файле, связанным с конкретным видео, вы можете закодировать ее в видеофайл с помощью мультиплексора Full Motion Video. Более подробную информацию см. в документации инструмента Видео-Мультиплексор.

Инструмент Метаданные в объекты

Щелкните кнопку Метаданные в объекты Метаданные в пространственные объекты, чтобы сохранить метаданные видео как класс пространственных объектов в базе геоданных. Появится диалоговое окно, в котором вы можете указать базу геоданных и частоту захвата в виде интервала видеокадров или секунд. Вы также можете отображать объекты на карте по мере их создания. База геоданных постоянно обновляется во время воспроизведения видео, пока вы снова не щелкните кнопку Метаданные в объекты, чтобы отключить инструмент.

Местоположение датчика относительно земли сохраняется в виде класса точечных объектов с именем видеофайла, к которому добавляется Camera. Центр видеокадра сохраняется как класс точечных объектов с добавлением Center к имени видеофайла. Метаданные контура видеокадра хранятся в виде класса полигональных объектов с добавлением имени видеофайла с расширением Outline.

Инструмент Метаданные в CSV

Щелкните кнопку Метаданные в CSV Метаданные в CSV, чтобы сохранить метаданные видео в файл со значениями, разделенными запятыми (.csv). Появится диалоговое окно, позволяющее сохранить файл .csv в базе геоданных проекта или в отдельной директории. Файл .csv содержит все метаданные MISB, закодированные в видеопоток. Щелкните кнопку еще раз, чтобы остановить запись метаданных видео в файл .csv.

Воспроизведение потока видео в реальном времени

Для проигрывания потокового видео и просмотра только потока метаданных, необходимо иметь адрес видео-потока в форматах User Datagram Protocol (UDP) или Real Time Streaming Protocol (RTSP).

Примечание:

Плеер метаданных Full Motion Video поддерживает адреса Интернет-протокола версии 4 (IPv4), а также UDP и RTSP. Потоки MPEG TS могут транслироваться как одноадресные или многоадресные по UDP и могут включать декодирование видео MPEG-1, MPEG-2, H.264 и H.265, а также анализ метаданных KLV. Воспроизведение RTSP поддерживается для прямых потоков RTSP, использующих любой из следующих видеокодеков: MPEG-1 Video, MPEG-2 Video, H.264 и MJPEG.

HTTP Live Streaming (HLS) поддерживается для загрузки и воспроизведения файлов .m3u8. HLS — это протокол потоковой передачи данных с адаптивной скоростью передачи данных на основе HTTP, используемый в медиаплеерах, веб-браузерах, серверах потокового мультимедиа и мобильных устройствах.

Убедившись, что ваше широкополосное соединение работает, добавьте потоковое видео в реальном времени на отображение карты на вкладке Карта, щелкните ниспадающее меню Добавить данные и щелкните Данные из пути. Появится диалоговое окно Добавить данные из пути, в котором вы можете ввести UDP или RTSP-адрес видеопотока и щелкнуть Добавить. Видео прямой трансляции загружается в плеер метаданных и начинает воспроизводиться. Найдите название видео на панели Содержание, щелкните правой кнопкой мыши и выберите Плеер метаданных.

Плеер метаданных

Инструмент Буфер воспроизведения

Элементы управления видеоплеера включены в режиме Буфер воспроизведения, доступ к которому осуществляется либо из плеера метаданных, либо из группы Прямая трансляция на контекстной вкладке Плеер. Все инструменты плеера метаданных включены и работают так же, как и с архивным видеофайлом.

Щелкните кнопку Воспроизведение из буфера, чтобы включить или отключить режим воспроизведения. Видео в прямом эфире хранится во временном файле, или вы можете указать место хранения для сохранения видео в прямом эфире на панели Настройка рабочего пространства Full Motion Video.

Клавиши быстрого доступа для Full Motion Video

Клавиши быстрого доступа позволяют эффективно работать с видеоданными. Клавиши быстрого доступа выполняют операции с активным видеоплеером. Эти операции ведут себя так же, как и соответствующие инструменты на панели инструментов видеоплеера. Если открыто несколько плееров метаданных, активный плеер управляется с помощью клавиш быстрого доступа.

Сочетание клавишДействиеКомментарий
Shift+E

Сохранение видеокадров в виде изображений в каталоге или в базе геоданных проекта.

Это аналогично инструменту видеоплеера Экспорт кадров Export Frames.

P

Экспорт текущего видеокадра и карты в презентацию PowerPoint.

Это аналогично инструменту видеоплеера Экспорт в PowerPoint Export To PowerPoint.

Примечание:

Система может ответить не сразу. Двойной щелчок индикатора выполнения или двойное нажатие сочетания клавиш может привести к неожиданным результатам.

Alt+Z

Приблизить к фрейму.

Приблизить к местоположению видеокадра на карте. Вид внутри отображения карты включает в себя видеокадр, а также наземную дорожку платформы визуализации.

Это аналогично инструменту видеоплеера Приблизить к кадру Zoom To Frame.

F

Включить или отключить автоматическое следование.

Постоянное центрирование отображения карты на видеокадре и наземной дорожке датчика во время воспроизведения. Отображение карты перемещается по мере того, как видео достигает края дисплея.

Это аналогично инструменту видеоплеера Автоматическое следование Automatic Following.

N

Отображение стрелки, указывающей на север, на видео активной панели видео.

Аналогично инструменту видеоплеера Стрелка севера North Arrow.

D

Отображение объектов с карты на панели видео.

Аналогично инструменту видеоплеера Отображать объекты Display Features.

I

Применение преобразования цвета инвертированного пиксела на активной панели видео.

Аналогично инструменту видеоплеера Инвертировать цвет Invert Color.

Z

Приблизить к видео.

Приблизиться к местоположению видео на карте. Вид внутри отображения карты включает в себя видеокадр, а также наземную дорожку платформы визуализации.

Аналогично инструменту видеоплеера Приблизить к видео Zoom To Video.

V

Отобразить VMTI.

Отобразить графику VMTI в видео и на карте.

Это аналогично инструменту видеоплеера Отобразить VMTI Display VMTI Graphics.

Shift +M

Сохранение метаданных в объекты.

Сохранить метаданные платформы, центра кадра и контура кадра в качестве класса объектов в базу геоданных проекта, если вы не измените их конфигурацию в параметрах Настроить рабочую область.

Это аналогично инструменту видеоплеера Метаданные в пространственные объекты Metadata To Features.

Shift+Ctrl+M

Сохранить метаданные в файл .csv.

Сохранить метаданные платформы, центра кадра и контура кадра в файле значений, разделенных запятыми (.csv).

Это аналогично инструменту видеоплеера Метаданные в CSV Metadata To CSV.

Shift +V

Сохранить VMTI в пространственные объекты.

Сохранить данные центральной точки VMTI в базу геоданных.

Это аналогично инструменту видеоплеера VMTI в пространственные объекты VMTI To Features.

R

Запись видео

В интерактивном режиме записывает сегмент видео в файл на диске.

Аналогично инструменту видеоплеера Запись видео Record Video.

S

Экспортировать сегмент

Экспортировать сегмент архивного видео. Задать начальное и конечное время при помощи маркеров на шкале времени.

Аналогично инструменту видеоплеера Экспорт сегмента Export Segment.

E

Экспорт кадра

Сохранить текущий видеокадр как изображение.

Аналогично инструменту видеоплеера Экспорт кадра Export Frame.

Примечание:

Система может ответить не сразу. Двойной щелчок индикатора выполнения или двойное нажатие сочетания клавиш может привести к неожиданным результатам.

C

Чип кадра

Извлечь фрагмент изображения из видеокадра и вставить его в любое приложение, поддерживающее стандартные операции с буфером обмена.

Аналогично инструменту видеоплеера Чип кадра Chip Frame.

Примечание:

Система может ответить не сразу. Двойной щелчок индикатора выполнения или двойное нажатие сочетания клавиш может привести к неожиданным результатам.

Ctrl+Space

Буфер воспроизведения.

Буферизация воспроизведения активирует полное управление воспроизведением.

Это аналогично инструменту видеоплеера Буфер воспроизведения Buffer Playback.

М

Отобразить метаданные

Отобразить встроенные метаданные.

Аналогично инструменту видеоплеера Отображать метаданные Display Metadata.

B

Создайте закладку.

Закладки хранятся с картой или сценой и с видео, в котором они были получены, и могут использоваться в любом другом открытом виде и плеере.

Аналогично инструменту видеоплеера Создать закладку Create Bookmark.

A

Отобразить аннотации

Создать и отобразить аннотации любой точки, полилинии и полигона на видео.

Аналогично инструменту видеоплеера Отображать аннотации Display Annotations.

W

Исключить рамку окна.

Обнаружение и исправление границы вокруг поля зрения видео.

Аналогично инструменту видеоплеера Исключить рамку окна Exclude Windowbox.

Shift+S

Записать сегменты.

Записать прямую трансляцию по сегментам.

Аналогично инструменту видеоплеера Записать сегменты Record Segments.

Ctrl+C

Копировать кадр в буфер обмена.

Скопируйте клип изображения из видеокадра в буфер обмена.

Примечание:

Система может ответить не сразу. Двойной щелчок индикатора выполнения или двойное нажатие сочетания клавиш может привести к неожиданным результатам.

Ctrl+Alt+C

Навигация по видео.

Активируйте инструмент Исследовать Инструмент исследовать и используйте кнопки мыши для перемещения, масштабирования и непрерывного масштабирования.

.

Клавиша быстрого доступа для видео

Связанные разделы