将自定义元数据（边界框）嵌入到 HLS 视频流中

Question

我想将边界框、标签等嵌入到实时视频流中，然后可以选择在网络浏览器的客户端上绘制它们，并寻找一种方法。

您能否给我一个提示，如何“动态”插入元数据以及可能使用哪个播放器？

Answer 1

有多种方法可以使用 GStreamer 将元数据编码到视频流中

1. 使用SEI h264段
2. 使用 mpegts
3. 在AV1视频中使用OBU

您还需要一种对边界框进行编码的方法，为此，MISB 标准 0903 可以帮助您实现这一目标。

我鼓励您阅读更多有关我们针对流中元数据的产品的信息：

https://www.ridgerun.com/post/sei-or-in-band-which-metadata-solution-do-i-need

https://www.ridgerun.com/post/introducing-gstobumetadata-enhancing-av1-encoded-video-metadata-management

https://www.ridgerun.com/post/libmisb-a-straightforward-solution-for-handling-misb-company-metadata-in-video