Сказ о IP камерах со звуком и трансляцией MPEG-DASH

Категория: Блог Опубликовано: 16.12.2019

Всё началось с того что нам было необходимо вывести поток видео на сайт со звуком, использовался софт Wowza и выбор пал на камеру Tanos TSi-De25FPA так как она была в наличии и в нашем городе так же у данной камеры есть вход для микрофона с питанием (12v)

Так как я до этого не связывался с камерами Tanos их не разу не заводил на Wowza тут начались проблемы

Давайте посмотрим на характеристики камеры Tanos TSi-De25FPA

Характиристики Tanos TSi-De25FPA

Параметры видео
Сенсор	1/2.8 SONY STARVIS IMX307 сенсор, 0.01 Люкс (день) / 0.001 Люкс (ночь) / 0 Люкс (с ИК подсветкой), механический ИК-фильтр, адаптивная ИК подсветка до 30 м
Затвор	От 1/3 с до 1/10000 с
Объектив	f=2.8 мм, угол обзора по горизонтали 101, F=2.0
Разрешение	1920х1080
Скорость передачи данных	От 64 до 6144 кбит/с
Управление потоком	Переменный битрейт (VBR) или постоянный битрейт (CBR)
Кодирование	Кодирование H.265/H.264
Видеопотоки	1. H.264/H.265 1920x1080x30, 1280x960, 1280x720 (от 1 до 30 к/с)
	2. H.264/H.265 704x576x30, 352x288x30 (от 1 до 30 к/с)
Настройки	Яркость, Насыщенность, Цветность, Контрастность, Четкость, Затвор (авто и ручной), BLC, Подавление мерцаний, WDR, DWDR, Баланс белого (авто и ручной), Антитуман, ROI, DNR
Тревожные события	Детектор движения, саботажа
Видеоаналитика	Пересечение линии, вторжение, вход в область, выход из области, детектор скорости, детектор лиц
Наложение водяного знака	До 128х128 24 бит bmp
Регулировка угла установки	"Поворот: 0 ° - 355 °
Параметры аудио
Вход	Линейный вход. При питании камеры по PoE на разъеме питания 12В присутствует напряжение 12В 100мА для питания микрофона.
Выход	Линейный выход
Сеть и интерфейсы
Сетевой интерфейс	10Base-T/100Base-TX Ethernet порт
Сетевые протоколы	IPV4, IPV6, ARP, TCP, UDP, ICMP, DHCP, NTP, DNS, DDNS, SMTP, HTTP, UPnP, NTP, RTSP, Bonjour, Multicast, HTTPS
Запись	E-mail по событиям
Соединение	DHCP, статический адрес, облачный сервис http://vms.tantos.pro
Безопасность	Многоуровневый доступ пользователей с защитой паролем и настройкой прав доступа, черный и белый списки
Пользователи	Не более 10 одновременных пользователей
ONVIF	2.6
Эксплуатация
Питание	9…12 В ±5%, PoE 802.3af
Потребляемая мощность	Не более 8 Вт
Габариты	122х90 мм
Рабочий диапазон температур	от -40 до +60°С
Относительная влажность	от 10 до 90% (без конденсата)
Системные требования	Microsoft Windows 7/Windows 8.1/Windows 10
	Microsoft Internet Explorer 10.x или старше
Веб интерфейс	Русский и английский
Комплект поставки	- IP-камера с объективом
	- Инструкция
	- Крепежный комплект
	- Упаковочная тара
Примечание	Комплект поставки и любые технические характеристики могут быть изменены производителем в любое время без предварительного уведомления.

Смотрим доступные кодеки:

Как видно доступны только G.711A и G.711U (ALAW ULAW) как оказалось что для MPEG-DASH необходим кодек AAC, но этого пока мы не знаем

Проблемы с этой камерой начались ровно с заведения ей на Wowza:

WARN server comment - Failed to find an appropriate depacketizer for this track (vnd.onvif.metadata)
WARN server comment - Failed to find an appropriate depacketizer for this track (H264)
WARN server comment - Failed to find an appropriate depacketizer for this track (PCMU)

А так же если H265 и PCMA точно такие же ошибки

Чтобы избежать данные ошибки нужно выставить в настройках стрима:

После этого данная камера хоть как то начинает работать, а именно только видео

Следующим шагом логично было взять и включить транскодинг

Создаем профиль Audio only transcode из профиля Transcode (Default) оставляя только source с такими параметрами:

Включаем в live или создаем отдельное:

И включем камеру в данный Application и казалось бы всё смотрим streamname.stream_source, но...... нет

Во первых через 5 минут начинается расхождение по звуку и через какое-то время начинаются

INFO server comment - MPEGDashWriterHandler.indexStream[live_audio/_definst_/streamname.stream_source][a/v]: audio segment gap/overlap of 1024 (scaled) detected between segments *Номер* and *Номер*

Когда начинаются подобные строки помимо того что нарастояющие отставание звука ещё появляются переодические отвалы/статоры раз 10-30 сек

Я даже попробовал Flussonic 19.12 но там транскодирование просто не работало, я связался с разработчиками надеюсь совместными усилиями мы поправим, транскодинг собственно там я так понял через ffmpeg

Далее один путь транскодировать через другую программу и выводить в wowza:

Через VLC не получилось никак, стрим отваливался каждые 3 секунды, как я не пытался не получалось, далее мой взгляд упал на FFMPEG:

Методом проб получилась такая строка:

ffmpeg -y -nostdin -nostats -i 'rtsp://admin:pass@IPCAM/mode=real&idc=1&ids=1' -preset:v ultrafast -vcodec copy -f rtsp rtsp://userForPub:pass@127.0.0.1:1935/live/streamname.stream

userForPub:pass заводится тут:

Но помимо ошибок:

[rtsp @ 0x201eca0] Non-monotonous DTS in output stream 0:0; previous: 30000, current: 0; changing to 30001. This may result in incorrect timestamps in the output file.

Отставание звука через 5-10 минут так и осталось

После нескольких часов гугления получился рабочий вариант:

ffmpeg -y -nostdin -nostats -rtsp_transport tcp -use_wallclock_as_timestamps 1 -i 'rtsp://admin:pass@IPCAM/mode=real&idc=1&ids=1' -preset:v ultrafast -vcodec copy -async 1 -f rtsp rtsp://userForPub:pass@127.0.0.1:1935/live/streamname.stream

После этого просто закинул в CRON раз в минуту

if ! [[ $(ps ax | grep streamname) =~ "userForPub" ]] ; then ffmpeg -y -nostdin -nostats -rtsp_transport tcp -use_wallclock_as_timestamps 1 -i 'rtsp://admin:pass@IPCAM/mode=real&idc=1&ids=1' -preset:v ultrafast -vcodec copy -async 1 -f rtsp rtsp://userForPub:pass@127.0.0.1:1935/live/streamname.stream > /dev/null 2>&1& fi

Расхождение звука и отвалы стрима прекратились, ура!!!

Но это костыль который всё таки работает через староннее ПО хотелось бы обойтись ровно транскодингом самой Wowza:

Тут к нам приехали старые добрые камеры Hikvision:

DS-2CD2722FWD-IS

Характиристики DS-2CD2722FWD-IS

Камера

Матрица	1/2.8’’ Progressive Scan CMOS
Чувствительность	0.01лк@(F1.2,AGC вкл.), 0.014лк@(F1.4,AGC вкл.), 0лк с ИК
Скорость электронного затвора	1/3с ~ 1/10000с
Объектив	2.8 - 12мм@F1.4, вариобъектив
Крепление объектива	Ф14
Угол обзора объектива	106° - 35°
Регулировка диафрагмы	АРД
Режим «День/ночь»	Механический ИК-фильтр с автопереключением
Регулировка угла установки	Поворот: 0 ° - 355 °; наклон: 0 ° - 75 °; вращение: 0 ° - 355 °

Сжатие

Видеосжатие	Н.264/MJPEG/H.264+
Профиль H.264	Main Profile
Битрейт видео	32 кб/с– 16 Мб/с
Аудиосжатие	G.711/G.722.1/G.726/MP2L2
Битрейт аудио	64кб/с(G.711) / 16кб/с(G.722.1) / 16кб/с(G.726) / 32-128кб/с(MP2L2)

Изображение

Максимальное разрешение	1920х1080
Основной поток	1920×1080@25к/с
Дополнительный поток	640×360@25к/с
Настройки изображения	Насыщенность, яркость, контраст, резкость, режим коридора , зеркалирование и маска приватности настраиваются через клиентское ПО или веб-браузер
Улучшение изображения	120дБ WDR, 3D DNR, BLC, ROI
Переключение «День/ночь»	Авто/ по расписанию/ по тревоге

Smart видеоаналитика

Детекция движения	Обнаружение пересечения линии, вторжения в область

Сеть

Сетевое хранение	NAS (Поддержка NFS,SMB/CIFS), ANR
Протоколы	TCP/IP, UDP, ICMP, HTTP, HTTPS, FTP, DHCP, DNS, DDNS, RTP, RTSP, RTCP, PPPoE, NTP, UPnP, SMTP, SNMP, IGMP, 802.1X, QoS, IPv6, Bonjour
Безопасность	Аутентификация пользователя, водяные знаки, фильтрация IP-адресов, анонимный доступ
Совместимость	ONVIF(PROFILE S,PROFILE G), PSIA, CGI, ISAPI
Срабатывание тревоги	Smart-функции, разрыв сети, конфликт IP-адресов, ошибки хранилища
Действия по тревоге	Запись на microSD/SDHC карту, активация реле, уведомление клиента, отправка email, загрузка на FTP, активация канала записи

Интерфейсы

Сетевой интерфейс	1 RJ45 10M/100M Ethernet
Аудиовход	1 вход
Аудиовыход	1 выход
Фильтрация шумов окружающей среды	Поддерживается
Частота дискретизации	16кГц
Тревожные интерфейсы	1 вход/ 1 выход
CVBS видеовыход	Есть
Локальное хранилище	Слот для microSD/SDHC/SDXC до 128Гб
Кнопка сброса настроек	Есть

Основное

Питание	DC12В ± 25%/PoE(802.3af)
Потребляемая мощность	5.5Вт макс.
Рабочие условия	-40 °C…+60 °C, влажность 95% или меньше (без конденсата)
Защита	IP67, IK10
Дальность действия ИК-подсветки	До 30м
Материал корпуса	Металл
Размеры	Ø140 × 99.9мм
Вес	1кг

Доступные кодеки:

Это G.711 ulaw, G.711 alaw, G.722.1, MP2L2, G726

На этой камере нет встроенного микрофона но есть провода чтобы его подключить, есть возможность подключить два источника входящих MicIn или LineIn, одновременно 2 использовать нельзя,нет питания под активный микрофон

На кодеках G.711 ulaw, G.711 alaw каких либо расхождений по звуку или ошибок не обнаружено Wowza без проблем перекодирует звук в AAC и выплёвывает на MPEG-DASH

G.711 - Mono, 8kHz, 64 Кб/с

G.722.1 - wowza отпеределяет как AAC, без транскодинга и с ним плеер DASH звук не воспроизводит

MP2L2 - Mono, 16kHz, 128 Кб/с - wowza определила как MP3 переделала в AAC и звук естественно номного качественнее чем G711

G726 - так же как и G.722.1

DS-2CD2723G0-IZS