Сказ о IP камерах со звуком и трансляцией MPEG-DASH

Всё началось с того что нам было необходимо вывести поток видео на сайт со звуком, использовался софт Wowza и выбор пал на камеру Tanos TSi-De25FPA так как она была в наличии и в нашем городе так же у данной камеры есть вход для микрофона с питанием (12v)

Так как я до этого не связывался с камерами Tanos их не разу не заводил на Wowza тут начались проблемы

 Давайте посмотрим на характеристики камеры Tanos TSi-De25FPA

Смотрим доступные кодеки:

Как видно доступны только G.711A и G.711U (ALAW ULAW) как оказалось что для MPEG-DASH необходим кодек AAC, но этого пока мы не знаем

Проблемы с этой камерой начались ровно с заведения ей на Wowza:

WARN server comment - Failed to find an appropriate depacketizer for this track (vnd.onvif.metadata)
WARN server comment - Failed to find an appropriate depacketizer for this track (H264)
WARN server comment - Failed to find an appropriate depacketizer for this track (PCMU)

А так же если H265  и PCMA точно такие же ошибки

Чтобы избежать данные ошибки нужно выставить в настройках стрима:

После этого данная камера хоть как то начинает работать, а именно только видео

Следующим шагом логично было взять и включить транскодинг

 Создаем профиль Audio only transcode из профиля Transcode (Default) оставляя только source с такими параметрами:

Включаем в live или создаем отдельное:

И включем камеру в данный Application и казалось бы всё смотрим streamname.stream_source, но...... нет

Во первых через 5 минут начинается расхождение по звуку и через какое-то время начинаются

INFO server comment - MPEGDashWriterHandler.indexStream[live_audio/_definst_/streamname.stream_source][a/v]: audio segment gap/overlap of 1024 (scaled) detected between segments *Номер* and *Номер*

Когда начинаются подобные строки помимо того что нарастояющие отставание звука ещё появляются переодические отвалы/статоры раз 10-30 сек

Я даже попробовал Flussonic 19.12 но там транскодирование просто не работало, я связался с разработчиками надеюсь совместными усилиями мы поправим, транскодинг собственно там я так понял через ffmpeg

Далее один путь транскодировать через другую программу и выводить в wowza:

Через VLC не получилось никак, стрим отваливался каждые 3 секунды, как я не пытался не получалось, далее мой взгляд упал на FFMPEG:

Методом проб получилась такая строка:

ffmpeg -y -nostdin -nostats -i 'rtsp://admin:pass@IPCAM/mode=real&idc=1&ids=1' -preset:v ultrafast -vcodec copy -f rtsp rtsp://userForPub:pass@127.0.0.1:1935/live/streamname.stream

userForPub:pass заводится тут:

Но помимо ошибок:

[rtsp @ 0x201eca0] Non-monotonous DTS in output stream 0:0; previous: 30000, current: 0; changing to 30001. This may result in incorrect timestamps in the output file.

Отставание звука через 5-10 минут так и осталось

После нескольких часов гугления получился рабочий вариант:

ffmpeg -y -nostdin -nostats -rtsp_transport tcp -use_wallclock_as_timestamps 1 -i 'rtsp://admin:pass@IPCAM/mode=real&idc=1&ids=1' -preset:v ultrafast -vcodec copy -async 1 -f rtsp rtsp://userForPub:pass@127.0.0.1:1935/live/streamname.stream

После этого просто закинул в CRON раз в минуту

if ! [[ $(ps ax | grep streamname) =~ "userForPub" ]] ; then ffmpeg -y -nostdin -nostats -rtsp_transport tcp -use_wallclock_as_timestamps 1 -i 'rtsp://admin:pass@IPCAM/mode=real&idc=1&ids=1' -preset:v ultrafast -vcodec copy -async 1 -f rtsp rtsp://userForPub:pass@127.0.0.1:1935/live/streamname.stream > /dev/null  2>&1& fi

Расхождение звука и отвалы стрима прекратились, ура!!!

Но это костыль который всё таки работает через староннее ПО хотелось бы обойтись ровно транскодингом самой Wowza:

 Тут к нам приехали старые добрые камеры Hikvision:

 DS-2CD2722FWD-IS

Доступные кодеки:

Это G.711 ulaw, G.711 alaw, G.722.1, MP2L2, G726

На этой камере нет встроенного микрофона но есть провода чтобы его подключить, есть возможность подключить два источника входящих MicIn или LineIn, одновременно 2 использовать нельзя,нет питания под активный микрофон

На кодеках G.711 ulaw, G.711 alaw каких либо расхождений по звуку или ошибок не обнаружено Wowza без проблем перекодирует звук в AAC и выплёвывает на MPEG-DASH

 G.711 - Mono, 8kHz, 64 Кб/с

G.722.1 - wowza отпеределяет как AAC, без транскодинга и с ним плеер DASH звук не воспроизводит

MP2L2 - Mono, 16kHz, 128 Кб/с - wowza определила как MP3 переделала в AAC и звук естественно номного качественнее чем G711

G726 - так же как и G.722.1

DS-2CD2723G0-IZS

Кодеки такие же добавлен только PCM

PCM Mono, от 8kHz до 48kHz - wowza отпределяет как AAC, пробовал все 8kHz до 48kHz с транскодингом и без соответсвенно не работает

Отличается так же и MP2L2 от 16kHz до 48kHz и 32 Кб/с до 160 Кб/с - транскодинг работает звук хороший

 Встроенного микрофона нет , питания для активного микрофона нет, радует наличие подключения Входящего/Исходящего звука по джеку 3.5

DS-2CD2643G0-IZS

По звуку всё идентично DS-2CD2723G0-IZS

DS-2CD2543G0-IS

На данной камере самый большой набор кодеков:

Как видно добавился MP3 от 8kHz до 48kHz и 32 Кб/с до 320 Кб/с, есть встроенный микрофон, но он имеет не очень большую чувствительность

MP3 - wowza без проблем транскодит в AAC звук просто шикарный, колодка звука работает

DS-2CD2542FWD-IS

У данной камеры есть хороший встроенный микрофон, чувствительность высокая и только одна колодка для исходящего звука

 Набор кодеков такой же как у  DS-2CD2722FWD-IS

DS-2CD2122FWD-IS

Встроенного микрофона нет, есть 2 колодки под входящий и исходящий звук набор кодеков как у DS-2CD2722FWD-IS

Update 1

Dahua IPC-HDW4433C-A

Встроенного микрофона нет,кодеки G.711a, G.711u, G.726, AAC и очудо, он таки работает без всяких перекодировок в MPEG-DASH

На данный момент это все камеры которые побывали на тесте и могут выдавать звук, по мере того как другие модели будут попадать в руки буду дополнять пост

Пока лидер по качеству звука это естественно DS-2CD2543G0-IS за счет наличия как встроенного микрофона так и возможности подключения внешнего, плюсом MP3 кодек на 320kbps и частотой 48kHz

Печально что камеры с чистым AAC пока не увидел, но буду надеятся что всё таки она будет и использовать транскодинг звука вообще не придётся

При появлении Dahua IPC-HDW4433C-A, если вам не нужен внешний микрофон и нужно вывод на сайт эта связка а именно Wowza + IPC-HDW4433C-A + mpeg-dash лучший,доступный по деньгам вариант

• Вперед