Как лучше всего смотреть потоковое видео и аудио?

Question

Я уже знаю, как транслировать видео с моего iphone на мой сервер какао.это просто, потому что видео приходят в разных кадрах, и я могу передать их 1 на 1.

1- Но как работает потоковое аудио, как я могу отделить данные, считываемые с микрофона, не прерывая их?

2- Как я могу убедиться, что аудио соответствует видео, и сохранить время между ними?

Это не дубликат, есть вопросы с одинаковым названием, но деталиотличается.

Answer 1

Звук возвращается из ОС в виде блоков данных буфера некоторой длины (длительность которых частично настраивается), которые вы можете передавать 1 на 1, как видео.Вы можете поставить в очередь и перепланировать блоки по мере необходимости.Если вы прикрепите заголовок к каждому блоку аудиопередачи, вы можете пометить аудиоданные отметкой времени и / или современным идентификатором захвата видеокадра.