Глава 7 СИНХРОНИЗАЦИЯ ЗВУКА И ИЗОБРАЖЕНИЯ

Сессия мультимедиа состоит из нескольких потоков, каждый из которых передается в отдельной сессии RTP. Так как задержки, связанные с форматами кодирования, существенно различаются, то в разных потоках будет разное время проигрывания, как показано на рис. 7.1.

Обычно синхронизация применяется для выравнивания потоков звука и изображения, но данная технология может применяться для любых типов потоков.

Часто разделение звука и изображения на отдельные потоки дик- туют предпочтения участников сессии. Некоторые в видеоконференциях предпочитают получать только звук. Это особенно важно для конференций с большим количеством участников.

7.1. Поведение отправителя

Отправитель помогает в процессе синхронизации потоков мульти- медиа путем запуска общих часов и периодического уведомления через пакеты RTCP о рассогласовании общего и потокового времени. Общие часы идут с постоянной скоростью, а получателю дается информация, помогающая выравнивать скорости в потоках, как показано на рис. 7.2. Соответствие между общим временем и потоковым определяется в момент формирования пакета RTCP. Общее время Treference отражается в метке времени пакета RTP:

Отсюда получаем смещение часов: