H na aula de hoje vamos falar todos sobre estes pontos todos estão aqui até neste ponto quatro até sobre o RTP e o rtcp espero ter tempo para fazer isso eu sei que é um bocadinho ambicioso vão ser alguns slides mas também os slides desta desta parte do programa estão não tão tão densos como a restante parte da matéria e por isso eu acho que será será fazível e depois para a próxima aula talvez um bocadinho menos slides eh Iremos falar sobre o cip iremos também então falar sobre Digamos que mecanismos existem na na internet
para Grande termos digamos operação para além do best effort que nós que nós temos atualmente então por isso vamos tentar começar em primeiro lugar por descrever digamos eh Que tipo de aplicações Multimédia que temos e depois vamos ver alguns exemplos de como é que elas funcionam etc mas basicamente eh reparem nós temos três tipos de de aplicação Pelo menos aqui no domínio que nos interessa para as redes temos o streaming de Multimédia que esteja armazenado o streaming de áudio e vídeo em live digamos em direto e depois temos estas duas primeiras são um bocadinho semelhantes
no tipo de exigências que têm mas depois temos uma outra aplicação que é particularmente exigente para redes Digamos que é talvez o tipo de aplicação mais exigente para uma rede de comunicação que serão as aplicações de Áudio ou vídeo em que se requir interatividade em tempo real Ok e características é que tem estas aplicações são aplicações que geralmente são e sensíveis ao tempo ao digamos ao atraso não só medido em termos absolutos extremo a extremo o tempo de atrao Total mas também a variação desse tempo de atraso por isso quando nós falamos aqui digamos sensíveis
ao atraso temos que considerar estas duas métricas Ok o Tempo de atraso Total extremo a Extremo e a variação desse tempo de atraso porque estes dois aspectos são igualmente maus digamos para para as aplicações Multimédia mas no entanto eh estas aplicações Multimédia são tolerantes a algumas perdas pontuais que de dados que possam ocorrer ou seja aquelas perdas infrequentes eh Desde que não sejam digamos digamos muito significativas podem provocar alguma pequena digamos perturbação na Reprodução da digamos com qualidade do conteúdo Multimédia mas geralmente não bloqueiam o funcionamento na sua totalidade da da aplicação Ok e geralmente
reparem Isto é um bocado tá na antítese daquelas aplicações de transferência de dados um Ficher comprimido um executável etc em que tá em um Bito errado e e não consigo fazer nada com com com o documento Ok por isso reparem que digamos estas tipo de aplicações são mesmo muito digamos Diferentes não é eh só queria aqui enfatizar que a nível do tempo de atraso na verdade nós temos duas métricas temos que considerar nós é o tempo de atraso é também a variação desse tempo de atraso e essa variação nós chamamos de giter na na literatura
inglesa Ok por isso vamos ver então e cada um destes tipos da aplicações e geralmente e vamos ver digamos O que é que o que é que significam e o que é que exigem não é eh basicamente no streaming de Multimédia Armazenado nós temos geralmente um Multimédia que está armazenado numa fonte não é e e vai ser transmitido para o cliente e o que é que é isto de digamos de streaming basicamente o streaming é uma coisa muito simples de perceber é o cliente iniciar a reprodução do conteúdo antes de o conteúdo quer ter sido
transmitido na sua totalidade digamos não não sei se vocês estão aqui a ver é basicamente quase como um voto de fé não é eu começo A reproduzir o conteúd inho e nem tenho a certeza se ele vai chegar todo para mim não é mas digamos temos na verdade esse limitação temporal que é os conteúdos que ainda não foram transmitidos efetivamente vão ter que acabar por ser digamos chegar a tempo de serem reproduzidos não é por isso eu estou a acreditar que isso acontece quando eu inicio o streaming não é eh E então Basic vendo isto
numa numa figura que eu já irei voltar a ela várias vezes Não é eh basicamente nós numa dada altura vamos ter um dado conteúdo de vídeo que gravamos e colocamos num servidor e depois o vídeo há de ser enviado digamos pela rede Claro que ele não chega instantaneamente ao destinatário há aqui muitos atrasos podem ocorrer não só o atraso na rede mas também no próprio processamento do conteúdo quer na na descodificação quer digamos desencapsulamento do pacote no receptor etc etc eh ele há de chegar Digamos ao cliente com determinado atraso e então depois digamos vamos
ter que reproduzir esse conteúdo passado desse tempo de atraso então no cliente e reparem num determinado e num determinado instante eh eu vou ter conteúdo que está a ser reproduzido aqui neste instante mas este conteúdo Foi recebido há não sei quantos segundos atrás não é e entretanto todo este conteúdo que vai aqui nas ordenadas entre este ponto e este é todo ele Conteúdo que eu já recebi e que vou reproduzir mais tarde mas reparem que ainda há conteúdo a ser recebido no futuro não é pronto basicamente é isso que acontece no streaming ora eh Que
tipo de funcionalidade é que eu pretendo nestas aplicações basicamente uma funcionalidade do tipo digamos comando remoto num leitor de de DVDs por exemplo em que um cliente tem funções para fazer pausa rewind F forward ter uma barra para deslizar para localizar isto no Digamos num dado instante de tempo no na reprodução do vídeo etc eh e geralmente aqui h pela experiência dos utilizadores eles geralmente são são mais tolerantes a um tempo de atraso Inicial digamos com um valor significativo como 10 segundos não é eh geralmente isso é aceitável no entanto uma vez iniciada a reprodução
de conteúdo Geralmente os utilizadores são menos os tolerantes atrasos na reação aos comandos que eles fazem Ok E aí a Tolerância baixa para um décimo digamos daquilo que que nós temos no no instante inicial geralmente o que se faz aqui é utiliza-se um protocolo que é o rtsp mas existem outras possibilidades para poder controlar então a forma como esse conteúdo vai ser reproduzido Ok pronto e este é basicamente o digamos de uma forma resumida o streaming de áudio e ou vídeo armazenado não é eh de uma forma interativa ser controlado naturalmente nos digamos no streaming
de eh Multimédia Live digamos por assim dizer e há muitos exemplos disso não é o um tolão da Rádio um evento Desportivo ou até digamos quase que aqui as nossas aulas que tão tão a ser transmitidas por Zoom não é estamos aqui precisamente de um evento Live digamos está a ser transmitido eh naturalmente que aqui as funcionalidades que nós esperamos no na na nas aplicações Os clientes são semelhantes o rewind paus etc tudo isso é possível naturalmente o fast forward Digamos não é possível nós não podemos andar para a frente no tempo ainda eh mas
tirando tudo isso digamos todo o resto é possível também temos aqui o buffering no lado do cliente para digamos eh conseguir disfarçar um bocado aquelas variações de temp atraso que falamos e já vamos depois abordar Isto também mais à frente H eh e tudo isto faz com que quê com que por vezes o conteúdo seja reproduzido mesmo assim por vezes algumas dezenas de segundos Depois de ele ser transmitido Ok ou seja hí um tempo de atraso por vezes significativo e nós apercebermos disso eh por exemplo na até quando estamos a ver televisão em direto nas
nossas boxes em nossas casas por exemplo se estamos a ver um relato de futebol em quatro capa digamos com uma boa definição digamos na nossa na nossa Box isso Geralmente só se consegue transmitindo o sinal através da rede IP não não é e geralmente com um tempo de atraso muito significativo para Precisamente acomodar todas essas codificações des codificações e e digamos atrasos que possam existir na rede eh para serem disfarçados digamos no cliente e Então faz com que por exemplo se nós tivermos um vizinho no andar de baixo eh a ouvir o relato pelo pela
rádio não é ele é capaz de ouvir um golo para aí uns e digamos por vezes 30 segundos Antes de nós ele grita golo e a gente nem sabe de que equipa foi não é e temos esperar mais algum tempo digamos Até vermos isso acontecer naquilo que nos está a ser mostrado na na na televisão não sei se vocês já passaram por essa experiência eu já passei não é mas e a razão precisamente por trás disso é da necessidade de eu ter este buffer no cliente para acomodar essas imperfeições da rede não é e nós
vamos até discutir um pouco mais à frente como é que ele pode ser calculado como é que pode ser ajustado Ok mas geralmente para este tipo de digamos de conteúdos de Streaming não não só Live mas também fundamentalmente Live porque digamos são os mais exigentes Nesta parte do streaming H nós temos que ter uma infraestrutura e aqui neste quadro temos uma infraestrutura que é apesar de est indicado o Mia foundation que é da Microsoft não é como sabem os componentes para poder fazer digamos a reprodução de conteúdos Multimédia nos sistemas operativos da Microsoft apesar disso
nós temos aqui uma arquitetura que É absolutamente genérica digamos na digamos na para a reprodução de de conteúdos Multimédia em direto eh e basicamente nós conseguimos separar aqui para o lado esquerdo desta tracejada Azul aquilo que está dentro podemos dar aqui o exemplo talvez mais prático para vocês perceberem melhor imaginemos que no esé nós queríamos fazer uma conferência e queríamos transmitir a conferência não só para múltiplas pessoas que assistiam dentro do esé mas Também para fora do esé para outras universidades é uma conferência importante por isso e então o que é que podíamos fazer eh
do lado esquerdo temos aqui aquilo que temos necessidade de ter dentro do iscet do lado direito para fora do iscet ok para lado direito desta linha e então basicamente O que é que nós fazíamos iríamos ter por exemplo no Grande Auditório um servidor que fazia a codificação de vídeo ok Possivelmente na regi que tinha que lá está próximo Porque é próximo de onde é gerado o sinal Possivelmente teremos aqui algum computador a monitorizar a forma como essa codificação é feita a aferir a qualidade mas depois reparem o Streaming para todo o xkt nunca pode ir
a partir deste pronto no O Grande Auditório por quê Porque eu não tenho largura de banda a partir de lá suficiente porque eu não tenho as condições de segurança de acesso de múltiplos utilizadores é essa Regi que eu tenho no Grande Auditório Quem diz o Grande Auditório se for por exemplo um evento esportivo pode ser a Regi num estádio de futebol Ok mas digamos o modelo aplica-se de igual forma mas de qualquer maneira estes dados codificados vão ter que ser transmitidos para um servidor de digamos de de distribuição que está no centro de dados de
do isct não é da nossa instituição E assim a partir deste ponto é que é feita toda a distribuição de conteúdos Ou seja eu separei aqui as Duas funções e separei a parte da codificação da parte da distribuição de conteúdos Ok e esta separação é importante porque há requisitos de rede diferentes há requisitos de hardware diferentes para essas duas funções Ok e então agora aqui a partir do centro de dados o que é que eu posso fazer posso distribuir o conteúdo para dentro da rede do isk por multicast muito Possivelmente mas também é possível por
unicast para todos os clientes e aqui Digamos não temos muito utilizadores e a solução até é escalável e depois para o resto da internet podemos fazer a distribuição ou por unicast também pode ser se houverem poucos utilizadores fora e não precisamos desta infraestrutura mas caso nós tínhamos a expectativa de ter milhares de utilizadores fora do isq Possivelmente noutras universidades também então nós que temos que fazer é contratar um serviço de distribuição de conteúdos fora do iskd Ok eh reparem Há Muitos fornecedores deste tipo de serviço não é no caso da do isct Se for para
as Universidades portuguesas nós temos com rcts que é digamos o provedor de rede do isct temos uma infraestrutura em que podemos a partir dos servidores da fccn fazer distribuição com multicast a partir digamos desses servidores E então neste caso conseguimos alcançar qualquer outro cliente que esteja na outra Universidade ou utilizadores por unicast Digamos que estejam fora digamos Dessa desse grupo de digamos de multicast ok que nós nós até referimos na aula passada como é que seria feito Hum e pronto e basicamente é esta arquitetura genérica Digamos que temos que adotar quando queremos fazer este tipo
de de streaming não sei se vocês aqui têm algumas dúvidas relativamente a esta n exemplo que está aqui colocado eh se não tiverem eu vou avançando não é se não possem parar um pouquinho e explicar um pouquinho melhor Ok H por isso não tendo dúvidas Então eu vou avançando e passamos para o terceiro tipo de digamos de aplicação que são as aplicações digamos Multimédia em tempo real interativas não é e estas aplicações e são particularmente exigentes para a rede temos caso por exemplo de chamadas de voz por IP ou chamadas até de vídeo ou até
por exemplo também bastante exigente jogos em que eu tenha que fazer uma distribuição de Mundos virtuais de uma forma interativa OK tudo isto para poder funcionar e esta parte da interatividade é a palavra-chave aqui a basw que nos faz tocar algumas Campinhas de alarma h quando tenho esta questão da interatividade eu estou aqui a falar de tempos de atraso que são muito inferiores a 1 segundo Ok para poder haver a tal interatividade e quando estamos por exemplo a falar do áudio de uma voz chamada de voz por exemplo eu Geralmente ambiciono ter tempos de atrás
abaixo dos 150 milisegundos não é OK é possível trabalhar um pouco acima disso mas já é perce mas quando é muito acima disso O que é que acontece a aplicação Deixa de ser utilizável porque se eu tiver a fazer uma chamada de Skype por exemplo para a Argentina e e eu peço para interromper a pessoa a pessoa não ouve repito uma segunda vez e a pessoa quando eu estou a repetir a segunda vez é que interrompe e Pergunta o que é que foi e a conversa começa a deixar de fazer sentido começam as pessoas a
falar umas por cima das outras e deixa de fazer sentido por isso é muito necessário ter digamos este tempos de atraso curtos para digamos est estas aplicações seram operáveis e isto tem que incluir naturalmente todo digamos o tratamento que eu faço que não só na digamos o tempo de atraso na rede mas todo o tratamento que eu faço por exemplo ao nível de de aplicação a nível De codificação descodificação empacotamento do digamos do dos dados etc etc Ok eh e claro que depois neste tipo de aplicações ao contrário das anteriores eh a questão do digamos
da do arranque da sessão do Bootstrap da é uma questão importante porquê Porque anteriormente na nas Outras aplicações se eu estou a ver um evento digamos uma uma a num aula por exemplo um evento Desportivo na na minha televisão na minha Box ou se Digamos se eu estou a ver um digamos a ver um ouvir uma música por streaming na internet e tudo isso digamos saber onde ir buscar essa informação é é um servidor que está bem referenciado está bem indexado na rede neste caso de aplicações interativas é muito mais peer topeer E então de
certa forma eu vou ter que ter uma infraestrutura também para que eu possa saber onde estão cada uma das pessoas que eu quero contactar Qual é que é o seu endereço IP o porto e para Depois até digamos porque já digamos temos aqui uma um ambiente muito mais heterogéneo saber então também depois negociar Qual é que é o algoritmo de codificação ou descodificação a ser usado digamos pelos pares na conversação e então daí a necessidade de temos que ter protocolos específicos para eh o início para o arranque da da sessão Ok por isso são basicamente
estas as as exigências que nós temos para estas aplicações para estes três classes de Aplicações que falamos até agora não é e um problema que nós temos é que a internet que nós temos hoje em dia é uma internet de tipo BF Ou seja faz o melhor que pode e com a rede TCP o DP IP não é mas não dá garantias de nada não dá garantias de tempos de atraso mínimo de de fiabilidade mínima eh mas efetivamente as aplicações Multimédia que nós falamos até agora eh requerem Digamos um nível de qualidade de serviço o
nível de performance Para poderem ser Eficazes não é H E então o que é que acontece como a internet de hoje em dia é do tipo best effort na maior parte dos das vezes quando nós temos estas aplicações Multimédia a funcionarem entre pares que tão em Sistemas autónomos diferentes eh estas aplicações acabam por usar técnicas ao nível de aplicação para mitigar digamos da melhor forma possível para disfarçarem da melhor forma possível estes tempos de atraso e estas perdas de pacotes Ok não Quero dizer com isto que digamos seja a única solução sejam técnicas ao nível
de aplicação longe disso Ok por quê Porque efetivamente nós já temos hoje em dia a funcionar dentro do sistemas operador dentro dos sistemas autónomos nas redes de operadores estas duas primeiras filosofias ou seja ter integrated Services ou differentiated Services a primeira delas em que consigo ter mesmo reserva de largura de banda extremo a Extremo não é Ou então por exemplo na Segunda abordagem que eu dou garantias diferenciadas para tipos de tráfego diferente estas duas abordagens já são possíveis mas efetivamente só funcionam dentro de sistemas autónomos Ok dentro do sistema autónomo de um operador de telecomunicações
por exemplo para dar então uma largura de banda mínima para os canais de I PTV que estão a ser distribuídos para as casas dos clientes isso já é possível sem problemas nenhuns ou até por exemplo para fazer a chamada De voz sobre IP digamos nos telefones IPS que nós temos nas Casas dos clientes o problema surge é quando eu quero que dois intervenientes que tão em operadores diferentes em Sistemas autónomos diferentes por isso consigam comunicar com o nível de qualidade de serviço e efetivamente ainda não existe uma resposta eficaz para isso digamos a abordagem até
hoje em dia tem sido um bocado les F ou seja deixar as coisas já andar e e tentar remendar como E Ok se não temos uma boa qualidade então fazemos um upgrade de banda ok foi isso que que me aconteceu por exemplo a mim no início de digamos da pandemia quando eu queria dar as aulas através do zoom a partir de casa a minha largura de banda não era suficiente havia fraca qualidade o que é que eu fiz tive contactar o meu operador e comprar mais largura de banda eh digamos para que eu pudesse comunicar
com qualidade convosco Hum e depois usar um conjunto de Técnicas ao nível da digamos da distribuição de conteúdos não é eh contratando serviços de distribuição de conteúdos quando digamos Quando é o caso eh utilizando técnicas de multicast ao nível de aplicação etc etc usar todo um conjunto de tremendos por assim dizer para sermos eficazes quando os clientes estão em operadores diferentes Ok por isso não sei se até agora digamos vocês têm alguma dúvida relativamente a estas aplicações de Multimédia e às abordagens Que nós temos vindo a seguir até agora naturalmente depois eu mais à frente
vamos aprofundar um pouquinho mais estas duas abordagens vai ser na próxima semana eh o depois vamos andar um bocadinho mais por aqui a perceber como é que que trues que técnicas é que podem ser usadas para que digamos nós teremos o melhor partido possível do bort se não houver dúvidas Então vamos avançando com o programa de hoje e então vamos falar um pouco sobre o streaming de áudio e Vídeo armazenado e de que forma é que pode ser feito e que técnicas existem protocolos para assegurar esse esse streaming eh E então basicamente eh o que
acontece que neste streaming de Multimédia armazenado nós temos um conjunto de técnicas para tirar o melhor partido possível do serviço best effort temos buffering do digamos do do lado do cliente temos buffers não é já vamos falar um pouquinho melhor sobre isso usamos o DP ou ponderamos a utilização Do DP versus TCP há vantagens e desvantagens também vamos discutir isso um pouco e depois também podemos utilizar múltiplos técnicas de codificação em simultâneo até para assegurar uma adequada ção de conteúdos para os nossos clientes Claro que isto tudo tem que ser feito obviamente sem o suporte
da rede por isso vai ser os media player que ou Digamos que estão nos extremos da comunicação a assegurar estas funções fazendo a remoção do Jitter ou seja disfarçando a tal variação do tempo de atraso fazendo a descompressão dos Estados disfarçando os erros ou as perdas de pacotes que possam surgir eh etc etc e tendo um um Digamos um interface um Gu digamos mais ou menos elegante para controlar o conteúdo mas então vamos discutir cada um destes pontos em particular o digamos o buffering o DP versus TCP e a múltiplas técnicas de codificação relativamente a
ao buffering reparem e aprofundando um Bocado mais o o exemplo que nós vimos anteriormente eh efetivamente nós estamos a transmitir a um débito constante não tem que ser mas nós estamos a supor que é o caso eh e há bocado eu eu a figura não era bem precisa àquela que eu vos mostrei porque na verdade o tempo de atraso anteriormente no GR que eu vos mostrei era constante não é mas nós sabemos que efetivamente existe uma variação do tempo de atraso existe um tal gitter não É e então o que acaba por acontecer é o
seguinte eh naturalmente seria muito ambicioso para mim eu mal recebeste este primeiro pacote eu começar imediatamente a reprodução de conteúdos porquê Porque no instante seguinte passado este intervalo de tempo eu iria precisar de reproduzir aqui também este conteúdo e naturalmente o pacote ainda não tinha chegado ele só iria chegar bastante depois ok por isso O que é que acaba por acontecer as aplicações para de alguma Forma terem assegurado que o conteúdo já chegou eh a ao seu lado para ele ser reproduzido então para eles terem isso assegurado então em vez de serem gananciosas e reproduzir
imediatamente o conteúdo vão guardá-lo Durante algum tempo temporariamente eh para digamos dar tempo à aqueles pacotes que possam estar mais atrasados chegarem a tempo de ser reproduzidos e então eu vou fazer de propósito não é não é um erro não é não há uma falha estou a fazer mesmo de Propósito atrasar pacotes para serem reproduzidos Ok isto não é um tiro nos pés é uma é um mal necessário por assim dizer para poder assegurar que depois pacotes mais atrasados possam chegar a tempo OK e então a toda esta digamos diferença na vertical que vemos aqui
ou Esta área por assim dizer vai ser o nosso buffer digamos vai ser os dados que nós vamos tendo em buffer E se nós medirmos esta distância aqui na vertical significa que o nosso buffer vai estar Mais ou menos no cheio consoante as condições que a rede apresentar Ok por assim dizer Este buffer de vai de alguma forma compensar o tempo de atraso e a variação desse tempo de atraso por isso efetivamente o que acaba por acontecer é que nós temos aqui o o digamos o buffer a ser esvaziado entre aspas a um débito constante
sendo a fonte constante obviamente também mas aqui o buffer vai estar digamos a ser eh enchido a a um débito que é variável consoante as Condições da rede por isso A rede vai ficando muito atrasada o que é que acontece muito congestionada este buffer vai esvaziando se a rede fica mais rápido este buffer vai enchendo Ok e digamos é esta a forma que temos aqui para funcionar pronto esta é uma das abordagens Digamos que é fazer digamos o buffering do lado do cliente outro aspecto que nós temos que ponderar é o uso do DP versus
o uso de digamos de de de TCP ora e o que é que acontece aqui Eh Na verdade o DP muitas vezes é a solução mais adequada para o streaming de Multimédia porquê Porque digamos geralmente o débito que que eu pretendo fazer no streaming não é um débito não regulado Ou seja é um débito em que as minhas Fontes estão a transmitir uma taxa constante que é igual à taxa de codificação não é e e por isso e eh digamos eu vou ter também um o buffer a ser enchido a um débito que é igual
a um valor constante menos as peras dos Pacotes possam ocorrer eh e este buffer digamos vai ter do seu lado apenas cerca entre 2 5 segundos pode ter mais digamos para compensar o digamos o jitter da rede Ok eh e o que é que vai acontecer é que digamos com o DP naturalmente nós vamos digamos evitar ter aquele controle de congestão que é implementado pelo TCP porque nós vimos Digamos que até nos digamos nas aulas sobre o TCP o que o débito típico de uma digamos do TCP é o tal digamos sinal em dente de
serra não É e porque reparem quando a congestão Acontece aquilo que se observa é o débito de ser cortado a metade não é e depois vai subir linearmente e depois quando há conão corta outra vez a metade e assim sucessivamente de uma forma grosseria é isso que acontece mas esse dente de serra efetivamente é é muito prejudicial para as aplicações Multimédia porque vai cortar de certa forma a a a qualidade de serviço digamos vai fazer com que haja Uma flutuação porque reparem a rar mais ou menos congestionada vai fazer com que se flutue também o
o tamanho dos buffers e flutuar o tamanho dos buffers também vai fazer com que seja flutuante o tempo de atraso e isso é ma porquê porque com um tempo de atraso que varia bastante ao longo do tempo vou ter que fazer com que este buffer que eu vou ter do lado do cliente não sendo o DP sendo por exemplo TCP vai ter que esse buffer vai ter que ser maior para acomodar essas variações E faz com que Então em vez dos 2 5 segundos eu vá ter que ter tempos de atraso maiores para acomodar esse
essas variações Ok claro que quê claro que com o udp eu não tenho digamos garantia de fiabilidade O que é que se tem que fazer implementar fiabilidade ao nível de aplicação mas muitas vezes nestas aplicações Multimédia eu nem sequer tenho tempo de digamos de pedir retransmissão de pacotes que é a solução adotada pelo TCP eh que é uma das Vantagens que PCP apresenta quando temos tempo para tal mas muitas vezes não temos tempo e Então temos que usar todo um outro conjunto de técnicas diferentes para conseguirmos acomodar digamos ou para conseguirmos corrigir de alguma forma
os erros que ocorrem as perdas de pacotes que ocorrem durante durante a transmissão por isso geralmente o DP acaba por ser mais amigo das aplicações Multimédia no entanto o TCP tem uma vantagem não é e que é passa mais Facilmente firewalls a nível de seg segurança e também quando estão os clientes por trás do Nat também é mais fácil digamos chegar até ele e por exemplo se quisermos usar então a http sobre TCP digamos é uma solução muito usual hoje em dia não é naturalmente as aplicações que usam http sobre TCP fogem tanto quanto possível
ao controle de congestão do débito do TCP tentam enviar o tráfego de uma forma autorregulada para evitar esse essa congestão mas no Entanto digamos temos sempre de alguma forma esta potencialmente esses inconvenientes Ok e pronto isso é um bocadinho do que eu queria falar comparando o DP com o TCP e E então agora eh digamos iríamos falar sobre Então as diferentes taxas de codificação que podem ser adotadas no streaming de Multimédia porque é que nós temos que nos preocupar com isto é que reparem que eh nós temos na rede por vezes clientes que têm qualidade
eh ou não é qualidade Diferente tem capacidades diferentes da reprodução dos conteúdos por exemplo podemos ter uma uma aplicação com dptv na nossa televisão a ver um conteúdo eh em 4K eh e que ten uma largura de banda de acesso a televisão de 100 MB por segundo por isso sem grandes restrições mas posso ter um um telefone um Smartphone em que tenha uma largura de banda de acesso bastante mais baixa e em que a resolução por exemplo seja bastante inferior à televisão de 4K por isso não faz Possivelmente sentido est a enviar um sinal de
1.5 MB por segundo para Digamos um telemóvel não é quando ele nem sequer tem a capacidade para receber esses dados e se o receber nem tem a capacidade para o reproduzir porque não tem resolução suficiente e o mesmo se passa ao contrário não faz sentido mandar um sinal de baixa qualidade para uma televisão fantástica com muito boa largura de banda por isso que acaba por Acontecer Existem duas abordagens possíveis aqui ou o servidor armazena múltiplas cópias do mesmo vídeo codificado A diferentes tax de compressão com qualidades das diferentes por isso também e então depois consoante
o dispositivo Envia um stream ou outro aquil que for mais adequado ou então também por vezes é possível enviar eh digamos o vídeo mas codificado de uma forma escalável o que é que isto significa significa que eu tenho várias Camadas de codificação que vão em streams separados um primeiro stream que envio a esceleto do vídeo com uma qualidade mínima necessária para o conteúdo ser visível por exemplo no tal telefone móvel e depois por cima disso env streams adicionais que acrescentam qualidade em relação ao anterior não só qualidade mas também resolução mas também por exemplo não
só espacial mas temporal eh para permitir que então esses streams adicionais sejam recebidos Apenas por os dispositivos que têm a capacidade de de mostrar esses conteúdos e a largura de banda necessária paraos receber Ok por isso consoante as condições da rede e das potencialidades do dispositivo Mais streams do Mesmo vídeo po podem ir ou não para digamos para esse destino e e claro que tudo isto pode ser feito de uma forma adaptativa e em digamos em digamos em tempo de execução Ok por isso eu não sei se tem aqui alguma dúvida relativamente A estas digamos
três pontos que discutimos digamos sobre diferentes técnicas usadas no no streaming de Multimédia se não tivermos digamos dúvidas e relativamente a isso então iríamos falar de um protocolo que é o r TSP que é usado então para controlar a forma como é como é feito o streaming digamos do e do H digamos do e dos conteúdos hh e antes de avançarmos para isso temos que perceber digamos como é Que estes conteúdos podem ser produzidos como é que podemos chegar até eles a grande parte das vezes o que nós temos eh é o próprio áudio ou
vídeo armazenado no ficheiro e ele ser acessível ou o cliente chegar até ele através de páginas web de uma navegação não tem que ser uma página Web que seja mesmo a partir de um browser por vezes até podem ser aplicações web que estejam a correr por exemplo na digamos nas nossas televisões inteligentes ou ou de Out Digamos n outro tipo de aplicações mas muitas vezes o que nós fazemos é OK acedemos através de de de um servidor web eh e há aqui três abordagens possíveis a abordagem mais simples qual é que é é o o
browser que nós temos do nosso lado ir obter do Servidor o ficheiro recebe-o na sua totalidade e passao para o Media Player para que ele possa ser reproduzido eh Esta é uma abordagem muito simples No entanto levanta um Inconveniente muito grande é Que reparem que aqui não temos streaming porque eu tenho que receber o conteúdo na sua totalidade para depois passá-lo para o Media Player essim que tem os codecs necessários para reproduzir o conteúdo Ok h não é abordagem mais interessante digamos para fazermos o streaming naturalmente para fazermos o streaming aquilo que tem-se adotado até
hoje é recorrermos a um ficheiro intermédio que é descarregado em primeiro lugar para o browser e depois é Passado para o Media Player Este feir é um ficheiro de metadados por assim dizer não é o próprio conteúdo de áudio ou de vídeo é um ficheiro que vai descrever Aonde se encontra esse áudio e vídeo e qual é que é o tipo de algoritmo de codificação usado etc etc por isso o browser obtém Este metafile não é arranca até o Media Player passa-lhe ficheiro e depois é o próprio Media Player que vai ter que contactar o
servidor Ok eh e então o servidor vai Poder fazer então o stream de audio vídeo para o Media Player deixando o nosso Browser em paz entre aspas para poder continuar a fazer outras operações H esta por exemplo é uma abordagem usada no http live streaming ou no mpeg das h no entanto digamos é é uma abordagem muito interessante no entanto força-o que usar um servid servidor web para aceder esses conteúdos e por vezes pode não ser a solução mais interessante porque pode não ser a solução mais Interessante aceder através da http barra TCP pode ser
interessante por exemplo usar o DP em vez do TCP mas para essas outras abordagens então eu tenho uma outra solução diferente que é recorrer a um servidor adicional externo ao servidor web ter um servidor independente só para conteúdos de Multimédia nesta abordagem é igual a anterior no sentido que também tenho um ficheiro metadados que é passado para o browser o browser arranca oo Media Player passa-lhe ofer metadados mas agora aqui o Media Player vai requisitar diretamente a um outro servidor diferente usando o DP em vez de TCP eh e vai requisitar desse servidor então digamos
o o o conteúdo de streaming para ser produzido usando por exemplo o protocolo rtsp ok Que Nós já vamos depois falar a seguir é só com esta abordagem que temos aqui que é na verdade possível fazer o tal multicast ok Ok H reparem que nesta abordagem aqui O que é que acontece e é a abordagem que é utilizada por exemplo quando nós Emas nossas casas eh acedemos em direto às televisões Ou seja quando estamos a ver um canal de televisão as notícias um um evento Desportivo etc é esta a abordagem que nós temos aqui iniciamos
as sessões usando o rtsp e contactamos um servidor de streaming separado do Servidor digamos com o qual a nossa Box está digamos a a ter de uma forma interativa aos diferentes tipos de conteúdos Claro Claro que isto não quer dizer que nós usemos exclusivamente esta abordagem para os conteúdos Multimédia a realidade é muito heterogénea nas redes como sabem eh esta abordagem do eh http live streaming também é possível por exemplo Imaginem que vocês estão no vosso dispositivo móvel eh existem muitas aplicações dos operadores para aceder aos canais de televisão através do vosso dispositivo móvel e
muito provavelmente a solução que eles adotam é precisamente Esta aqui do http live streaming Ok por isso estamos aqui a ver que estas são as duas principais abordagens não é para o streaming naturalmente esta aqui requer um protocolo adicional que é o rtsp para poder reproduzir os conteúdos e isto porquê Porque reparem inicialmente o o http não foi digamos desenvolvido tendo em vista a distribuição de conteúdos Multimédia por isso inicialmente não preveu comandos Como Fast forward etc para que os Conteúdos possam ser reproduz os E então criou-se digamos este protocolo que permite precisamente implementar todos
estes comandos que digamos vem trazer funcionalidade necessária para arrancar conteúdos Multimédia não quer dizer que seja um protocolo que não tenha não pareça com a http tem o mesmo sabor não é porque também adota digamos a notação à bnf aente nov forma que já era o que acontecia com a http H mas no entanto é um protocolo Desperado claro que este protocolo não vai nem vai especificar a forma como é que o áudio e o vídeo podem ser encapsulados para que o streaming seja feito pela rede não vai restringir qual é que é digamos o
se eu vou usar ou não o DP ou TCP para o nível transporte também não força nada disso não especifica também noos de buffer de áudio vídeo não diz nada disso a única função que o rtsp tem é de fazer quase aquela função de comando remoto iniciar Produção eh fazer pausa digamos terminar e etc etc Ok e este protocolo rtsp é um protocolo Digamos que designado pelo menos na generalidade do do seu funcionamento como sendo um protocolo de controle fora de banda Ok o que é que é Este controle fora de banda basicamente na internet
existem pela forma como o controle é enviado dois tipos de protocolos existe o protocolo por exemplo que é o FTP Digamos que com o contol fora de banda Em que basicamente o que acontece são criadas duas ligações separadas para fazerem digamos o envio dos dados eh e e para enviar a informação de controle ou seja tenho uma ligação independente para mandar comandos e depois tenho uma outra ligação separada para descarregar ficheiros por assim dizer com o FTP que é a função do do FTP H existem outros protocolos que no entanto tipo telnet eh digamos para
fazer uma sessão remota em que o Controle é dentro de banda ou seja significa o quê que os dados e o controle vão misturados na mesma no mesmo stream de dados Ou seja no mesmo strep porque não é só de dados é dados e controle não é eh o rtsp na generalidade dos casos é um protocolo também eh digamos eh fora de banda no sentido em que geralmente eu crio uma ligação separada só paraos dados e o controle vai à parte mas por vezes torna-se também necessário que o controle vá Dentro de banda quando por
exemplo nos tais casos em que temos firewalls que nos restringem a criação de outras ligações a pedido Ok para esses casos o rtsp funciona digamos com controle fora de banda nós no nos anos anteriores tínhamos um laboratório até onde experimentá estas duas abordagens este ano como sabem não não foi possível ter tantos laboratórios por isso não não vamos ter a possibilidade de experimentar isto mas fica aqui a Mensagem e então vamos ver aqui um cenário simples do funcionamento deste protocolo com alguns exemplos digamos de do que nos aparece não é e o cenário muito simples
é é digamos termos aqui um ficheiro de metadados a ser comunicado por de pelo um servidor web a um browser a um cliente o browser arrancar com com o Media Player por assim dizer e depois termos o Media Player a controlar por rtsp um outro protocolo digamos a controlar Então o a a ligação de dados Que tem com o servidor da streaming e basicamente este ficheiro de metadados que nós estamos a falar tem um aspecto muito parecido àquilo que nós vemos aqui neste slide Ok em que se repararmos isto é um ficheiro XML não é
digamos com essa anotação em que eh nós temos aqui digamos a identificação se repararem dos vários streams não é com o protocolo com o r completo digamos e especificando aqui o protocolo de acesso temos aqui a indicação do Servidor e o caminho para o Conteúdo Multimédia dentro desse servidor se repararem nós nem temos só um ficheiro de áudio Temos vários codificados eh digamos com qualidade diferente não é e tem aqui especificado Qual é que é o codec que é utilizado não é e depois além do áudio temos o vídeo também que por acaso até Vem
de um servidor diferente não não somos forçados a usar o mesmo servidor podemos usar servidores diferentes para diferentes tipos de conteúdos Se Quisermos não é Ou até o mesmo mas pronto basicamente este metadados vai ser então enviado para o o digamos o Med Player para que ele depois possa reproduzir o conteúdo aonde é que obtivemos este ficheiro de que forma foi B ente nesta primeira interação a vermelho que nós fizemos entre o browser e o servidor web seja numa primeira ligação http eu faço get digamos do conteúdo do vídeo e aquilo que me é dado
não é o vídeo é precisamente este Ficheiro que me descreve digamos o conteúdo que pode ser reproduzido ou seja este ficheiro que está aqui esse ficheiro vai ser passado ao Media Player e depois o Media Player então estabelece uma ligação de controle para fazer o setup da ligação iniciar a reprodução de conteúdo Possivelmente então se for fora de banda uma ligação à parte para que este conteúdo possa ser transmitido o tal Multimédia e depois pode fazer pausa ou que quiser e no final desliga Ok Vamos ver exemplo desta interação que está aqui nestas mensagens a
Preto ok que é o tal protocolo rtsp que temos vindo a falar é uma interação deste G que está aqui ou seja temos aqui vários mensagens a ser enviadas setup com o re aqui indicado estamos aqui a indicar como é que é feito deverá ser feito o transporte dos dados Ok neste caso estamos a solicitar que seja sobre o DP usando o protocolo RTP Que Nós já vamos depois ver mais à frente eh indicando o Porto digamos para qual a ligação de dados tem que est estabelecida por isso eu diria tipicamente aqui que estamos a
falar fora de banda porque estamos a indicar a Porto para estabelecer o segundo contacto e queremos conteúdo em modo reprodução e o servidor responde bom ok tudo bem hh E a alternativa outras mensagens que podem ser enviadas pelo cliente é iniciar a reprodução de conteúdo fazer pausa ou terminar ok indicando depois Até posições no vídeo onde deve fazer pausa por exemplo não é reparem que a sessão foi escolhida aqui nesta mensagem do Servidor a partir deste momento o cliente indica sempre nos seus pedidos Qual é a sessão a que se refere digamos o comando que
é enviado no final para cada uma destas mensagens do cliente o servidor vai sempre dando Ok se for o caso senão indica mensagens de erro que depois deverão ser tratadas pelo cliente Ok por isso e relativamente a esta Questão do do streaming do áudio e vídeo armazenado usando ou não o protocolo rtsp e eu tenho esta parte concluída não é não sei se vocês têm alguma questão relativamente a isso porque se não tiverem eu vou avançando com com o nosso programa para aula dois não é se vos parecer bem ok ora muito bem por isso
vamos então falar um pouquinho mais sobre protocolos para aplicações Inter ativas em tempo real ok Que são umas aplicações um bocadinho mais exigentes são aquela terceiro tipo de aplicação e e talvez Nada melhor do que um exemplo para descrever como é que funcionam estas aplicações ora h o exemplo que nós vamos tratar aqui eh vai ser digamos uma aplicação de de voz de uma chamada telefónica feita entre dois computadores através da internet OK quase que seria um bocadinho Se quisermos de alguma forma o exemplo que temos aqui até da nossa aula de hoje Se Nós
retirarmos o vídeo obviamente nós temos aqui digamos quase que uma chamada de voz é um bocadinho desviada do normal porque sou Geralmente eu aqui a falar geralmente vocês estão um bocadinho mais silenciosos hoje em particular não é mas mas vamos supor que é uma conversação entre duas pessoas que estão a conversar normalmente ao telefone eh o que é que acontece durante como é que se caracteriza digamos esse tipo de comunicação porque isso depois tem Algumas consequências que Digamos que nos são vantajosas para gerirmos digamos o tráfico nestas ligações reparem que H numa aplicação de voz
sobre a internet eh o o áudio que é enviado pelo pela pessoa que está a ser está a falar digamos é um áudio que em que se vão alternando períodos de silêncio com períodos em que a pessoa está a falar OK por isso eu tenho a pessoa fala entretanto cala-se depois de sendo uma chamada de voz interativa do outro lado A pessoa responde faz uma nova pergunta entretanto h o silêncio e passa digamos a bola para o outro lado e as pessoas andando a conversar alternadamente vão alternando períodos de silêncio com períodos em que temos
rajadas eh não são bem rajadas mas Samos eh momentos em que a pessoa está a falar de uma forma contínua e e reparem que enquanto que uma pessoa fala eh eu estou a Gerar tráfego a 64 KB por segundo que é uma solução usual digamos Não codificada di Ou pelo menos compressão mas que eu tenho o meu áudio amostrado aou uma dada taxa não é eh e digamos quando eu tenho esse caso a pessoa fala eu estou a enviar 64 KB por segundo constante mas quando a pessoa está em silêncio eu não tenho essa necessidade
ou seja se as pessoas estão caladas e não falam eu deixo de transmitir dados e isso é efetivamente que nós temos agora por exemplo na nossa aula por exemplo vocês do vosso lado Estão calados não tão a falar significa que o vosso só o vosso microfone até poderá estar desligado mas não vai ser enviado nenhum áudio para este lado porque é detetado o nível de som mínimo ao qual digamos eh a partir do qual H ele não envia ou até ao qual ele não envia dados nenhum do vosso lado só havendo um um nível de
som acima de um determinado limar então é que é iniciada a codificação e é que é transmitido dados Ok por isso digamos com este tipo De aplicações Nós podemos ser inteligentes de certa forma e não transmitir quando há silêncios para que transmitir silêncios não é ocupar largura de banda para transmitir o silêncio não é necessário não faz sentido e então por isso o que é que acontece durante estas rajadas os pacotes são quando a pessoa fala são gerados digamos eh uma opção habitual por exemplo a cada 20 msos eh com 8 KB por segundo temos
digamos 6 60 by de Dadas de dados a cada 20 msos ok e durante a cada 20 milisegundos for um tal débito constante o nível de aplicação vai ter que adicionar cabeçalho a esses dados eh juntar isso com os dados e encapar isto tudo num num segmento udp não é porque digamos nos dá melhor garantia de que eh o TCP com o seu controle de congestão não afeta digamos o tempo de atraso eh e depois envia isto durante o período de conversação da pessoa a cada 20 Milisegundos ok por isso O que é que acaba
por acontecer o pacote é transmitido e aqui pode podem acontecer duas coisas H ou três pode correr tudo bem não é o pacote chega chega a tempo de ser reproduzido Fantástico não é mas pode acontecer que o pacote se perca porque ficou a rede congestionada E então efetivamente temos uma perda de rede que é este primeiro exemplo que está aqui seja o pacote perdeu-se porque houve congestão houve UMF num buffer num Router e o pacote foi descartado Mas pode acontecer um outro tipo de perda que não é uma perda efetiva é uma perda por atraso
e o que é que significa Isto significa que o pacote não se perdeu ainda vai chegar ao destino mas ele chega demasiado tarde ok e como chega demasiado tarde não chega a tempo de ser reproduzido no no digamos no no recetor e por isso o facto dele ter chegado é insignificante Ok e reparem este tempo de atraso tem que eh acontece devido a Múltiplas coisas é o tempo de processamento do pacote no emissor e no receptor o tempo de atraso nas filas de espera dos routers eh o tempo para codificar e descodificar o conteúdo eh
etc etc tem que incluir tudo isto e o máximo tolerável para uma aplicação Interativa de voz em que duas pessoas estão a conversar estamos aqui a falar 400 msos Ok e nestes 400 msos tem que haber isto Tudo ok e então por isso Se houver uma Perda reparem eu não consigo ou não posso digamos usar aquelas técnicas que conseguem garantir fiabilidade à custa de retransmissão de pacotes porque em 400 msos eu não tenho tempo para sequer detetar que perdi o pacote quanto mais ainda pedir para o servidor me reenviar o pacote porque reparo eu tinha
que haver timeout pacote tinha que fazer um envio de uma mensagem para o outro lado para que o pacote fosse retransmitido quando O pacote chegasse já de certeza que tinha chegado tarde maisis por isso nós vamos ter que ter aqui dependendo digamos do do tipo de codificação que usamos de de vídeo de ou de de áudio neste caso aqui Vamos tentar arranjar técnicas que me consigam disfarçar os erros de alguma forma eh e mesmo assim se as perdas não forem muito significativas se forem entre 1 20% essas perdas por vezes até São toleráveis digamos e
conseguem-se Disfarçar de certa forma mas Basicamente aquilo que nós temos aqui vai ser um débito constante que é digamos eh aqui eu estou a a enviar digamos os pacotes mas os pacotes vão ter aqui um tempo de atraso variável digamos ao qual eh digamos vão chegar ao recetor e reparem que então o nosso cliente há de introduzir digamos de propósito um tempo de atraso adicional que permita então digamos acomodar esta variação do tempo de atrás o tal giter que temos na rede Devido ao tamanho variável das filas de espera no rutas com santo o grau
de conão na rede mas reparem que o conteúdo aqui é transmitido a cada 20 msos mas no cliente também tem que ser reproduzido a cada 20 msos eu não posso para digamos e esperar mais tempo ou menos tempo a reproduzir conteúdos também tem que reproduzir ao mesmo débito à mesma taxa a que ele tá a ser gerado no no no emissor OK agora a minha questão é e quanto tempo é que eu vou esperar não é Qual é que é o valor que eu vou escolher porque eu posso escolher digamos natural isto aqui estou-me a
repetir em relação ao slide anterior naturalmente estes dados que estão aqui e são todos dados que ficam em buffer ou seja entre aquilo que eu estou a reproduzir e aquilo que já chegou eu vou ter que acumular o meu buffer Mas reparem qual é que vai ser esse tempo de atraso que eu vou ter no meu no meu cliente esse tempo de atraso de propósito H reparem que se eu escolher um tempo de atraso muito elevado o que é que vai acontecer naturalmente eu vou ter menos perdas este pacote não é perdas efetivamente Mas mesmo
aquelas perdas por atraso Ou seja eu tenho assegurado que mais pacotes que chegam um bocado atrasados podem chegar a tempo mas no entanto por outro lado ter um um tempo de atraso no cliente propositado muito elevado vai fazer com que a experiência interativa também seja pior Ok por isso O menor valor de de tempo de atraso adicional eh proporciona melhor experiência interativa Mas por outro lado como seria de esperar há mais perdas de pacotes Ok por isso reparem temos aqui precisamente esta situação reparem no neste gráfico em que o conteúdo é gerado aqui na no
sinal azul não é o aver vermelho é o sinal do me indica o instante de chegada do pacote se nós vamos ter um tempo de apresentação que Há de ser reparem como no slide anterior dizia há de ser o o tempo de atraso que nós vamos adicionar vai ser sempre em referência ao time stamp do pacote ou seja se um se o pacote tiver um time stamp de T eu vou reproduzir a este instante t+ Q E este valor de q é que é o valor tal fixo não é e se este q me indicar
que este valor que aqui dist dentre este azul e este aqui vermelho não é se este k for muito baixo o que é que vai acontecer reparem que aqui o Conteúdo é reproduzido porque o pacote chegou um bocadinho antes Aqui também aqui também mas quando chego ao instante a reproduzir este conteúdo o que é que acontece o pacote só chega depois e então eu não não consigo reproduzir não consigo ter quando preciso para que ele seja reproduzido Há ali um período de perda de pacote não é por atraso que eu vou ter de alguma forma
que disfarçar não é há técnicas para isso mas eh digamos é um problema que tenho se eu Tivesse escolhido um valor maior de tempo de de atrá ou seja se em vez deste valor de de D escolhesse um valor de D linha ou desculpem em vez de um valor de D linha para fazer um instante reprodução no P linha escolhesse um valor de D O que é que iria acontecer reparem eu conseguiria ter sempre o pacote a chegar digamos a ser e reproduzido a tempo de ser eh chegar a tempo de ser reproduzido e este
pacote que ia ser reproduzido aqui já tinha Chegado neste instante e eu conseguiria reproduzi-lo atempadamente por isso esta segunda solução era claramente melhor mas reparem aquilo que é bom para eh digamos este sinal que está aqui a vermelho eh pode não ser bom noutra circunstância pode não ser bom na outra altura do dia eh com outro tipo de utilizadores e por isso escolher um valor fixo pode não ser a solução mais adequada efetivamente não é e o que é que acaba por acontecer eh Basicamente nós teríamos interesse a ter um valor de atraso que nós
estamos a introduzir propositado no cliente que seja eh digamos ajustado ao longo do tempo ajustado em função de quê em função das condições da rede se a rede tá mais ou menos congestionada então nós ajustarmos o tempo de apresentação do conteúdo ok e por exemplo se a rede tiver digamos muito congestionada nós teríamos que ter um tempo de atraso maior se a rede tiver Menos congestionada nós podemos diminuir esse tempo de apresentação e com isso melhorar a experiência interativa eh no entanto diga-se passagem o seguinte é que este ajuste não pode ser feito em qualquer
altura este ajuste não não pode ser feito enquanto uma pessoa estiver a falar porque enquanto uma pessoa estiver a falar se eu digamos en cortar os tempos de atraso e eu vou comer palavras ou fonemas e por exemplo em vez de uma pessoa estar a dizer carro se eu incort Os tempos de atrás a meio da palavra aquilo que se pode ouvir será caro em vez de carro que é uma palavra completamente diferente não é e e o mesmo se passa por exemplo se eu alongar os tempos de atrás a meio de uma processo de
uma da fala de uma pessoa eu posso estar a partir Palavras ao meio e essas palavras deixarem de fazer sentido Ok eh por isso a única altura em que eu posso ajustar e digamos estes eh tempos de atraso adicional no cliente é Nos Períodos de silêncio porquê Porque um período de silêncio estando comprimido ou alongado isso não é muito notado do outro lado Ok por isso é esta altura oportuna ou seja no início da reprodução do conteúdo quando uma pessoa está a falar ao fim de um período de silêncio é que eu posso fazer este
ajuste de digamos de alongamento ou de compressão dos digamos dos dados a serem reproduzidos e como é que fazemos este Cálculo como é que determinamos Então qual é que é o tempo de atraso nós temos aqui uma fórmula que não é muito diferente daquilo que nós já abordamos anteriormente para o cálculo do tempo de atraso no no temporizador do TCP no temporizador da transmissão por isso é conhecimento que vocês podem reutilizar de certa forma aqui para esta parte da matéria h e reparem que nós temos então aqui um tempo de atraso Estimado que há de
ser uma fração do tempo de atraso estimado anterior mais ou menos essa fração ou ao contrário se quiserem da amostra atual que eu tenho do tempo de atraso Ok e então cada vez que eu recebo um pacote digamos eu vou atualizando esta estimativa do tempo de atraso Ok isto atenção é é feito a cada pacote que chega sempre não é H mas naturalmente que digamos isto é uma média exponencial digamos deslizante ao longo do tempo como vemos mas Naturalmente como devem estar a lembrados não nos chega apenas calcular este valor do do tempo de atraso
mas também temos que calcular um outro valor teri à espera que é o desvio da nossa estimativa em relação àquilo que é observado E então este desvio é também uma fração do desvio anterior mais uma fração da diferença entre a minha estimativa e digamos aquilo que eu efetivamente observei como sendo o tempo de atraso Ok então tendo estes Dois valores o d de i e o VDI as estimativas do delay e da variação do delay e eu já tenho então forma de calcular Qual é que é o tempo de apresentação do conteúdo e o tempo
de apresentação do conteúdo vai ser igual ao times temp do papel cote mais esta estimativa do atraso mais k vezes o VII em que k tipicamente é qu Ok mas atenção isto Só pode ser feito no primeiro pacote de uma arranjada só no primeiro e não nos seguintes enquanto nos seguintes Enquanto a pessoa estiver a falar eu tenho que reproduzir o conteúdo a intervalos de tempo regulares eu não posso alongar ou en cortar os períodos digamos o intervalo entre os pacotes Quando a pessoa está a falar ou seja seja eu tenho que sempre se eu
se a pessoa está a falar um débito constante eu tenho que reproduzir o conteúdo exatamente um débito constante eu não posso alongar Isto mais ou menos enquanto a pessoa estiver a falar para Não cortar os tais fonemas Ok E durante essa reprodução enquanto a pessoa está a falar eu tenho que se o débito for constante na fonte no emissor no receptor eu também tenho que estar a reproduzir a um débito constante por exemplo tal de 20 em 20 mundos como vimos anteriormente mas como é que um recetor determina que estamos no início de uma Rajada
que Digamos que tivemos antes um período De silêncio é muito fácil Se não houverem perdas basicamente temos que usar olhar para times temp consecutivos e se a diferença dos times tempos consecutivos for superior a 20 mundos significa claramente que foi um fim de um período de silêncio e então podemos fazer esse ajuste claro que havendo perdas nós temos que analisar não só e elas podem podem ver temos que usar não só o time stamp mas também temos que usar os números de sequência para Perceber digamos se se se ocorreu uma perda ou não ok por
isso relativamente aqui a digamos ao digamos ao tempo de atraso na reprodução de conteúdos estamos mais ou menos conversados que é uma das técnicas bastante usada por exemplo durante o que nós estamos agora aqui a Fer a falar durante a aula não é se vocês entretanto Algum de vocês tiver alguma questão e vai ser isto aplicado imediatamente Não duvidem não é e uma Outra técnica que é usada também por vezes é digamos o digamos são as técnicas de recuperação de perdas de pacotes Ok eh porque reparem nós Infelizmente não temos muito tempo digamos para e
numa sessão deste tipo interativa por cima se for de voz sobre IP não temos muito tempo para que pamos a retransmissão de pacotes por isso vamos ter que digamos suportar todas as nossas técnicas de recuperação de erros e em Técnicas que se baseiam apenas no suporte do receptor ou seja o receptor sozinho vai ter que ser capaz de recuperar esse não pode depender nem da rede nem sequer do emissor para ajudar o receptor na digamos na recuperação de erro mas efetivamente estas perdas baseadas exclusivamente no recetor acabam por ser eficazes quando são pequenas abaixo dos
15% mais ou menos ou ou até um pouquinho acima disso ou para pacotes pequenos digamos nos 4 a 40 msos Não é eh naturalmente que estas técnicas Não não são 100% eficazes falham naturalmente quando atingem na sua totalidade um fonema da da voz humana que que vai tipicamente entre os 5 e 100 msos não é eh e digamos e se não for este o caso geralmente o que nós fazemos é que as técnicas que são utilizadas no seor que antecipam o erro não é de certa forma acabam por ser usadas para resolver estes problemas que
Tipo temos técnicas como forw correction vamos ver duas delas ou por exemplo a técnica de inter Living que também é bastante usada H relativamente a essas técnicas de correção de erros ou não é necessariamente uma correção mas de mitigação do euros Talvez seja a palavra mais correta e temos por exemplo uma abordagem muito simples por exemplo fazer e Digamos um esquema de paridade temos de bit de paridade e essa técnica Muito simples consiste em quê consiste em que para cada n pacotes que eu vou transmitir eu vou criar um pacote adicional que é o exclusivo
bit a bit dos n anteriores e envio juntamente com os anos anteriores Esse pacote adicional basicamente estou aqui a aumentar a minha largura de banda em um sobre n não é eh naturalmente eu estou aqui a perder estou aqui a enviar informação adicional Extra estou a ser menos eficiente por assim dizer porque estou a ocupar mais Largura de banda Mas isso é com propósito porquê porque depois no recetor eh independentemente de quais sejam os dos n + 1 Se eu receber n eu consigo sempre obter o meu conteúdo original sem problemas nenhuns para ser reproduzido
Ok H naturalmente tem um custo também qual é que é é que no recetor pelo menos eu vou ter um at tempo de atraso mínimo fixo que é igual ao tempo de reprodução desses n mais um pacotes Ok eu só depois Ter recebo n mais um é que eu consigo digamos aplicar o tal ou exclusivo para recuperar qualquer uma das outras pacotes anteriores que se possa ter perdido por isso naturalmente aqui existe um compromisso que me seria de esperar muitas vezes não é temos que ponderar Isto é que quanto maior for o n naturalmente temos
menos desperdício ura de banda Fantástico eh mas no entanto temos outro problema que é maior vai ser o tempo de atraso na reprodução de Conteúdos O que é Malu para a experiência interativa e também a maior probabilidade de dois ou mais pacotes se perderem Ok por isso naturalmente só valores de an bastante mais baixos é que nos conseguem garantir melhor experiência de qualidade digamos de interativa e Menor mais resiliência a perdas de pacotes eh um outro esquema bastante usado também é tentar enviar em Pig back com o sinal Original um um outro stream de áudio
este codificado com maior taxa de compressão e por isso com menos menos redundância obviamente mas também com menos qualidade não é e então o que é que temos aqui basicamente no stream original temos quatro pacotes apenas representados e juntamente com cada um desses quatro pacotes O primeiro é uma exão obviamente eu vou enviar juntamente com o segundo pacote o primeiro pacote mas mais comprimido ainda do que eu Estava a fazer antes com o terceiro mando dois mais comprimido com o quatro mando o terceiro mais comprimido e e isto com o objetivo de quê Porque se
depois durante a recessão no receptor aqui agora dos conteúdos eu receber eu não receber este terceiro pacote Ok se eu não adotasse este esquema naturalmente iria ter aqui um período de silêncio que seria bastante desagradável não é e e e então o que é que eu vou fazer eu vou Então obter este eh digamos eh pedaço adicional que estava aqui transmitido com o quatro e vou colocá-lo aqui digamos Neste período de silêncio que eu que eu iria ter Ok eh naturalmente eu não recuperei eu não corrigi o erro de certa forma porquê Porque a qualidade
do áudio que está aqui a ser reproduzida vai ser pior do que era antes ou depois não é mas tudo é melhor do que ter um período de silêncio seria péssimo ter aqui um período de silêncio e o facto de Estar aqui um áudio com um bocadinho de má qualidade o utilizador final Possivelmente nem vai notar muita diferença Ok naturalmente com esta técnica eu consigo ter eh um melhor tempo de reprodução dos conteúdos no recetor consigo ter um tempo de atraso de playout mais reduzido eh consigo ser resiliente para perdas não consecutivas de pacotes consigo
disfarçar esse erro muito bem naturalmente perdas consecutivas com Esta abordagem não dá no entanto se se for necessário eu posso adicionar não só o anterior mas n anteriores eh digamos streams de n pacotes anteriores para por exemplo disfarçar eh perdas de dois em dois pacotes ou de três em três etc Ok claro que naturalmente isso terá um custo que é mais largura de banda adicional para enviarem estes outros streams OK finalmente temos uma outra técnica que é a técnica do Inter Living eh que não é Uma técnica que vai digamos a detetar erro e corrigi-lo
não é uma técnica que vai enviar um segundo stream é uma técnica que não envia mais dados redundantes por assim dizer e adota é um outro princípio diferente que é muito fácil de perceber também eh basicamente temos quatro pacotes originais aqui ok do nosso stream e o que é que eu vou fazer eu vou fracionar cada um desses pacotes em fragmentos mais pequenos Ok Em quatro cada um destes Ok quatro cada um destes cada um deles um deles tiver 20 msos estes pacotes grandes os mais pequeninos as frações vão ter 5 msos cada uma e
depois vou reestruturar ou vou reorganizar digamos esta informação eu vou colocar aqui no primeiro pacote o primeiro fragmento de cada um dos pacotes anteriores no segundo pacote eu vou colocar o segundo fragmento o 2 6 10 e 14 e e assim sucessivamente e depois transmito isto pela Rede a nossa rede eh O que é que vai fazer como sabemos pode fazer com que hajam pacotes que se percam não é e este pacote que existe aqui perdeu-se não é se nós não usássemos esta técnica que é que aconteceria iria ter aqui um período de silêncio o
que seria desagradável não é um potencial período de silêncio tão longo não é mas como eu e neste caso eu perdi este pacote reparem este pacote apenas tem parte dos os pacotes anteriores dos Quatro anteriores efetivamente na prática o que acontece é que eu só tenho período de silêncio para o terceiro fragmento de cada um dos outros pacotes quer dizer que 75% de cada um destes pacotes existe e isso é muito importante por quê Porque é muito mais fácil de disfarçar um erro que está espalhado ao longo do tempo do que um erro muito grande
que está ali concentrado Se o se eu disfarçar se eu distribuir espalhar o erro ao longo do tempo ele deixa de ser Tão visível e tão notado do que se tiver ali um grande período de silêncio Ok eh e reparem eh eu com isto digamos consigo fazer o quê adotar outras técnicas diferentes por exemplo eh para evitar mesmo assim este período de silêncio por exemplo eu posso simplesmente e digamos repetir Eh Ou até fazer uma média dos do dois com o quatro para incluir aqui no sinal do três ou uma média do seis com o
oito para incluir aqui no sinal do s h e consigo com isto preencher aqueles espos De silêncio muito mais facilmente ok Ok e reparem estamos aqui a falar tipicamente de 5 milisegundos Neste período que está aqui e 5 milisegundos é o limite inferior dos fonemas da da nossa voz e e por isso Possivelmente nós aqui estamos a a conseguir disfarçar eh digamos a existência de silêncios para a grande maioria digamos dos fonemas da da voz humana Ok eh naturalmente esta técnica também adiciona um tempo de atraso não é eh para que o conteúdo seja Reproduzido
porque eu tenho que receber os quatro pacotes anteriores para que eu possa aplicar esta técnica de inter Living obviamente Ok Resumindo estas técnicas e um bocadinho mais estas aplicações Multimédia que vimos até agora têm usado Digamos um saco de truques por assim dizer para poderem operar de uma forma eficaz na na internet o tipo sord que temos usam tentam quanto tanto possível usar o DP em vez de TCP para evitar o controle de Congestão de TCP tentam no lado do cliente adaptar o tempo de atraso de reprodução dos conteúdos para compensar a variação do tempo
de atrás o tal giter tentam igualar o digamos a largura de banda do stream eh no cliente no do que é enviada pelo servidor com aquilo que é possível ser reproduzido no no cliente e depois usam também técnicas de eh digamos de mitigação de erro por cima do DP quer seja fec ou inter Living não é como Vimos anteriormente e ou então digamos retransmissões ao nível de aplicação assim haja tempo não é o caso aqui deste tipo de aplicações de de VOIP e e depois e digamos e usamos também outras técnicas como vimos de repetição
de digamos de de dados à volta digamos das perdas de conteúdos e para disfarçar para mitigar digamos os Eros ok não sei se têm dúvida até agora daquilo que que foi falado se se não tiverem Dúvida eu eu iria passar à parte seguinte Digamos que seria a parte de digamos do de protocolos usados para aplicações interativas em Tero real e não só não é que é o caso do protocolo RTP Ok então não havendo dúvidas e vamos avançar para o RTP e reparem o o RTP Não não é rádio e televisão de Portugal obviamente e
o RTP e digamos vai especificar H a estrutura de pacotes que vão levar áudio ou vídeo e E porque é que nós precisamos disto eh porque reparem no TCP Nós já tínhamos alguma informação não sei se se lembram que era por exemplo o número de sequência que permitia por exemplo até tá quando o pacote se perdia reorganizar pacotes pedir retransmissão dos pacotes também era possível É verdade com opções Extra eh ter marcas temporais para os digamos para os para os pacotes que eram Transmitidos etc etc mas nós não não queremos usar muitas vezes o o
TCP queremos muitas vezes usar o DP e o DP infelizmente não providencia nada disso O udp é um protocolo muito simples best effort mais uma vez eh em que indica praticamente só o porto de destino e de origem do do pacote que está a ser enviado para depois ser feitos multiplexagem ora H muito bem então neste caso eh nós precisamos de um protocolo Adicional porque a maior parte das aplicações Multimédia que usam o DP necessitam todas elas desta informação adicional para as aplicações poderem ser eficazes e que informação é essa a identificação do tipo de
conteúdo que tá a ser transmitido eh o tipo de codificação números de sequência muito importante para detetar também perdas e ordenar pacotes que cheguem fora de ordem e os tais marcas temporais para eu fazer todas as outros cálculos que aliás Falamos anteriormente Ok por isso este protocolo RTP propcia precisamente o envio deste tipo de informação eh e estes pacotes RTP Então são encapsulados em digamos em udp di de certa forma existente se assim quisermos as potencialidades do DP eh e permitem também digamos é uma das formas que temos para conseguir assegurar o multicast digamos de
de dados Multimédia através do m de rede e eu poderia até ser um bocadinho eh digamos ambicioso e Até dizer que dois eh digamos eh duas aplicações Multimédia eh na internet que eh digamos corram sobre o RTP muito Possivelmente conseguem interoperar eh digamos de alguma forma conseguir sear que elas consigam Inter o Prado eh por exemplo e a a vendo apenas um exemplo muito rápido sobre o que é que acontece quando usamos o RTP basicamente temos o nossa voz por exemplo a ser codificado em PCM 64 kbit por segundo por cima do RTP o que
é que A aplicação vai fazer Vai recolher estes dados eh eh digamos eh codificados em PCM a cada 20 msos vai agregá-los num pedaços e depois vai somar a isso então esse tal cabeçalho RTP ok que contém esta informação e depois vai encapsular tudo isso num segmento udp eh E então digamos a a cada cabeçalho deste segmento RTP eu posso até indicar qual é que é o algoritmo de codificação que está a ser usado para aquele pacote porquê porque na verdade nós vimos Anteriormente que o emissor pode mudar digamos Eh Ou pode ter usar codificações
diferentes até para clientes diferentes e até pode dar-se o caso de a meio da reprodução do conteúdo eu mudar o tipo de codec que vai ser usado para esse conteúdo para o streaming desse desse áudio desse vídeo ok e por isso é necessário então a cada pacote que é enviado indicar até o tipo de codificação que está a ser usado Ok e contém naturalmente também Além disso os T time stamps e números de sequência no entanto o RTP não apresenta nenhum mecanismo para segurar que os pacotes estão são entregues ordenadamente ou atempadamente e não fornece
nenhuma qualidade de serviço o RTP nem sequer é visível pelos routers que estão intermediários nos pacotes não é H Por isso os rutas estão no meio apenas continuam a fazer o best effort por isso na verdade o RTP apenas están aí a dar Informação Extra que as aplicações podem usar para então processarem esses pacotes eh que que informação Extra é essa temos aqui o formato do digamos do cabeçalho do do RTP é o que nós já tivemos um bocado a discutir é tal e o tipo de conteúdos e temos sete bits para indicar isso e
para vários codificados de diferentes formas como estamos aqui a ver o tal número de sequência com 16 bits neste caso em que é atribuído o número de sequência para cada segmento Ao contrário por exemplo do que era feito no no protocolo TCP porque no protocolo TCP não sei se se lembram a cada B tem o número de sequência aqui Não no protocolo RTP é cada segmento tem um número de sequência porque S um bocadinho e digamos menos granular e Além Deste número de sequência e temos também a tal marca temporal com 32 bits que reflete
então digamos o instante de mostragem do primeiro pacote do primeiro byte nesse Segmento e e depois indica também um campo para indicar qual é que é digamos como é que é a fonte do stream é identificada Ok e naturalmente eh digamos cada stream numa dada sessão RTP deve ter um Digamos um identificador distinto certa forma eh por isso basicamente isto não tem aqui muito que falar a nível digamos do RTP é a informação adicional que é usado a nível de aplicação há aqui um outro aspecto que é preciso falar é que o RTP Geralmente não
vem sozinho traz sempre um amigo eh este este amigo digamos é um protocolo auxiliar que é usado digamos em conjunção com com o RTP que é o rtcp atenção não confundir com o rtsp eh Este é o este c é de control Real Time Control protocol eh e que na verdade faz com que cada participante numa ação RTP possa periodicamente enviar informação eh digamos estatística por exemplo eh usando este protocolo acerca daquilo que Está a acontecer na na sessão RTP e esta formação estatística é muito importante pode ser por exemplo o número de pacotes enviados
o número de pacotes perdidos o jitter que acontece etc porquê Porque esta informação adicional vai ser então importante para e é feedback basicamente que os clientes podem usar para enviar para o emissor para que o emissor possa então modificar ao longo da sessão Qual é que é o o digamos a taxa de codificação Qual é o algoritmo de Codificação a ser usado e vocês devem ter percebido isto por vezes n algumas aplicações Multimédia de streaming que usam na rede que quando uma rede tá a ficar muito lenta muito congestionada vocês vão de reparar que por
vezes o vídeo que vocês veem eh baixa de qualidade eh durante a reprodução e isto porquê Porque de alguma forma o emissor soube disso porque foi informado disso através deste protocolo por exemplo para que depois então seja transmitido não um Vídeo com uma qualidade fantástica mas tem que estar sempre constantemente a fazer rebuff ring e isso não é desejável e passa então a ser transmitido um vídeo com menor qualidade é verdade mas pelo menos tudo é melhor do que ter um rebing de 10 em 10 digamos de segundo a segundo ter um rebuff em 10
segundos Ninguém vai querer ter isso com numa experiência de numa aplicação Multimédia E então estes pacotes rtcp digamos t a tal informação Estatística não é muito importante que enviada pelo recetor mas também o emissor também pode enviar inform ação digamos indicando time stamp não é dos pacotes do primeiro pacote do segmento número de segmentos enviados número de bitos enviados e também informação sobre o emissor em si como é que ele se identifica Qual é que é o ID do stream etc etc e um aspecto muito importante aqui na verdade é esta questão do time stamp
enviado pelo emissor por quê Porque é muito importante termos uma sincronização adequada dos conteúdos Multimédia e isto por quê Porque não sei se vocês repararam e já mas por vezes acontece quando isso geralmente até mais nas notícias e quando estão a ser digamos dadas na televisão que é não haver um sincronismo entre o áudio e o vídeo que que está a a ser observado por vós quando uma dada pessoa está a falar Eh por vezes acontece que a pessoa estamos a ouvir o que a pessoa diz mas Os lábios não estão sincronizados com aquilo que
a pessoa fala e isto claramente é um problema porquê Porque que se identifica de uma forma muito fácil em que temos o áudio ou vídeo ligeiramente atrasado um em relação ao outro porquê Porque não houve uma sincronização adequada destes dois streams é que a verdade que estes dois streams estão a ser enviados em paralelo Mas eles têm que TM estar sincronizados e como é que se é feito é usando este Protocolo rtcp como o emissor regularmente envia em cada stream por rtcp um time ST do do primeiro bite do pacote e a hora real desse
também primeiro pacote que é enviado Ok e então fazendo uma conta muito simples dear e subtrair no recetor e é possível então obter digamos a sincronização entre vários streams de áudio ouo e vídeo ok claro que às vezes acontece o er porque pode ser digamos o Relógio de referência que é usado não ser o mesmo E então existe esse esse dess sincronismo Ok por isso esta referência digamos do relógio tem que ser a mesma nos em todos os streams para que a sincronização seja possível de forma adequada E então estamos quase a chegar ao fim
mas ainda só queria discutir mais aqui dois aspectos convosco ou aliás um aspecto que leva aqui mais dois slides e que é questão de da quantidade de tráfego que é enviado Por rtcp na verdade este tráfego rtcp não é tráfego de dados diretamente útil no sentido que não leva conteúdos que sejam reproduzidos é um protocolo auxiliar e naturalmente nós não queremos que o tráfego rtcp seja demasiado elevado não é informação estatística nós podíamos estar a enviar constantemente a toda hora não é por isso vamos ter que de alguma forma limitar o tráfego rtcp por forma
a que não tenhamos mais tráfego de dados e úteis e Principalmente imaginemos se nós tivemos e 10.000 utilizadores 100.000 utilizadores Imaginem O que é que se cada um deles mandar à sua vontade tráfego rtcp para para o emissor não é seria digamos descabido isso poder ser feito de uma forma não controlada e então basicamente tá especificado que o rtcp limita o tráfego de controle a 5% da largura de banda da sessão ou seja do tráfego disponível em RTP e desses 5% 75 vão para os receptores na sua totalidade E e 25 para o o os
emissores ou o emissor só ver eh por exemplo se nós tivermos um vídeo de 2 bit por segundo que não é assim tão descabido digamos nas nossas boxes não é eh o tráfego rtcp está limitado a 100 kbit porso eh em que os tais desses 100 75 KB porso são para todos os setores não é que recebam tráfego nesta sessão e e o emissor em si tem 25 KB por segundo de tráfego de controle para ser enviado para os clientes Ok naturalmente Eh os clientes querem emissor que é servidor não quer dizer com o valor
de débito não lhes diz muita coisa eles basicamente querem saber é de quanto e quanto tempo podem mandar um pacote Zinho não é e basicamente o que acontece cada participante na sessão para determinar este período de envio de pacotes rtcp tendo um valor médio do pacote rtcp dividindo isso pela largura de banda que lhe é atribuída consegue facilmente Saber qual é que é o intervalo entre envios consecutivos de pacotes rtcp se vocês quiserem uma fórmula não era preciso tla colocar aqui porque vocês conseguiam deduzir facilmente mas para vos facilitar a vida basicamente o que nós
podemos fazer é isto que está aqui ou seja e o tempo para o emissor depois para o receptor algo semelhante o período de envio de pacotes rtcp para os emissores é o número de emissores a dividir por 0,25 xes 05 não é vezes a Largura de banda da sessão isto tudo multiplicado pelo tamanho médio de pacote e isto d-nos Então o intervalo entre envios consecutivos de pacotes rtcp reino idêntico vocês podem fazer para para o recetor