Fundamentos de Redes

Fundamentos de Redes Prof. Juliana Fernandes Camapum juliana@ene.unb.br www.ene.unb.br/~juliana/cursos/fundamentos 2a: Camada de Aplicação

Metas do capítulo: aspectos conceituais e de implementação de protocolos de aplicação em redes modelos de serviço da camada de transporte Arquitetura cliente- servidor Arquitetura peer-to-peer (P2P) aprenda sobre protocolos através do estudo de protocolos populares da camada de aplicação: HTTP FTP SMTP/ POP3/ IMAP DNS Capítulo 2: Camada de Aplicação 2a: Camada de Aplicação

2.1 Princípios dos protocolos da camada de aplicação 2.2 A Web e o HTTP 2.3 Transferência de Arquivo (File Transfer) FTP 2.4 Correio Eletrônico SMTP, POP3, IMAP 2.5 DNS: serviço de diretório da Internet 2.6 Compartilhamento de arquivos P2P Capítulo 2: Roteiro 2a: Camada de Aplicação

E-mail Web Instant messaging Login remoto Compartilhamento de arquivos P2P Jogos de rede multi-usuários Vídeo-clipes armazenados Voz sobre IP Vídeo conferência em tempo real Computação paralela em larga escala ? ? ? Algumas aplicações de rede 2a: Camada de Aplicação

São programas que Executam em diferentes sistemas finais Comunicam-se através da rede Ex., Web: servidor Web (Apache, Microsoft) envia página Web (documento HTML) requisitada pelo navegador (browser-Internet Explorer) através de uma troca de mensagens (HTTP) São programas não relacionados ao núcleo da rede Dispositivos do núcleo da rede não executam aplicações de usuários Aplicações nos sistemas finais permite rápido desenvolvimento e disseminação aplicação transporte rede enlace física aplicação transporte rede enlace física aplicação transporte rede enlace física Criando uma aplicação de rede 2a: Camada de Aplicação

Arquiteturas das aplicações • Cliente-servidor • Peer-to-peer (P2P) • Híbrido de cliente-servidor e P2P 2a: Camada de Aplicação

Arquitetura cliente-servidor Servidor: • Sempre ligado • Endereço IP permanente • Provê serviços pedidos pelo cliente • Escalabilidade com server farms - conjunto de servidores que formam um servidor virtual único – infra-estrutura intensa (Google,Amazon,YouTube, YahooMail) Cliente: • Comunica-se com o servidor (“fala primeiro”) • Pede serviços ao servidor • Pode estar conectado intermitentemente • Pode ter endereços IP dinâmicos • Não se comunica diretamente com outros clientes 2a: Camada de Aplicação

Arquitetura P2P pura • Não há servidor sempre ligado • Sistemas finais arbitrários se comunicam diretamente chamados pares (peers) • Não passam por servidores dedicados, são controlados por usuários • Pares estão conectados intermitentemente e mudam endereços IP • Exemplo: BitTorrent (distribuição arquivos), eMule (compartilhamento arquivos), Skype (telefonia) Alta escalabilidade Porém, difícil de gerenciar 2a: Camada de Aplicação

Híbrido de cliente-servidor e P2P Napster (extinta) • Transferência de arquivos P2P • Busca de arquivos centralizada: • Pares registram conteúdo no servidor central • Pares consultam o mesmo servidor central para localizar conteúdo Mensagem instantânea - Instant messaging • Conversa entre dois usuários é P2P • Localização e detecção de presença centralizadas: • Usuários registram o seu endereço IP junto ao servidor central quando ficam online • Usuários consultam o servidor central para encontrar endereços IP dos outros usuários 2a: Camada de Aplicação

Processo: programa que é executado em um hospedeiro processos no mesmo hospedeiro se comunicam usando comunicação entre processosdefinida pelo sistema operacional (SO) processos em hospedeiros distintos se comunicam por protocolo da camada de aplicação, trocando mensagens através da rede Processo servidor: processo que espera para ser contactado Processo cliente: processo que inicia a comunicação Faz a interface com o usuário “acima” e com a rede “abaixo” implementa protocolos nível de aplicação Ex. Web: browser Processos em comunicação Nota: aplicações com arquiteturas P2P possuem processos clientes e processos servidores 2a: Camada de Aplicação

Cliente Servidor processo processo socket socket TCP com buffers, variáveis TCP com buffers, variáveis Sockets (Portas) • Os processos enviam/ recebem mensagens para/dos seus sockets • Um socket é análogo a uma porta • Processo transmissor envia a mensagem através da sua porta • O processo transmissor assume a existência da camada de transporte no outro lado da sua porta • A camada de transporte faz com que a mensagem chegue à portado processo receptor controlado pelo desenvolvedor da aplicação (Browser) Internet controlado pelo SO • API – Interface de programação de aplicação – interface entre a aplicação e a camada de transporte: (1) escolha do protocolo de transporte; (2) habilidade para fixar alguns parâmetros (ex. tamanho máximo do buffer e do segmento) 2a: Camada de Aplicação

Para que um processo receba mensagens, ele deve possuir um identificador Cada host possui um endereço IP único de 32 bits P: o endereço IP do host no qual o processo está sendo executado é suficiente para identificar o processo? Resposta: Não, muitos processos podem estar executando no mesmo host O identificador inclui tanto o endereço IP quanto os números das portas associadas com o processo no host. Exemplo de números de portas: Servidor HTTP: porta 80 Servidor de Correio: porta 25 Mais sobre isto posteriormente. Endereçando os processos 2a: Camada de Aplicação

Tipos de mensagens trocadas, ex. mensagens de pedido e resposta Sintaxe dos tipos das mensagens: campos presentes nas mensagens e como são identificados Semântica dos campos, i.e., significado da informação nos campos Regras para quando os processos enviam e respondem às mensagens Protocolos de domínio público: definidos em RFCs Permitem a interoperação ex, HTTP e SMTP Protocolos proprietários: Ex., KaZaA, Skype Os protocolos da camada de aplicação definem 2a: Camada de Aplicação

Perda de dados algumas aplicações (p.ex. áudio) podem tolerar algumas perdas outras (p.ex., transf. de arquivos, telnet) requerem transferência 100% confiável Temporização algumas aplicações (p.ex., telefonia Internet, jogos interativos) requerem baixo retardo para serem “viáveis” De que serviço de transporte uma aplicação precisa? Largura de banda • algumas aplicações (p.ex., multimídia) requerem quantia mínima de banda para serem “viáveis” • outras aplicações (“apls elásticas”) conseguem usar qualquer quantia de banda disponível Segurança • Criptografar os dados para garantir confidenciabilidade • Autenticidade • TCP-enhanced with SSL (Capt. 8) SSL = Secure Socket Layer 2a: Camada de Aplicação

Requisitos do serviço de transporte de aplicações comuns Sensibilidade temporal não não não sim, 100’s mseg sim, alguns segs sim, 100’s mseg sim e não Aplicação transferência de arqs correio documentos WWW áudio/vídeo de tempo real videoconferência áudio/vídeo gravado jogos interativos Mensagem instantânea Perdas sem perdas sem perdas sem perdas tolerante tolerante tolerante sem perdas Banda elástica elástica elástica áudio: 5Kb-1Mb vídeo:10Kb-5Mb como anterior > alguns Kbps elástica A Internet de hoje ainda não provê garantia de Banda e Sensibilidade Temporal 2a: Camada de Aplicação

Serviço TCP: Orientado à conexão: inicialização requerida entre cliente e servidor transporte confiável entre processos remetente e receptor controle de fluxo: remetente não vai “afogar” receptor controle de congestionamento: estrangular remetente quando a rede estiver carregada não provê: garantias temporais ou de banda mínima Serviço UDP: transferência de dados não confiável entre processos remetente e receptor não provê: estabelecimento da conexão, confiabilidade, controle de fluxo, controle de congestionamento, garantias temporais ou de banda mínima Protocolo leve P: Qual é o interesse em ter um UDP? Serviços providos por protocolos de transporte Internet 2a: Camada de Aplicação

Aplicações Internet: seus protocolos e seus protocolos de transporte Protocolo da camada de apl SMTP [RFC 2821] telnet [RFC 854] HTTP [RFC 2616] FTP [RFC 959] HTTP(ex. YouTube), RTP SIP, RTP, ou Proprietário (Skype) Protocolo de transporte usado TCP TCP TCP TCP TCP ou UDP tipicamente UDP Aplicação correio eletrônico acesso terminal remoto Web transferência de arquivos streaming multimídia telefonia Internet 2a: Camada de Aplicação

2.1 Princípios dos protocolos da camada de aplicação 2.2 Web e HTTP 2.3 FTP 2.4 Correio Eletrônico SMTP, POP3, IMAP 2.5 DNS 2.6 Compartilhamento de arquivos P2P Capítulo 2: Roteiro 2a: Camada de Aplicação

Web e HTTP • Páginas Web consistem de objetos • Objeto pode ser um arquivo HTML, uma imagem JPEG, um vídeo clipe, um arquivo de áudio,… • Páginas Web consistem de um arquivo HTML base que inclui vários objetos referenciados • Cada objeto é endereçável por uma URL • Exemplo de URL: www.someschool.edu/someDept/pic.gif nome do caminho nome do hospedeiro servidor URL = Uniform Resource Locator 2a: Camada de Aplicação

HTTP: HyperText Transfer Protocol – protocolo de transferência de hipertexto protocolo da camada de aplicação da Web arquitetura cliente/servidor cliente:browser que pede, recebe, “mostra” objetos Web servidor: servidor Web envia objetos em resposta a pedidos HTTP 1.0: RFC 1945 HTTP 1.1: RFC 2068 Protocolo HTTP pedido http PC executa Explorer resposta http pedido http Servidor rodando um servidor Web (ex. UnB) resposta http Mac executa Navigator 2a: Camada de Aplicação

Usa serviço de transporte TCP: cliente inicia conexão TCP (cria socket) ao servidor, porta 80 servidor aceita conexão TCP do cliente mensagens HTTP (mensagens do protocolo da camada de apl) trocadas entre browser (cliente HTTP) e servidor Web (servidor HTTP) encerra conexão TCP HTTP é “sem estado” servidor não mantém informação sobre pedidos anteriores do cliente Mais sobre o protocolo HTTP Nota Protocolos que mantêm “estado” são complexos! • história passada (estado) tem que ser guardada • Caso caia servidor/cliente, suas visões do “estado” podem ser inconsistentes, devem ser reconciliadas 2a: Camada de Aplicação

HTTP não persistente No máximo um objeto é enviado numa conexão TCP HTTP/1.0 usa o HTTP não persistente HTTP persistente Múltiplos objetos podem ser enviados sobre uma única conexão TCP entre cliente e servidor HTTP/1.1 usa conexões persistentes no seu modo default Conexões HTTP 2a: Camada de Aplicação

Supomos que usuário digita a URL www.algumaUniv.br/algumDepartmento/index.html 1a. Cliente http inicia conexão TCP a servidor http (processo) www.algumaUniv.br na Porta 80 padrão para servidor http. Exemplo de HTTP não persistente (contém texto, referências a 10 imagens jpeg) 1b.servidor http no hospedeiro www.algumaUniv.br espera por conexão TCP na porta 80. “aceita” conexão, avisando ao cliente 2.cliente http envia mensagem de pedido de http (contendo URL incluindo /algumDepartamento /index.html) através do socket da conexão TCP 3.servidor http recebe mensagem de pedido, formula mensagem de resposta contendo objeto solicitado (algumDepartmento /index.html), envia mensagem via socket tempo 2a: Camada de Aplicação

5. cliente http recebe mensagem de resposta contendo arquivo html, mostra html. Analisando arquivo html, encontra 10 objetos jpeg referenciados Exemplo de HTTP não persistente (cont.) 4.servidor http encerra conexão TCP . 6.Passos 1 a 5 repetidos para cada um dos 10 objetos jpeg tempo 2a: Camada de Aplicação

Inicia a conexão TCP RTT solicita arquivo tempo para transmitir o arquivo RTT arquivo recebido tempo tempo Modelagem do tempo de resposta Definição de RTT (Round Trip Time): intervalo de tempo entre a ida e a volta de um pequeno pacote entre um cliente e um servidor Tempo de resposta: • um RTT para iniciar a conexão TCP • um RTT para o pedido HTTP e o retorno dos primeiros bytes da resposta HTTP • tempo de transmissão do arquivo total = 2RTT+tempo de transmissão 2a: Camada de Aplicação

Problemas com o HTTP não persistente: requer 2 RTTs para cada objeto SO aloca recursos do host para cada conexão TCP os browser freqüentemente abrem conexões TCP paralelas para recuperar os objetos referenciados HTTP persistente o servidor deixa a conexão aberta após enviar a resposta mensagens HTTP seguintes entre o mesmo cliente/servidor são enviadas nesta conexão Persistente sem pipelining (paralelismo): o cliente envia um novo pedido apenas quando a resposta anterior tiver sido recebida um RTT para cada objeto referenciado Persistente com pipelining default no HTTP/1.1 o cliente envia os pedidos logo que encontra um objeto referenciado pode ser necessário apenas um RTT para todos os objetos referenciados HTTP com conexão persistente 2a: Camada de Aplicação

Formato de mensagem HTTP: pedido • Dois tipos de mensagem HTTP: pedido, resposta • mensagem de pedido HTTP: • ASCII (formato legível por pessoas) linha de requisição (comandos GET, POST, HEAD, PUT, DELETE) GET /somedir/page.html HTTP/1.0 Host: www.someschool.edu User-agent: Mozilla/4.0 Connection: close Accept-language:fr (carriagereturn (CR), linefeed(LF) adicionais) linhas docabeçalho Carriage return e line feed, linha em branco, indicam fim de mensagem ASC II - American Standard Code for Information Interchange II 256 caracteres codificados em 8 bits 2a: Camada de Aplicação

Mensagem de pedido HTTP: formato geral Linha de requisição Linhas do Cabeçalho Linha em branco Corpo da mensagem 2a: Camada de Aplicação

Formato de mensagem HTTP: resposta linha de estado (protocolo, código de estado, frase de estado) HTTP/1.1 200 OK Connection close Date: Thu, 06 Aug 1998 12:00:15 GMT Server: Apache/1.3.0 (Unix) Last-Modified: Mon, 22 Jun 1998 …... Content-Length: 6821 Content-Type: text/html dados dados dados dados ... linhas decabeçalho Quando o objeto foi criado ou modificado Número de bytes do objeto dados, p.ex., arquivo htmlsolicitado 2a: Camada de Aplicação

200 OK sucesso, objeto pedido segue mais adiante nesta mensagem 301 Moved Permanently objeto pedido mudou de lugar, nova localização especificado mais adiante nesta mensagem (Location:) 400 Bad Request mensagem de pedido não entendida pelo servidor 404 Not Found documento pedido não se encontra neste servidor 505 HTTP Version Not Supported versão de http do pedido não usada por este servidor Códigos de estado da resposta HTTP Na primeira linha da mensagem de resposta servidor->cliente. Alguns códigos típicos: 2a: Camada de Aplicação

Muitos dos principais sites Web usam cookies Quatro componentes: linha de cabeçalho do cookie na mensagem de resposta HTTP Set-cookie: 1678 linha de cabeçalho do cookie na mensagem de pedido HTTP Cookie: 1678 arquivo do cookie mantido no host do usuário e gerenciado pelo browser do usuário Banco de Dados (BD) de apoio no site Web Exemplo: Suzana acessa a Internet sempre do mesmo PC Ela visita um site específico de comércio eletrônico pela primeira vez Quando os pedidos iniciais HTTP chegam no site, o site cria uma ID (ex. 1678) única e cria uma entrada para a ID no Banco de Dados de apoio Cookies: manutenção do “estado” da conexão São textos que podem ser armazenados no disco rígido com dados do usuário. Permitem que sites identifiquem e monitorem os seus usuários. 2a: Camada de Aplicação

cliente servidor msg usual pedido http resposta usual http + Set-cookie: 1678 arquivo de Cookies arquivo de Cookies Host - ID arquivo de Cookies ebay: 8734 amazon: 1678 ebay: 8734 amazon: 1678 ebay: 8734 ação específica do cookie msg usual pedido http cookie: 1678 msg usual pedido http cookie: 1678 resposta usual http resposta usual http ação específica do cookie Cookies: manutenção do “estado” (cont.) servidor cria a ID 1678 para o usuário entrada no BD de apoio acesso acesso uma semana depois: 2a: Camada de Aplicação

O que os cookies podem fazer: Autorização após armazenamento do registro da pessoa Registro da lista de compras no Ecommerce Sugestões -recomendar produtos estado da sessão do usuário (Web email) – identificação do usuário Eles armazenam coisas que você acessou, sites que você viu Cookies (continuação) nota Cookies e privacidade: • cookies permitem que os sites aprendam muito sobre você • você pode fornecer nome e e-mail para os sites • mecanismos de busca usam redirecionamento e cookies para aprender ainda mais sobre você • agências de propaganda obtêm perfil a partir dos sites visitados e oferecem produtos perturbando os usuários (ex. DoubleClick) 2a: Camada de Aplicação

usuário configura browser: acessos Web via proxy (representante) cliente envia todos pedidos HTTP ao proxy se objeto está no cache , este o devolve imediatamente na resposta HTTP senão, solicita objeto do servidor de origem, depois devolve resposta HTTP ao cliente Cache Web (servidor proxy) Meta: atender pedido do cliente sem envolver servidor de origem Servidorde origem cliente Servidorproxy pedido http pedido http resposta http resposta http pedido http resposta http cliente Servidorde origem 2a: Camada de Aplicação

Cache atua tanto como cliente quanto como servidor Tipicamente o cache é instalado por um ISP (universidade, empresa, ISP residencial) Para que fazer cache Web? Redução do tempo de resposta para os pedidos do cliente Redução do tráfego no canal de acesso de uma instituição A Internet cheia de caches permitem que provedores de conteúdo “pobres” efetivamente forneçam conteúdo! Mais sobre Caches Web 2a: Camada de Aplicação

Hipóteses Tamanho médio dos objetos = 100k bits Taxa média de solicitações dos browsers de uma instituição para os servidores originais = 15/seg Atraso do roteador institucional para qualquer servidor origem e de volta ao roteador = 2seg Conseqüências Utilização da LAN = (100kx15)bps/10Mbps=15% Utilização do canal de acesso = (100kx15)bps/1,5Mbps=100% Atraso total = atraso da Internet + atraso de acesso + atraso na LAN = 2 seg + minutos + milisegundos Exemplo de cache (1) Servidoresde origem Internet pública enlace de acesso 1,5 Mbps rede dainstituição LAN 10 Mbps 2a: Camada de Aplicação

Solução em potencial Aumento da largura de banda do canal de acesso para, por exemplo, 10 Mbps Conseqüências Utilização da LAN = 15% Utilização do canal de acesso = 15% Atraso total = atraso da Internet + atraso de acesso + atraso na LAN = 2 seg + msegs + msegs Freqüentemente esta é uma ampliação cara Exemplo de cache (2) Servidoresde origem Internet pública enlace de acesso 10 Mbps rede dainstituição LAN 10 Mbps 2a: Camada de Aplicação

Instale uma cache Assuma que a taxa de acerto seja de 0,4 Conseqüências 40% dos pedidos serão atendidos quase que imediatamente 60% dos pedidos serão servidos pelos servidores de origem Utilização do canal de acesso é reduzido para 60%, resultando em atrasos desprezíveis (ex. 0,01seg) Atraso total = atraso da Internet + atraso de acesso + atraso na LAN = 0,6x2 seg + 0,6x0,01 segs + 0,4x(0,01seg) < 1,3 segs Exemplo de cache (3) Servidoresde origem Internet pública enlace de acesso 1,5 Mbps rede dainstituição LAN 10 Mbps cache institucional 2a: Camada de Aplicação

Meta: não enviar objeto se cliente já tem (no cache) versão atual cache: especifica data da cópia no cache no pedido http If-modified-since: <date> servidor: resposta não contém objeto se cópia no cache é atual: HTTP/1.0 304 Not Modified resposta http HTTP/1.0 304 Not Modified GET condicional Servidor de origem cache msg de pedido http If-modified-since: <date> objeto não modificado msg de pedido http If-modified-since: <date> objeto modificado resposta http HTTP/1.1 200 OK … <data> 2a: Camada de Aplicação

1. Use o analisador de rede Wireshark para observar as mensagens do protocolo HTTP trocadas entre cliente e servidor. Experimente você com HTTP (do lado cliente) • Abrir o programa Wireshark e selecionar • Menu: Capture->Options (selecionar a sua interface de rede) – clique em ok • Menu: Capture->Start • Abrir o browser: digitar link - http://www.ene.unb.br/~juliana/ • Abre conexão TCP para a porta 80 (porta padrão do servidor http) a www.ene.unb.br • O pedido GET será enviado ao servidor http • Examine a mensagem do pedido do cliente e resposta enviada pelo servidor HTTP! 2a: Camada de Aplicação

Analisador de Rede Wireshark – Captura HTTP 2a: Camada de Aplicação

transferir arquivo de/para hospedeiro remoto modelo cliente/servidor cliente: lado que inicia transferência (pode ser de ou para o sistema remoto) servidor: hospedeiro remoto ftp: RFC 959 servidor ftp: portas 20 e 21 Interface do usuário FTP cliente FTP FTP servidor sistema de arquivos local FTP: o protocolo de transferência de arquivos transferênciado arquivo usuário na estação sistema de arquivos remoto 2a: Camada de Aplicação

cliente FTP contata servidor FTP na porta 21, especificando o TCP como protocolo de transporte O cliente obtém autorização através da conexão de controle O cliente consulta o diretório remoto enviando comandos através da conexão de controle Quando o servidor recebe um comando para a transferência de um arquivo, ele abre uma conexão de dados TCP para o cliente Após a transmissão de um arquivo o servidor fecha a conexão O servidor abre uma segunda conexão TCP para transferir outro arquivo Conexão de controle: “fora da faixa” Servidor FTP mantém o “estado”: diretório atual, autenticação anterior conexão de controle TCP, porta 21 conexão de dados TCP, porta 20 cliente FTP servidor FTP FTP: conexões separadas p/ controle, dados 2a: Camada de Aplicação

Comandos típicos: enviados em texto ASCII pelo canal de controle USER nome PASS senha LISTdevolve lista de arquivos no diretório atual RETR arquivo recupera (lê) arquivo remoto STOR arquivo armazena (escreve) arquivo no hospedeiro remoto Códigos de retorno típicos código e frase de status (como para http) 331 Username OK, password required 125 data connection already open; transfer starting 425 Can’t open data connection 452 Error writing file FTP: comandos, respostas 2a: Camada de Aplicação

Wireshark – Captura FTP 2a: Camada de Aplicação

Três grandes componentes: Agentes dos usuários Servidores de mensagens Protocolo de transferência de mensagens - Simple Mail Transfer Protocol: SMTP Agente do Usuário “leitor de mensagens” compõe, edita, lê mensagens de correio p.ex., Eudora, Outlook, elm, Netscape Messenger mensagens enviadas e recebidas são armazenadas no servidor fila demensagens de saída caixa de correio do usuário agente de usuário agente de usuário agente de usuário agente de usuário agente de usuário agente de usuário Servidor de mensagens Servidor de mensagens Servidor de mensagens SMTP SMTP SMTP Correio Eletrônico 2a: Camada de Aplicação

Servidores de correio caixa de mensagens contém mensagens que chegam (para serem lidas) para o usuário fila de mensagens contém mensagens de saída (a serem enviadas) protocolo SMTP (push- envio de mensagem) entre servidores de mensagens “cliente”: servidor de envio de mensagens “servidor”: receptor de mensagens agente de usuário agente de usuário agente de usuário agente de usuário agente de usuário servidor demensagens Servidor demensagens Servidor de mensagens SMTP SMTP SMTP Correio Eletrônico: servidores de correio 2a: Camada de Aplicação

usa TCP para o envio confiável de mensagens do correio do cliente ao servidor, porta 25 transferência direta: servidor remetente (“cliente”) ao servidor receptor três fases da transferência handshaking (cumprimento) envio das mensagens término interação comando/respostas comandos: texto ASCII respostas: código de status e frase explicativa mensagens precisam ser em ASCII de 7-bits Correio Eletrônico: SMTP [RFC 2821] 2a: Camada de Aplicação

Fundamentos de Redes