Java Media Framework 2.1 Programação Multimídia em Java. SBMídia Jorge Fernandes e Bob Natal, Junho de 2000

Tamanho: px

Começar a partir da página:

Download "Java Media Framework 2.1 Programação Multimídia em Java. SBMídia - 2000 Jorge Fernandes e Bob Natal, Junho de 2000"

Elisa Batista Van Der Vinne
8 Há anos
Visualizações:

1 Java Media Framework 2.1 Programação Multimídia em Java SBMídia Jorge Fernandes e Bob Natal, Junho de 2000

2 Conteúdo O que é a Java Media?

3 Java Media Framework 2.1 Versão Otimizada para Windows 5.10MB - JFM-2_1-win.exe The JMF 2.0 API was developed by Sun Microsystems, Inc. and IBM. The JMF 1.0 API was developed by Sun Microsystems, Inc., Silicon Graphics Inc., and Intel Corporation.

4 JMF API Specification & Guide Specification 23 11/2000 jmf-2_0-spec.zip = 732,426 bytes. GUIDE jmf2_0-guide.pdf = 2,993,967 bytes.

5 O que é o Java Media Framework? Binary Code License Agreement MF 2.1 Hardware Requirements 166 MHz Pentium, 160 MHz PowerPC, or 166 MHz UltraSparc 32 MB RAM or greater Optional: An appropriate sound card for audio play back, if necessary. For example, a SoundBlaster-compatible card for Windows machines without b ilt i di t Ulti di

MB RAM or greater Optional: An appropriate sound card for audio play back, if

6 Tipos de Mídias Suportadas

7 Referências Java Media Framework API Guide

8 Mídia Temporizada

9 1 - Trabalhando com Mídia Temporizada Modelo Geral de Processamento O que é Mídia Temporizada? Apresentação de Mídia Temporizada Processamento de Mídia Captura de Mídia

10 1.1 - Modelo Geral de Processamento de Mídia Entrada Captura através de Dispositivo Microfone, Câmera, etc Arquivo Rede Processamento Filtragem Compressão- Descompressão Conversão entre formatos Saída Apresentação em Dispositivo (Falante, Tela, Projetor) Arquivo Rede

Processamento Filtragem Compressão- Descompressão Conversão entre

12 1.2 - O que é Mídia Temporizada? Restrições Temporais Formato da Mídia QuickTime, MPEG, WAV Múltiplos canais ou tracks (trilhas) Localização e Protocolo (URL) Formas de Transferência dos dados Push (controlado pelo cliente: http, file) Pull (controlado pelo servidor: rtp, video-on-

tracks (trilhas) Localização e Protocolo (URL) http://www.dimap.ufrn.

13 1.2 - O que é Mídia Temporizada? Dados com Restrições Temporais Estritas recepção Apresentação time-based media (chamado de streaming media)

14 1.2 - O que é Mídia Temporizada? Formatos de Mídia video Formato, tipo, qualidade, CPU, Banda MPEG-1, MPEG, alta,alta,alta JPEG, quicktime-avi-rtp, alta, alta, alta audio PCM, avi,quicktime,wav,alta,baixa,alta um-law, avi,quicktime,wav,rtp,low,low,alta MPEG-1,MPEG,alta,alta,alta MP3,MPEG,altamalta,media

quicktime-avi-rtp, alta, alta, alta audio PCM,

15 1.2 - O que é Mídia Temporizada? Múltiplos Canais e Multiplexação Áudio QuickTime Áudio Vídeo Multiplexação De-multiplexação Vídeo

16 1.3 - Apresentação da Mídia Controles Latência Qualidade

17 1.3 - Apresentação da Mídia Controles

18 Start latency Apresentação da Mídia Latência Diferença de tempo entre o pressionar do start e a apresentacão da mídia (particularmente importante quando a mídia é trazida via rede) Múltiplas Streams vídeo tem que esperar pelo som, por exemplo

2 - Latência Diferença de tempo entre o pressionar do start e a

19 1.3 - Apresentação da Mídia Qualidade da apresentação Depende do: esquema de compressão usado capacidade de processamento do sistema de playback banda passante (para redes) - bit rate frame rate ( 30 quadros por segundo = TV e VCR)

capacidade de processamento do sistema de playback banda

20 1.4 - Processamento Multiplexação Compressão Conversão Filtros Despacho para o Dispositivo

21 1.5 Captura de Mídia Dispositivos Microfone + Placa de Áudio Câmera + Placa de Vídeo Controles

22 2 - Entendendo o JMF

23 2.1 Pra Que Serve o Java Media Framework Criação de Aplicações e Applets Tipos de Mídia Suportadas AIFF, AU, AVI, GSM, MIDI, MPEG, QuickTime, RMF e WAV Plataforma portável para tratamento (captura, processamento e armazenamento) de mídia

24 2.2 - Java Media Framework (Fonte: JMF API Guide) DataSource Encapsula mídia temporizada Player Mecanismos de processamento e controle Dispositivos de Entrada e Saída

25 Aspectos Específicos Apresentação Players Processors Controls Events Processamento Controls Saída Captura

26 2.3 - Arquitetura de Alto Nível (Fonte: JMF API Guide)

27 2.4 - Elementos da Arquitetura de Alto Nível Time Model (Modelo de Tempo) Managers (Gerenciadores) Event Model (Modelo de Eventos) Data Model (Modelo de Dados) Controles Componentes de GUI Extensibilidade

28 Modelo de Tempo MediaTime = MediaStartTime + Rate(TimeBaseTime - TimeBaseStartTime)

29 Modelo de Tempo TimeBase Controla a passagem do tempo enquanto a mídia está sendo apresentada Similar a um cristal oscilador Não pode ser parado ou resetado Clock s media time posição corrente dentro de uma stream de mídia 0 -> tempo máximo da mídia Duração = t final apresentação

30 Managers (Supervisores) Supervisionam e integram players, processors, datasources, datasinks, packages, devices e plugins diferentes, usando a interface de servicos provida por estes objetos Manager - construção de players, procerssadores, datasources e datasinks PackageManagers - registro de pacotes de classes

31 Modelo de Eventos Padrão JavaBeans

32 Modelo de Dados

33 Modelo de Dados Push e Pull Data Sources Pull Data Sources O cliente inicia a transferência e controla o fluxo de dados. HTTP e FILE. Push Data Sources O servidor inicia a transferência e controla o fluxo de dados. Broadcast media, multicast media, e video-on- demand (VOD). Realtime Transport Protocol (RTP)

34 Modelo de Dados Formatos sample rate, bits per sample, number of channels.

35 Controles

36 CachingControl Alguns Controles Padronizados (1/2) Monitorar progresso de downloads GainControl Ajuste no volume de Áudio

37 Alguns Controles Padronizados (1/2) StreamWriterControl Controla tamanho de streams FramePositioningControl Ajusta da Posicao do frame FrameGrabbingControl Captura conteúdo de um frame FormatControl Consulta ou ajustar o formato TrackControl Controla o processamento em uma trilha específica PortControl e MonitorControl Controla Processo de Captura Codec Controls SilenceSuppressionControl BitRateControl FrameProcessingControl FrameRateControl QualityControl

38 Componentes de GUI QualityControl ControlComponent. getcontrolcomponent.

39 Extensibilidade Através da implementação de novos plug-ins ou de classes que implementam Controller, Player, Processor, DataSource, ou DataSink

40 Apresentação Controladores Estados e métodos Tipos de Controladores Players Processors Players Processors Controles GUI

41 Controladores (Controllers)

42 JMF Player Processa e mostra um stream de leitura Não realiza controle sobre o processamento e rendering da mídia Player Model

43 Relacionamento entre Classes do Player

44 Estados de um Player

45 Processor Model

46 Controller Events (1/3)

47 Controller Events (1/3)

48 Controller Events (1/3)

49 4 - Processamento Estados e métodos Controles Saída

54 5 - Captura Dispositivos Dados Controle Armazenamento Transmissão

55 6 - Extensibilidade

56 7 - RTP

57 Java Media Framework 2.1 Programação Multimídia em Java SBMídia Jorge Fernandes e Bob Natal, Junho de 2000

Documentos relacionados

Protocolos Multimídia. Alunos: Roberto Schemid Rafael Mansano

Protocolos Multimídia. Alunos: Roberto Schemid Rafael Mansano Alunos: Roberto Schemid Rafael Mansano Exemplos de Aplicações Multimídia Mídia Armazenada: conteúdo gravado e armazenado play/pause/rewind/forward Streaming : vê o conteúdo enquanto baixa o arquivo evita