Metadados INSPIRE. Henrique Silva Sessão SNIG/INSPIRE, DGT, 27 de Junho de 2017

Transcrição

1 Metadados INSPIRE Henrique Silva Sessão SNIG/INSPIRE, DGT, 27 de Junho de 2017

2 Programa Conceitos Perfil MIG e INSPIRE Editores de metadados Pesquisa e publicação no catálogo do SNIG Ferramentas de validação Serviços de catálogo

3 CONCEITOS

4 Descrição textual harmonizada. Essencial para: Metadados de Informação Geográfica Identificação: Título, Resumo, Identificadores, Assunto/ Palavras-chave, Contactos...; Avaliação técnica: Sistema de Referência, Qualidade, Extensão geográfica e temporal dos conjuntos de dados geográficos (CDG)...; Aspectos relacionados com o acesso e uso dos CDG e serviços. Identificação Avaliação

5 Metadados de Informação Geográfica Funcionam como combustível para encontrar/ pesquisar recursos em sistemas de informação, infraestruturas de dados espaciais (IDE) ou no comércio electrónico. Identificação Avaliação Pesquisa

6 Metadados de Informação Geográfica Através da harmonização dos metadados e dos serviços de catálogo, é possível a partilhar dos metadados entre IDE e sistemas ou aplicações. Também os metadados são comparáveis. Identificação Pesquisa Comparação Avaliação Partilha

7 Normas de metadados de informação geográfica Para partilhar e comparar informação são necessários vários níveis de harmonização:: Modelo lógico (o universo do discurso); Codificação informática; Aspectos da implementação; Perfis de metadados.

8 Norma ISO Norma para os metadados de informação geográfica. Tem o objectivo de caracterizar extensamente a grande diversidade dos recursos geográficos. Modelo lógico: Definição de classes e elementos; Relações entre eles (diagramas UML); Elementos obrigatórios/ condicionais/ opcionais; Multiplicidade das classes e elementos. É abstracta porque falta a implementação. ISO Extensão para metadados dos serviços

9 Norma ISO Core Metadata Subconjunto da norma ISO Elementos considerados fundamentais que devem existir sempre nos metadados. Este subconjunto é definido respondendo a 4 questões: Existe um CDG para um determinado assunto ( what )? Para um lugar específico ( where )? Para uma data ou período específico ( when )? Um ponto de contacto para saber mais sobre o CDG ( who ).

10 Norma ISO Norma para a codificação informática dos metadados de IG. Nível de implementação informática. Baseada em XML: Transmissão na Internet; Validação via XML schema/ schematron; Multiplas vistas/ representações dos metadados utilizando XSL (stylesheets); Partilha entre computadores.

11 Siglas CDG Conjuntos de Dados Geográficos SDG Serviços de Dados Geográficos CSDG Conjuntos e Serviços de Dados Geográficos IIG Infra-estrutura de Informação Geográfica SRC Sistema de Referência por Coordenadas URI Uniform Resource Identifier DE Disposições de Execução (e.g. Especificações Técnicas)

12 Exemplos de metadados Catálogo do SNIG

13 Perfil MIG e INSPIRE

14 Baseados na norma ISO Perfil de Metadados Enquadramento específico, reflete as necessidades específicas de um grupo ou entidade. Delimita e refina determinados aspectos da norma, assumindo um papel importante nos processos de normalização.

15 Perfil Nacional de Metadados de Informação Geográfica (Perfil MIG) Versão 2: Julho 2013 ; Vários autores (GT Transversal); Perfil base nacional; Disponível na internet, em versão PDF. f

16 Metadados INSPIRE O perfil de metadados INSPIRE está orientado para aspectos considerados fundamentais para estabelecer a base da implementação da IDE Europeia. Relevância a: Palavra-chave INSPIRE (Tema INSPIRE, tipo de serviço...); Entidades responsáveis; Acesso e uso dos CDG e serviços (livre acesso e utilização, acesso com restrições, pagamentos); Qualidade dos CDG e serviços e conformidade às especificações técnicas do INSPIRE.

17 Outros documentos técnicos Metadados para pesquisa e interoperabilidade entre infraestruturas de informação geográfica Palavras-chave a utilizar nos metadados para melhoria das pesquisas de informação geográfica, ados_pesquisa_ _final3.pdf Identificador do Recurso, icadorrecursouri_v09.pdf

18 Perfil MIG Documentos de Referência REGULAMENTO (CE) N.o 1205/2008 que estabelece as modalidades de aplicação da Directiva 2007/2/CE do Parlamento Europeu e do Conselho em matéria de metadados Normas ISO : ISO 19115:2003 ISO ISO ISO 19115:2014 REGULAMENTO (UE) N. o 1089/2010 DA COMISSÃO de 23 de Novembro de 2010 que estabelece as disposições de execução da Directiva 2007/2/CE do Parlamento Europeu e do Conselho relativamente à interoperabilidade dos conjuntos e serviços de dados geográficos. (Metadados para interoperabilidade) INSPIRE Metadata Implementing Rules: Technical Guidelines based on EN ISO and EN ISO 19119, v1.3 Perfil MIG v.2.0 DRAFT Julho 2013

19 Perfil MIG Principais objectivos: Implementação da norma ISO e da Directiva INSPIRE em Portugal. Metadados obrigatórios seleccionados de: ISO Core metadata; Regulamentos INSPIRE para os metadados e interoperabilidade; Metadados obrigatórios da norma ISO para os serviços. Metadados opcionais para documentação extensa, como por exemplo, a secção completa da qualidade. Metadados condicionais para temas específicos. Perfil de "conformidade nível 1" só incluí elementos da norma

20 Perfil MIG Apresenta uma tradução das normas e uma nomenclatura harmonizada para os metadados e termos. Todos os documentos e ferramentas devem utilizar os mesmos nomes.

21 Secções principais: Identificação: infomação geral; Perfil MIG Identificação dos CDG: informação específica dos CDG; Identificação dos serviços: informação específica dos serviços; Sistemas de Referência: geográfico, temporal; Extensão: geográfica, temporal, altimétrica; Distribuição: formatos, URL para acesso a CDG e serviços; Qualidade: Histórico, relatório, conformidade; Metametadados: metadados sobre os metadados;

22 Perfil MIG Elementos/ Classes Cada elemento/ classe do perfil tem: Secção: a secção a que o elemento / classe pertence; Contexto ISO 19115: caminho para o elemento na norma; Nome PT/ EN; Tipo / Domínio: tipo ou classe e domínio, como listas de códigos; Obrigação / Multiplicidade: os elementos ou classes podem ter multiplicidade [0,1,2...N] ; Definição / Comentários: análise detalhada e explicações; Justificação: a razão porque os metadados foram incluídos no perfil; Exemplos; Exemplo XML. Tipo : uma classe que é utilizada em diferentes contextos. Elemento: elemento discreto de metadados Classes: grupos de elementos que fazem sentido em conjunto.

23 Perfil MIG Informação detalhada Apresenta informação detalhada para: Designar os recursos; Preencher uma data de referência; Códigos a utilizar para Portugal (referências a outras normas como a ISO idioma); Criação de identificadores; Códigos para os sistemas de referência; Coordenadas para as principais extensões geográficas de Portugal Continental e ilhas, etc.

24 Visita ao Perfil MIG

25 Editores de metadados

26 Editores de metadados Editores de Metadados livres em português Editor online SNIG GeMA Editor MIG Editor SNIMar

27 MIG Editor Editor de metadados da DGT para apoiar a produção de metadados normalizados, a formação de gestores de metadados, desenvolvimento do SNIG e a implementação da Directiva INSPIRE em Portugal. Primeira versão 2005 Versão 3.1 Julho de 2010 Multiplataforma, código aberto Desactualizado

28 Gestor de Metadados dos Açores (GeMA) Editor de Metadados da Infraestrutura de Dados Espaciais dos Açores (IDEIA) ; Perfil MIG e INSPIRE ; Versão atual 5.1 (publicada em Fevereiro de 2017); pt/paginas/gema.aspx

29 Editor de metadados SNIMar Integração com o thesaurus SNIMar, específico para os recursos marinhos, carregado pelos técnicos das entidades envolvidas, com base na aplicação colaborativa. Navegador do thesaurus: estrutura hierárquica com as palavras-chave por grupos/ domínios.

30 Editor de Metadados INSPIRE

31 GeMA (1)

32 GeMA (2)

33 GeMA (3)

34 Pesquisa e publicação no catálogo SNIG

35 Caso de uso do catálogo SNIG

36 Pesquisa do catálogo SNIG Interface de pesquisa; CSDG indexados menus laterais; Serviços de catálogo. Serviço catálogo

37 Interface de Pesquisa do SNIG Pesquisa de texto livre Pesquisa os metadados: Título, Resumo, Palavras-chave e Contacto (Entidade) Exemplos: Ortoimagens AND INSPIRECORE "Carta Administrativa" Direção-Geral do Território (DGT) A pesquisa no portal é, por omissão, disjuntiva, ou seja, os metadados que são devolvidos contêm qualquer uma das palavras inseridas. Por exemplo, se for efectuada uma pesquisa por Cascais Sintra, serão devolvidos todos os metadados que contenham a palavra Cascais e todos os que contenham a palavra Sintra. Para efectuar uma pesquisa conjuntiva, ou seja, impôr que os resultados devolvidos contenham todas as palavras inseridas na pesquisa, deve ser colocada a palavra AND como separador das palavras. Por exemplo, para pesquisar os metadados que contenham as palavras geologia e 50000, deve ser inserido geologia AND no campo de pesquisa. Para pesquisar por um termo específico, deve ser inserido entre aspas (""). Por exemplo, para pesquisar os metadados que contenham Porto Santo deve-se inserir "Porto Santo" no campo de pesquisa.

38 Encontrar a informação geográfica CSDG indexados Entidades RPF Core Tema INSPIRE Informação Geográfica de Base Serviços de mapas

39 Geoportal INSPIRE

40 Geoportal INSPIRE

41 Depende de: Encontrar a informação geográfica Normalização dos metadados, e.g. ISO 19115, INSPIRE Pesquisas possíveis (depende do sistema), e.g. Título, Contacto, Palavras-chave, Data de criação/ publicação, extensão geográfica, etc. Conteúdo dos metadados (depende do gestor dos metadados).

42 Encontrar a informação geográfica Uniformização dos conteúdos: Listas de códigos Conteúdo dos metadados <gmd:md_scopecode codelist=" urces/codelist/ml_gmxcodelists.xml#md_scopecode" codelistvalue="dataset">conjunto de Dados Geográficos</gmd:MD_ScopeCode> Palavras-chave em thesaurus ou registos: Tema INSPIRE, Neutral language codes: Metadados de texto livre, como o Tipo de Serviço (discovery, view...),

43 Encontrar a informação geográfica Palavras-chave pré-definidas Ocupação do solo, Ortoimagens, etc. - Temas INSPIRE INSPIRECORE - CSDG das entidades da Rede de Pontos Focais INSPIRE Core igeo - Serviços a serem disponibilizados no portal igeo RNDG, Cartografia oficial, Cartografia homologada - utilizadas no âmbito do Registo Nacional de Dados Geográficos (RNDG).

44 Encontrar a informação geográfica Palavras-chave pré-definidas

45 Pesquisas em: _wrapper&view=wrapper&itemid=3&lang=pt

46 Ferramentas de validação

47 Metas Metadados: losango azul Discovery metadata metadados para pesquisa que devem existir no Geoportal do INSPIRE para todos os anexos.

48 Qualidade geral dos metadados Relatório de harvesting do Geoportal INSPIRE ao catálogo SNIG em 12 de Maio de 2016: 1924 registos com uma conformidade média de 90%

49 Ranking Europeu - metadados (2014) 89% 88% Existência de metadados = 89% Conformidade dos metadados= 88% Metadados em serviços de pesquisa= 88% 88%

50 Qualidade dos metadados Validador do INSPIRE Acesso em Valida de acordo com as normas ISO e especificações INSPIRE. Colar o código XML dos metadados ou o URI dos metadados ou escolher ficheiro XML no disco. Interpretar os erros e corrigir.

51 Proxy Browser

52 Identificação dos principais erros no Proxy Browser Agrupar os metadados por tipo de erro

53 Validador INSPIRE Erros comuns Sistema de Referência (SRC) The required metadata element "Coordinate Reference System" is present, but does not contain any of the coordinate reference system identifiers (EPSG URIs) required by the Technical Guidelines This requirement has to be met starting from 23 November 2012 for data sets that were created or extensively restructured after 15 May 2007 and starting from 23 November 2017 for all other data sets. 1. A identificação do sistema de referência por coordenadas (SRC) nos metadados deve ser feita através de um HTTP URI, e.g O SRC indicado não se encontra listado nos SRC obrigatórios (metadados para interoperabilidade). CSDG

54 Continente : Validador INSPIRE Erros comuns Sistema de Referência (SRC) Se o SRC fôr ETRS89/ PT-TM06 juntar o URI para o ETRS89 : Ilhas: Os CSDG com base no datum ITRF93 estão conformes, embora estes SRC não estejam listados na lista de SRC obrigatórios, por omissão. SRC admitidos : EPSG: 5012 (ITRF93/ Coordenadas Geográficas 3D), EPSG: 5013 (ITRF93/ Coordenadas Geográficas 2D), EPSG: 5014 (ITRF93/ PTRA08 - UTM zona 25N) - Grupo Ocidental do Arquipélago dos Açores, EPSG: 5015 (ITRF93/ PTRA08 - UTM zona 26N) - Grupo Central e Oriental do Arquipélago dos Açores, EPSG: 5016 (ITRF93/ PTRA08 - UTM zona 28N) - Madeira, Porto Santo, Desertas e Selvagens, CSDG

55 Validador INSPIRE Erros comuns Conformidade Information on the degree of conformity with the implementing rules on interoperability of spatial data sets and services is required. Os metadados não tem a indicação da conformidade do conjunto ou serviço de dados geográficos com as disposições de execução (DE). CDG

56 Validador INSPIRE Erros comuns Conformidade SDG

57 Validador INSPIRE Erros comuns Conformidade A keyword defining the INSPIRE Spatial Data Theme is required for Spatial Data Sets and Series but it could not be found Uma palavra-chave com o Tema INSPIRE não foi encontrada. Por exemplo : Caraterísticas geometeorológicas <> Características geometeorológicas O tema INSPIRE deve ser escrito em Português e com a primeira letra maiúscula, exactamente como no Thesaurus GEMET : CSDG

58 Validador INSPIRE Erros comuns Condições de acesso e uso The metadata element "Conditions For Access And Use" is missing, empty or incomplete but it is required. As condições de acesso ou utilização são expressas no elemento de texto livre Limitações ao Uso (gmd:uselimitation). Preencher com, por exemplo, uma referência ao preçário, indicação de licenças especiais, se é gratuito, etc. Mesmo que não existam condições, o campo deve preenchido: TG Requirement 33 If no conditions apply to the access and use of the resource, no conditions apply shall be used. If conditions are unknown, conditions unknown shall be used. INSPIRE Metadata Implementing Rules: Technical Guidelines based on EN ISO and EN ISO 19119, V. 1.3, pag.54 Utilizar as traduções Sem restrições e Condições Desconhecidas. Em revisão CSDG

59 Validador INSPIRE Erros comuns Limitação ao acesso público The metadata element "Limitations On Public Access" is missing, empty or incomplete but it is required. Não existe pelo menos um dos metadados: Restrições de Acesso (gmd:accessconstraints) Outras Restrições (gmd:otherconstraints) Restrições de Segurança (gmd:classification) Em revisão CSDG

60 Validador INSPIRE Erros comuns Sem Restrições Se não existirem limitações ao acesso público, é necessário escolher o código Outras restrições em Restrições ao Acesso e preencher o metadado de texto livre Outras Restrições com o texto Sem restrições. Se não existirem condições de acesso e uso, preencher o metadado de texto livre Limitações ao Uso com o texto Sem restrições. CSDG

61 Validador INSPIRE Erros comuns XML mal-formado There was a problem processing the metadata file "/solr1/inspire/xmlroot/sandbox/inspire-8b4b088c-d475-11e4-b b857_ /downloaded.xml" because of the following error: "Unexpected character '=' (code 61); expected a semi-colon after the reference for entity 'REQUEST' at [row,col {unknown-source}]: [306,62]" XML não válido. No URL do serviço, o processador do XML entende &name ; como uma referência a um caracter especial e não encontra o ;. <gmd:linkage> <gmd:url> </gmd:url> </gmd:linkage> CSDG

62 Validador INSPIRE Erros comuns XML mal-formado 1.Colocar o código para o caracter & : & ou 2. Colocar o URL numa secção CDATA. Esta instrução indica ao processador XML que o que está entre parêntesis deve ser interpretado como texto. <gmd:ci_onlineresource> <gmd:linkage> <gmd:url> EST=GetCapabilities></gmd:URL> </gmd:linkage> </gmd:ci_onlineresource> <gmd:url><[cdata[ QUEST=GetCapabilities]]></gmd:URL>

63 Validador INSPIRE Erros comuns Recurso Associado (Coupled Resource) 1. The Coupled Resource (operateson)url "PT_IGP_CAOP2012.0" is invalid because Malformed URL 2. The Coupled Resource (operateson)url " e?uuid=651afc6eabe54ca9acd1b0deaf769a3e" is invalid because No ISO metadata resources found 1. O valor do Recurso Associado não é um URL; 2. O valor do Recurso Associado, sendo um URL, não aponta um ficheiro XML de metadados ISO Colocar, de preferência, um pedido GetRecordById para o ficheiro de metadados, e.g. ordbyid&version=2.0.2&id=494831b765d248f09bdd017e810ce15e&outputformat =text/xml&outputschema= SDG

64 Exemplos de conformidade 100% Cobertura Regular de Ortofotografia Aérea de 50 cm do ano de AE16-F7D0-475F-BFB5-28B527D484D7%7D CDG Carta de Uso e Ocupação do Solo de Portugal continental para 2007 (COS 2007 N2) WMS C8C B2A-BE38-C2AB2D30FD3C%7D SDG

65 Recomendações adicionais Palavra-chaves INSPIRECORE Identificação dos CSDG de âmbito INSPIRE; Filtro para o Geoportal do INSPIRE; CSDG Filtro para a monitorização automática baseada nos metadados; igeo SDG para o portal igeo.pt Dados Abertos SDG

66 Recomendações adicionais Acesso Online e Recursos Associados No âmbito da Directiva INSPIRE, um CDG deve ser disseminado por um SDG de visualização e por um de descarregamento. Os metadados dos CSDG definem esta relação da forma: CDG SDG

67 Recomendações adicionais Identificadores (URI) No Linked Data/ Open Data, todos os recursos têm um URI: simultaneamente identificação e informação sobre o recurso. Nos metadados: Namespaces: xmlns:gmd=" Sistemas de referência: Recursos Associados (Coupled Resources): URI dos metadados dos recursos associados ao serviço. <srv:operateson xlink:href=" nt?id=%7b4274da95-03b8-42e ed59c36446%7d"/>

68 Recomendações adicionais Identificador do Recurso Identificador do recurso (CDG ou SDG): cadeia de caracteres ou preferencialmente um URI. Padrão a ser utilizado para o Identificador do Recurso: Exemplos: (1) dos metadados] (2) dos metadados] CSDG

69 Serviços de catálogo

70 Serviços de catálogo SNIG OGC CSW ISO AP : REST : Pedidos HTTP GET e POST; Resposta com metadados ISO; OGC Filter Encoding; Especificação OGC. Pedidos KVP GET ; Resposta em formatos populares de Internet: KML, JSON, GeoJSON; Integração simples com aplicações Internet; Especificação para os programadores (API) API-Syntax

71 Serviço CSW GetCapabilities Metadados pesquisáveis <ows:constraint name="supportedisoqueryables"> <ows:value>apiso:subject</ows:value> <ows:value>apiso:title</ows:value> <ows:value>apiso:abstract</ows:value> <ows:value>apiso:anytext</ows:value> <ows:value>apiso:format</ows:value> <ows:value>apiso:identifier</ows:value> <ows:value>apiso:modified</ows:value> <ows:value>apiso:type</ows:value> <ows:value>apiso:boundingbox</ows:value> <ows:value>apiso:crs.authority</ows:value> <ows:value>apiso:crs.id</ows:value> <ows:value>apiso:crs.version</ows:value> <ows:value>apiso:revisiondate</ows:value> <ows:value>apiso:alternatetitle</ows:value> <ows:value>apiso:creationdate</ows:value> <ows:value>apiso:publicationdate</ows:value> <ows:value>apiso:organizationname</ows:value> <ows:value>apiso:hassecurityconstraints</ows:value> <ows:value>apiso:language</ows:value> <ows:value>apiso:resourceidentifier</ows:value> <ows:value>apiso:parentidentifier</ows:value> <ows:value>apiso:keywordtype</ows:value> <ows:value>apiso:topiccategory</ows:value> <ows:value>apiso:resourcelanguage</ows:value> <ows:value>apiso:geographicdescriptioncode</ows:value> <ows:value>apiso:denominator</ows:value> <ows:value>apiso:distancevalue</ows:value> <ows:value>apiso:distanceuom</ows:value> <ows:value>apiso:tempextent_begin</ows:value> <ows:value>apiso:tempextent_end</ows:value> <ows:value>apiso:servicetype</ows:value> <ows:value>apiso:servicetypeversion</ows:value> <ows:value>apiso:operation</ows:value> <ows:value>apiso:operateson</ows:value> <ows:value>apiso:operatesonidentifier</ows:value> <ows:value>apiso:operatesonname</ows:value> <ows:value>apiso:couplingtype</ows:value> <ows:value>keywords</ows:value> <ows:value>apiso:originator</ows:value> </ows:constraint> <ows:constraint name="additionalqueryables"> <ows:value>apiso:degree</ows:value> <ows:value>apiso:accessconstraints</ows:value> <ows:value>apiso:otherconstraints</ows:value> <ows:value>apiso:classification</ows:value> <ows:value>apiso:conditionapplyingtoaccessanduse</ows:value> <ows:value>apiso:lineage</ows:value> <ows:value>apiso:responsiblepartyrole</ows:value> <ows:value>apiso:specificationtitle</ows:value> <ows:value>apiso:specificationdate</ows:value>

72 Serviço CSW Pedido HTTP POST <csw:getrecords xmlns:csw=" xmlns:apiso=" xmlns:ogc=" xmlns:gmd=" xmlns:xsi=" service="csw" version="2.0.2" maxrecords="15" startposition="1" resulttype="results" outputformat="application/xml" outputschema=" xsi:schemalocation=" <csw:query typenames="gmd:md_metadata"> <csw:elementsetname typenames="gmd:md_metadata">brief</csw:elementsetna

73 Serviço REST HTTP/GET htext=inspirecore%20and%20dgt&start=1&max=10&ord erby=apiso.creationdate.desc&f=pjson&dojo.preventcache=

74 XML: Serviço CSW SNIG - Pedido HTTP/GET URI dos metadados de um CDG/SDG GetRecordById&version=2.0.2&id=494831b765d248f09bdd017e810ce15e &outputformat=text/xml&outputschema= /gmd Serviço REST SNIG b765d248f09bdd017e810ce15e HTML: tailspretty.page?uuid=494831b765d248f09bdd017e810ce15e tails.page?uuid=494831b765d248f09bdd017e810ce15e

75 Clientes CSW Geoportal INSPIRE Metasearch Plug-in QGIS CSW Client for ArcGIS

76 Muito obrigado! Questões? Henrique Silva,