L A C La bora tory for A dva nc ed C olla bora tion

Transcrição

1 Publicação de Dados Governamentais no Padrão Linked Data 5.1 Ferra m enta s pa ra public a ç ã o de da dos Karin Breitman José Viterbo Edgard Marx Percy Salas 1 L A C La bora tory for A dva nc ed C olla bora tion

2 2 Triplify

3 R equerim entos S oftw a re Lic enç a GNU Lesser General Public License. R equis itos Web S erver Apache (recomendado) IIS P H P (ready), Ruby/Python (dev) B a nc o de D a dos MyS QL, S QLite, Oracle, DB2, MS S QL PostgreS QL 3

4 Triplify O bjetivo E xpor a semântica disponível em R DBMS de uma forma simples. O que é Um plugin para aplicações Web PHP, R uby/p ython (dev). O que fa z Disponibiliza os dados de BD s relacionais em triplas. 4 O que g era Arquivos R DF, JS ON e Linked Data

5 Triplify : C onfig ura ç ã o Consultas SQL selecionando a informação, que gostariam que seja disponível publicamente (Open Data) S E LE C T id, name AS foaf:name FR OM users 5

6 Triplify : E s trutura S Q L Q uery Primeira coluna dever conter identificadores para serem utilizados para gerar URI s das Instâncias Select id, name AS foaf:name FROM users Nome das colunas utilizados para gerar as propriedades renomeando as colunas da tabela 6 Select id, name AS foaf:name FROM users

7 Triplify : E s trutura S Q L Q uery Consultas devem retornar valores literais ou referencias para outras ins tancias 7

8 Triplify : E xem plo LO C A D O R A $triplify['objectproperties']=array ('customer'=> "select customer_id as id, concat(concat(first_name,' '),last_name) as 'foaf:name, first_name as 'foaf:firstname, last_name as 'foaf:surname, store_id as 'customerof, SHA( ) as 'foaf:mbox_sha1sum, address_id as 'liveat, create_date as 'dcterms:created from customer, ) 8 $triplify['objectproperties']=array ( 'sioc:address'=>'address, 'customerof'=>'store, 'liveat'=>'address ); $triplify['classmap']=array( 'customer'=>'foaf:person, 'store'=>'gr:locationofsales, 'address'=>'vcard:address' );

9 Triplify : Integ ra ç ã o em A pps. Web Acrescentar o diretório do Triplify a raiz da aplicação. Definir consultas SQL e ajustar o arquivo de configuração. Possibilitar o acesso direto ao banco de dados relacional através: Objeto PDO. Driver de conexão Mysql. Utilizar um outro framework para abstração de base de dados (ODBC). 9

10 10 D 2R Q e D 2R S erver

11 R equerim entos S oftw a re Licença GNU General Public License Requerimentos J a va 1.4 ou pos terior B a nc o de D a dos M ys QL, Oracle, MS S QL PostgreS QL e ODBC (não automática). 11

12 D 2R Q e D 2R S erver : Introduç ã o Objetivo Permitir que aplicações consigam ter uma RDF-view em um banco de dados non-rdf. O que é Plataforma desenvolvida em Java para publicação de dados de BD em grafo RDF (on-the-fly) O que gera RDF/XML (default), RDF/XML-ABBREV, N3, N-TRIPLE. Quais BD s Suporta Oracle, MySQL, PostgresSQL, Microsoft SQL Server, fontes de dados ODBC (sem geração automática). 12

13 D 2R Q e D 2R S erver : Introduç ã o O que P erm ite Mapeamento do BD para grafo virtual RDF Consultas: linguagem SPARQL RDF dumps Acessar a informação do BD como Linked Data sobre a Web. 13

14 D 2R Q 14 D 2R Q M a pping La ng ua g e Linguagem declarativa que descreve o mapeamento. D 2R S erver servidor HTTP que fornece uma visão Linked Data e permite consultas SPARQL. Tool que usa o D2RQ mapping para mapear o conteúdo do BD D 2R Q E ng ine plug-in para Jena e Sesame Semantic Web toolkits.

15 A rquitetura da pla ta form a D 2R Q 15

16 D 2R Q : Tipos de M a pea m ento [1] A utom á tic o Cria um arquivo de m apeam ento default analisando o esquem a do BD. Tabela = Classes; Colunas = Propriedades; generate-mapping [-u username] [-p password] [-d driverclass] [-o outfile.n3] [-b base uri] jdbcurl generate-mapping -o m a pping.n3 -d driver.class.name -u db-user -p db-password jdbc:url:... E x em plo 16

17 D 2R Q : Tipos de M a pea m ento [2] C us tom iza do M odificar o arquivo g erado pelo g erenate-m apping Utilizar v ocabulários conhecidos foaf, sioc, dc, goodrelations, etc. 17

18 D 2R Q : M a pea m ento C us tom iza do M odificando o arquivo m a pping.n3 2. D efinir c onexã o a o B D map:m yd atabase a d2rq:d atabase; d2rq:jdbcd S N "jdbc:mysql://localhost/mydb"; d2rq:jdbcd river "com.mysql.jdbc.d river"; d2rq:username "us er"; d2rq:password "pas sword". 3. D efinir a s entida des map:people a d2rq:classmap; d2rq:uripattern d2rq:condition User.deleted=0. 18

19 D 2R Q : M a pea m ento C us tom iza do 1. Adicionar propriedades para as entidades map:people a d2rq:classmap; d2rq:uripattern ; d2rq:condition User.deleted=0 ; d2rq:class foaf:p erson. S (ClassMap) map:people a d2rq:classmap. map:name a d2rq:p ropertyb ridge; d2rq:belongstoc lassm ap map:p eople; d2rq:property foaf:nick; d2rq:column User.name. P O 19 (D ata Properties)

20 D 2R Q : M a pea m ento C us tom iza do 1. Adicionar propriedades para as entidades map:people a d2rq:classmap; d2rq:uripattern ; d2rq:condition User.deleted=0 ; d2rq:class foaf:p erson. S (ClassMap) map:mbox_sha1 a d2rq:p ropertyb ridge; d2rq:belongstoc lassm ap map:p eople; d2rq:property foaf:mbox_sha1sum; d2rq:sqle xpression S HA1(CONCAT( mailto:, User. )). P O 20 (D ata Properties)

21 D 2R Q : M a pea m ento C us tom iza do 1. Link as entidades map:photos a d2rq:classmap; d2rq:uripattern ; d2rq:class foaf:image. map:photo a d2rq:p ropertyb ridge; d2rq:belongstoc lassm ap map:p eople; d2rq:property foaf:made; d2rq:uripattern (Photo.UserID is a foreign key to User.ID) 21 map:photo a d2rq:p ropertyb ridge; d2rq:belongstoc lassm ap map:p eople; d2rq:property foaf:made; d2rq:join Us er.id = P hoto.userid ; d2rq:referstoc lassm ap map:p hotos. (Object Properties)

22 D 2R S erver : S ta rt the s erver Uma vez que temos o arquivo de mapeamento m a pping.n3 executamos o seguinte comando d2r-server mapping.n3 Agora podemos navegar sobre o grafo RDF, atraves do servidor D2R- Server 22

23 23

24 O penlink V irtuos o R D F V iew s General Public License e Proprietario 24

25 V irtuos o R D F V iew s : Introduç ã o O bjetivo Converter dinamicamente dados relacionais em R DF e expô-lo no Virtuoso-hosted S P AR Q L endpoint.. O que é Virtuoso R DF Views mapea dados relacionais em R DF e permite que a representação do R DF possa ser personalizada. O que g era R DF/XML. (Quad S torage) Qua is B D s S uporta Oracle, MS S erver, DB2, Informix, Progress, MyS QL, Ingres, Firebird, PostgreS QL e ODBC ou JDBC accesiveis R DBMS. 25

26 V irtuos o R D F V iew s : M a pea m ento [1] Definição de cada tabela em classes RDFS peo: < ClassMap peo:people a rdfs:class ; rdfs:label People" ; rdfs:comment "An OpenLink People". Properties 26 foa f:na m e a rdf:property ; rdfs:domain peo:people ; rdfs:range xsd:string; rdfs:label people name". Data Properties foa f:m a de a rdf:property ; rdfs:domain peo:people ; rdfs:range ; photo:photo rdfs:label photo id". Object Properties

27 V irtuos o R D F V iew s : M a pea m ento [2] Construir Subject IRI s para cada classe utilizando as chaves primarias de peo:us cada er_iri a tabela rdf:property ; rdfs:domain peo:people ; rdfs:range xsd:string; rdfs:label people id". sparql prefix peo: < create iri class peo:us er_iri " (in user_id varchar not null). 27

28 V irtuos o R D F V iew s : M a pea m ento [3] Construir Predicados IRI s para cada classe utilizando o resto de colunas sparql de cada tabela prefix qs: < prefix peo: < prefix pho: < 28 c rea te qua d s tora g e qs:default from OPLWEB.DBA.PEOPLE as people_tbl from OPLWEB.DBA.PHOTOS as photos_tbl { create qs:people as graph < { peo:user_iri(people_tbl.u S E R _ID ) a peo:people as qs:people_people ; foaf:name people_tbl.n A M E as qs:people_peoplename ; }.

29 Triplify D 2R S erver V irtuos o R D F V iew s Tec nolog ia PHP Java M iddleware S olution S P A R QL E ndpoint Ling ua g em de M a pea m ento - S im S im S QL RD F based RD F based G era ç ã o de m a pea m ento M anual S em i- autom ático M anual E s c a la bilida de M edia Alta (Não S PARQL) M edia Alta Link: 29

30 P rinc ipa is R eferênc ia s 30 D2RQ, site Consultado 20/05/10 W3C Group, site Consultado 21/05/10 Triplify, site Consultado 21/05/10 Mapping Relational Data to RDF with Virtuoso's RDF Views, site Consultado 19/05/10