Wiki(pédia) depois da edição básica robôs e semântica

Transcrição

1 Wiki(pédia) depois da edição básica robôs e semântica

2

3 474 milhões Pessoas que consultam a Wikipédia todos os meses

4 6.º Site mais visitado do mundo

5 21 milhões Número total de artigos da Wikipédia

6 284 Número de línguas e dialetos com versões da Wikipédia

7 75 Número de funcionários

8 100 mil Número de editores ativos da Wikipédia

9 11 Anos de vida, apenas

10 0,00 Gastos em publicidade

11 0,00 Custo suportado pelos utilizadores

12 Imagine um mundo onde é dada a todas as pessoas a possibilidade de terem livre acesso a todo o conhecimento humano. Jimmy Wales

13 WIKI-PÉDIA Todos os leitores são potenciais editores

14 WIKI-PÉDIA Todos os leitores são potenciais editores E os informáticos são especialmente bem-vindos

15 Agenda Wikimedia Foundation e Wikimedia Portugal Utilização e contribuição Infraestrutura da Wikimedia Linked/open data e web semântica Robôs

16 O queé a Wikimedia? Instituiçãofundadorae gestorade projectos de conteúdo livre 75 funcionários + M voluntários 27 capítulos locais Gestão técnica(e não de conteúdo) de +300 servidores +21M de artigos +12M imagens, vídeos e arquivos

17

18 6º Alexa 164º Alexa Enciclopédia em 284 línguas 21M artigos 718k português Actualização em tempo real ACM: doi: / Vandalismo não afecta fiabilidade Nature 438: doi: /438900a. Repositório multimédia 12M ficheiros Várias licenças GNU FDL, CC, domínio público

19 E a WM Portugal? Capítulo local da WMFoundation associação sem fins lucrativos 100% voluntários wikimedia.pt Partilhar e apoiar localmente os objectivos da Wikimedia Foundation, da sua comunidade e dos seus projectos.

20 Autor: Nikola Smolenski & Chris Applegate Licença: CC-BY-SA-2.5 Edição

21 Quem pode editar? TODOS

22 Quem pode editar? TODOS Independentemente da formação: Especialistas, professores e investigadores Estudantes, curiosos e autodidatas Independentemente da motivação: Beneficência, voluntariado, gosto de ensinar Orgulho, corrigir, atualizar conteúdos

23 Como se pode editar? Criando conteúdo original Traduzindo Removendo vandalismo Gralhas ortográficas Referenciação e revisão Listar tópicos a serem expandidos Encaminhando outros voluntários Helpdesk

24 Algumas regras básicas Relevância enciclopédica e notoriedade Interdição de pesquisa inédita Imparcialidade Fontes e referências para verificação Respeito pelos direitos de autor Verificação pelos pares Consenso

25 Como editar um artigo

26 Onde pode editar Online (acesso a botões) Offline (em código) Word, Bloco de notas Notepad++ 26

27 Edição Código próprio(sintaxe wiki) Nãoé programação, é formataçãode texto Aceita HTML <b></b>, <i></i>, <table></table>, <br>, Pode-se escrevercódigoouusarbotõesà la Office 27

28 Edição 2 Guia disponível online no sítio da Wikimedia Portugal wikimedia.pt 28

29 Mudanças registadas

30 Libertação de conteúdo Licença Creative Commons Attribution-Share Alike Permissão para reutilização e redistribuição Permissão para criação de obras derivadas Atribuição da autoria Transmissão com a mesma licença Se registar uma conta o nome fica guardado, caso contrário, o IP do computador de onde editou

31 InfraestruturaWMF

32 InfraestruturaWMF Squid: 77 (128cpu) Apache: 99 (768cpu) MySQL: 33 (196cpu) Misc: 42 (152cpu) Search: 14 (112cpu) Image scalers: 7 (52cpu) servidores

33 Estatísticas comportamentais Fonte: A Beautiful WWW

34 Estruturação de conteúdos Extracção Transformação/Limpeza Carregamento Extracção Transformação/Limpeza Carregamento Formatação

35 Conteúdos estruturados

36 Conteúdos estruturados

37 Automatização de conteúdos

38 Automatização de conteúdos

39 Dados de várias fontes podem ser relacionados Linked Data A vossaapp: e.g. Facebook+ LinkedIn + Google Maps + maisgasolina.com + hagreve.com Web semântica

40 Web aberta Dados são cada vez mais publicados em formato aberto e estruturado Open Data e.g. PORdata, dados.gov.pt, BN, EuroStat, data.gov, wikidata(embrião) Fonte: Commons LOD_Cloud_Diagram 2007 e 2011

41 A vossa App <eduardo> App, qual é o nome do Eduardo? <App> O nome do Eduardo é Eduardo Pinheiro'.

42 A vossa App <eduardo> App, qual é o nome do Eduardo? <App> O nome do Eduardo é Eduardo Pinheiro'. <eduardo> App, mostra-me imagens do Eduardo <App> Aqui vai uma:

43 A vossa App <eduardo> App, qual é o nome do Eduardo? <App> O nome do Eduardo é Eduardo Pinheiro'. <eduardo> App, mostra-me imagens do Eduardo <App> Aqui vai uma: <eduardo> App, descreve o Eduardo <eduardo> App, descreve o Eduardo <App> Via Facebook: sexo masculino, 30 anos <App> Via LinkedIn: electrotécnico, professor <App> Via Youtube: upload vídeos de música, stream vídeos infantis <App> Via Google Maps: Vive em <App> Via PorData: Probabilidade filhos = 0.3, casa própria 0.2, carro 0.7, empregado 0.8

44 Robôs Agentes de manipulação massiva de artigos Bibliotecas em Python,.NET, Java, Ruby Python Wikipedia Robot Framework, corre em qualquer wiki Script paraimportardados é muito simples, trabalhar sobre eles na linguagem nativa e exportar

45 Robôs Códigobase disponibilizado, bastaeditarporcima, quersobrea versãoonline quersobreum dump Interação controlada por ficheiros Lista de artigos a editar pode ser obtida pelo robô Pesquisa de material sob copyright, find-and-replace texto, conversãohtml-wiki, criaçãode artigos, categorização, ortografia, limpeza de sintaxe

46 Robôs exemplo concelho = ["Vila Nova de Gaia"] inforegex= re.compile(u'\{\{\s*info\/freguesia de Portugal\n((?:\s*\.*\=.*)*)\n*\}\}', re.i) campos = [u"nome", u"imagem", u"legenda", u"brasão", u"bandeira", u"mapa", u"latp", u"lonp", u"concelho", u"área", u"população", u"censo", u"feriado", u"orago", u"gentílico", u"codpostal", u"website", u" "] defmain(): site = wikipedia.getsite() page = wikipedia.page(site,u"predefinição:vila Nova de Gaia/Freguesias") lista = pagegenerators.namespacefilterpagegenerator(pagegenerators.linkedpagegenerator(page ),[0]) infotext = re.search(inforegex,text) for campo in campos: line = u"" print campo

47 Robôs exemplo

48 Robôs exemplo

49 Robôs exemplo prático WikiLovesMonuments.Org.Pt: 160k para categorizar, linkar, georef, confirmar e colocar em artigos

50 Robôs exemplo prático WikiLovesMonuments.Org.Pt: 160k para categorizar, linkar, georef, confirmar e colocar em artigos Vamos passar os espanhóis?

51 Boas edições! Obrigado.

52 Contacto Donativos Associação Wikimedia Portugal Caixa Geral de Depósitos NIB: