A situação atual da futura norma ISO IEC Engenharia de software e de Sistemas: Testes de Software. Dr. Antonio Carlos Tonini

Transcrição

1 A situação atual da futura norma ISO IEC Engenharia de software e de Sistemas: Testes de Software Dr. Antonio Carlos Tonini 1

2 Escopo Antecedentes Propósito da ISO IEC Estrutura do JTC1 WG7 Ciclo de vida das normas ISO Estrutura e conteúdo da ISO IEC Situação atual da norma Situação atual da norma no Brasil Comité brasileiro Participação 2

3 Antecedentes Principais documentos do conhecimento em testes de software (STBok): IEEE 829, IEEE 1008, BS /-2, IEEE 1028 Conflitos de termos e definições: nível, fases, etapas, Inexistência de tratamento: Política organizacional de testes e de qualidade Gerenciamento do processo de testes Testes não funcionais 3

4 Propósitos Ser uma norma genérica para: suportar vários domínios alguns são mais orientados à padrões (ex: segurança, telecomunicações) alguns estão ficando mais regulados (ex: área financeira) atender diversas abordagens: cachoeira, iterativa e ágil Projetos novos e manutenção sistemas de informação e sistemas embarcados Ser uma norma certificadora (Partes1, 2 e 3) 4

5 Estrutura da International Standards Organizations CS/ITTF ISO IEC UN/ITU-T TC176 JTC 1 TC56 SC65A Quality Management Information Technology Dependability Functional Safety SC6 SC7 SC27 SC37 Telecommunications Systems and Software Engineering IT Security Techniques Biometrics SC7 WGs ITTF Information Technology Task Force CS Central Secretariat UN United Nations ITU-T International Telecommunications Union (Telecommunications Sector) JTC Joint Technical Committee 1 5

6 Estrutura do JTC 1 SC7 SWG1 SWG5 Business Planning Group Standards Management Group Secrétariat SC7 SWG22 Vocabulary Maintenance Life Cycle Process Harmonization Advisory Group (LCPHAG) Stuart Reid (coordinator) Tafline Murnane (secretary) WG1A WG7 WG21 WG26 IT Governance Life Cycle Management Software Asset Management Software Testing WG2 WG10 WG23 WG28 Systems & Software Documentation Process Assessment Systems Quality Management CIF Usability WG4 WG19 WG24 WG40 Tools and Environment Techniques for Specifying IT Systems SLC Profiles and Guidelines for VSE IT Governance WG6 Software Product Measurement and Evaluation WG20 Software Engineering Body of Knowledge WG25 IT Service Management WG42 Architecture 6

7 Membros P e O do JTC 1 SC7 P Members : Australia ( SA ) Belgium ( NBN ) Brazil ( ABNT ) China ( SAC ) Colombia ( ICONTEC ) Czech Republic ( CNI ) Denmark ( DS ) Finland ( SFS ) France ( AFNOR ) Germany ( DIN ) India ( BIS ) Iran, Islamic Republic of ( ISIRI ) Ireland ( NSAI ) Israel ( SII ) Italy ( UNI ) Ivory Coast Japan ( JISC ) Kazakhstan ( KAZMEMST ) Korea, Republic of ( KATS ) Luxembourg ( SEE ) Netherlands ( NEN ) New Zealand ( SNZ ) Peru ( INDECOPI ) Poland ( PKN ) Portugal ( IPQ ) Romania ( ASRO ) Slovakia ( SUTN ) South Africa ( SABS ) Spain ( AENOR ) Sweden ( SIS ) Switzerland ( SNV ) Thailand ( TISI ) USA ( ANSI ) Ukraine ( DSSU ) United Kingdom ( BSI ) Venezuela ( FONDONORMA ) O Members: Argentina ( IRAM ) Austria ( ON ) Cuba ( NC ) Dominican Republic ( DIGENOR ) Estonia ( EVS ) Ethiopia ( QSAE ) Hong Kong, China ( ITCHKSAR ) Hungary ( MSZT ) Iceland ( IST ) Indonesia ( BSN ) Kenya ( KEBS ) Malaysia ( DSM ) Mexico ( DGN ) Norway ( SN ) Philippines ( BPS ) Russian Federation ( GOST R ) Serbia ( ISS ) Turkey ( TSE ) Uruguay ( UNIT ) Participating Countries: 37 Observing Countries: 19 7

8 Ciclo de vida do desenvolvimento das normas ISO Preliminary work item (PWI) 2/3 membros P Menos que 25% rejeição JTC1 / WG 1ª revisão 5 anos Proprosal New (PN) JTC1 / WG Working Draft (WD) Draft International Standard (DIS) Disposition of comments(dc) Erros técnicos e complementos Final Draft International Standard (FDIS) Final International Standard (FIS) Publication Stage (PS) 2ª revisão 3 anos nª revisão cada 3 anos Paises 8

9 Disposition of comments 9

10 Estrutura da futura ISO IEC Parte 1 Conceitos e Vocabulário BS Parte 3 Documentação Parte 2 Processos de Testes Parte 4 Técnicas de testes IEEE 829 BS IEEE 1008 BS

11 Estrutura da futura ISO IEC Parte 1 Conceitos e Vocabulário BS Parte 3 Documentação Parte 2 Processos de Testes Parte 4 Técnicas de testes IEEE 829 Parte 5 Teste dirigido por palavra-chave BS IEEE 1008 A partir de mai/2013 BS Parte 6 - ISO IEC Processo de avaliação para testes de software 11

12 Linha do tempo da ISO IC Parte 1, 2 e 3 Parte 4 Parte 5 Parte 6 WD CD 12

13 Parte 1: Conceitos e vocabulário Principais conceitos sobre: testes de software relacionamento testes x desenvolvimento x manutenção implicações sobre os modelos de ciclo de vida automação Diferentes abordagens de testes (partindo dos principais documentos de referência) Vocabulário 13

14 Parte 2: Processos de Testes Processos de testes em nível Organizacional Processos de Gestão de Testes Processos de Testes Estáticos Processos de Testes Dinâmicos 14

15 Parte 2: Instanciamento dos Processos de Testes Políticas Políticas de Testes Feed back Estratégias de Testes Estratégias de Testes Estratégias Feed back Gestão dos Projetos de Testes Gestão dos Projetos de Testes Gestão dos Projetos de Testes Planos Planos p/ nível Diretivas Medidas Gestão Gestão para para os os níveis níveis tipos tipos de de testes testes Gestão para para os os níveis tipos tipos de de testes Gestão para os níveis e tipos de testes Gestão Gestão para para os os níveis níveis e tipos tipos de de testes testes dinâmicos dinâmicos Gestão Gestão para para os os níveis níveis e tipos tipos de de testes testes dinâmicos Gestão Gestão para para os os níveis níveis e tipos tipos de de testes testes dinâmicos dinâmicos Planos p/ nível Diretivas 15

16 Parte 2: Processos de testes organizacionais Desenvolvimento da especificação de testes Rascunho [Revisão considerável exigida] [Nenhuma mudança] [Nada detectado] Aprovação da especificação Ganho de consenso Publicação da especificação de testes Especificação publicada Monitoramento e controle do uso da especificção de testes Especificação alterada Revisão da especificação de testes [Imodificações identificads ou correções necessárias] [Pequenas revisões] Alteração da especificação de testes 16

17 Parte 2: Processos de gestão de testes Processo Organizacional de testes organizacao de testes Feedback sobre a documentação Processos de Gestão de testes Mudanças no plano de testes Relatório Planejamento de testes Plano de testes Monitoramento e Controle Encerramento periódico Diretivas Técnicas Resultados Diretivas de controle Ajustes Diretivas técnicas Medidas Processos de testes estáticos Processos de Gestão de testes Processos de testes dinâmicos 17

18 Parte 2: Processos de planejamento de testes Entendimento do contexto Escopo Plano de teste Publicado Plano de teste aprovado Publicar o plano de testes Organizar o plano de testes Rascunho do Plano de teste Ganhar consenso do plano Identificar e analisar os riscos Equipe e cronograma Documentar o plano de testes Riscos analisados Identificar os tratamentos dos riscos Determinar as equipes e os cronogramas Tratamento de riscos Projetar a estratégia de testes Estratégia de Testes Medidas 18

19 Parte 3: Documentação Organização Testes Política de testes Estratégia de testes Projeto de teste Plano do projeto de testes Relatório de finalização Exemplos dos documentos (e não de templates) Especificação dos testes Resultados dos testes Incidentes nos testes Relatório de teste do ambiente Relatório da situação dos teste Relatório de finalização 19

20 Parte 4 : Técnicas Técnicas para projeto de Casos de teste Testes Estáticos Inspeções, walkthroughs,... Testes Dinâmicos Caixa preta, caixa branca Testes não funcionais Testes de segurança, desempenho, usabilidade,... Medição de testes (ex: para cobertura) Apêndices Exemplos 20

21 Parte 5: Testes orientados por palavras chaves Padrão para casos de testes orientados por um conjunto pré-definido de palavras-chave, abordando: Conceito de palavras-chave, organização por camadas e associação com os dados Aplicação de testes orientados para palavras-chave Tarefas a serem realizadas Sugestões para elaboração de Frameworks 21

22 Parte 6: Processo de avaliação Modelo de avaliação de um processo de teste de software para avaliações de conformidade com um modelo de referência Alinhamento com as normas: ISO / IEC (Avaliação de Processos - Requisitos para realização de avaliações) ISO / IEC ( Avaliação de Processos - Requisitos para os modelos de processo) 22

23 Situação da norma no Brasil Parte 1 e 2: já foram traduzidas e revisadas em fase de estruturação de lay-out Parte 3: Início da tradução Oportunidades: Trabalho coletivo Vocabulário comum do grupo de software 23

24 Frequência às reuniões presenciais Participantes: CE: é considerado o comité com mais participações

25 Comité brasileiro da futura norma CE: Coordenador: Fernando Gebara (Microsoft) Coordenador técnico: Emerson Rios (Rio Soft) Secretário: George de Oliveira Fialkovitz Jr (RSI Informática) 25

26 Por que participar? Direitos: acesso a todo material, inclusive a versão mais atual da norma Formular sugestões estudadas e fundamentadas Obrigações: O Brasil é considerado um dos países que mais tem a contribuir com a cultura e conhecimento em assuntos de software Termo de compromisso de NÃO divulgar e usar a norma (ainda não oficial) Participar efetivamente 26

27 Como participar Fazer contato com a coordenação do comité: Emerson: rios.emerson@gmail.com George: george@rsinet.com.br Tonini: antonio.tonini@usp.br 27