Cláudio Piccolo Fernandes 1, Walkiria Cordenonzi 2

Transcrição

1 METASOFT MÉTODO DE AVALIAÇÃO Cláudio Piccolo Fernandes 1, Walkiria Cordenonzi Rua dos Andradas, 1614 euclaudio@via-rs.net, walkiria@unifra.br Abstract Currently, the software users, are more demanding in the acquisition of its products. The consequence for the developer companies of software is the search of the development of their products with assured quality. One of the forms to search and to improve the quality can be made through the use of an evaluation method. The present work, has as objective main to present a method of evaluation for the quality of product of software Metasoft This method takes care of to the characteristic proposals in norms ISO/IEC 9126 and ISO/IEC wich describe, respectively, a model of quality and a process of evaluation. The METASOFT aims to provide to the companies or developers of softwares a way that they can verify the quality of developed software. It is important to stand out that the main objective of evaluation of product software is to supply the result of the quality of the product of software that be understandable, acceptable and trustworthy for any of the interested people, either the developer or the final user. Keywords: Quality, Software Quality, Method of Evalution. Resumo Atualmente, os usuários de software estão mais exigentes na aquisição de seus produtos. A conseqüência para as empresas que desenvolvem software é a busca do desenvolvimento de seus produtos com qualidade assegurada. Uma das formas de buscar e melhorar a qualidade é através da utilização de um Método de Avaliação. O presente trabalho tem como objetivo principal apresentar um Método de Avaliação para Qualidade de Produto de Software METASOFT. Este método atende as características propostas nas Normas ISO/IEC 9126 e ISO/IEC que descrevem, respectivamente, um modelo de qualidade e um processo de avaliação. O METASOFT visa proporcionar às empresas ou desenvolvedores dos softwares uma maneira para que possam verificar a qualidade do software desenvolvido. É importante ressaltar que o objetivo principal de avaliação de produto de software é fornecer resultados sobre a qualidade do mesmo que sejam compreensíveis, aceitáveis e confiáveis por quaisquer das partes interessadas, seja pelo desenvolvedor ou o usuário final. Palavras-Chaves: Qualidade, Qualidade de Software, Método de Avaliação. 1. Introdução A preocupação com a melhoria da qualidade de produto e de serviço das empresas é de fundamental importância. Porém não basta que ela exista, deve ser reconhecida e medida pela satisfação do cliente.

2 2 Para aprimorar a qualidade de seus programas, as empresas desenvolvedoras de softwares estão fazendo a avaliação de seus produtos através de algum tipo de certificação emitida com base numa padronização. Com o propósito de padronização, a Organização Internacional para Padronização ISO lançou um conjunto de normas de qualidade. Junto com ela a IEC - Comissão Eletro-Técnica Internacional, elaboraram um conjunto de normas que tratam, especificamente, sobre a atual padronização mundial para a qualidade de produtos de software. As normas internacionais de avaliação de produto de software são recentes, algumas ainda em elaboração, e a compreensão completa do processo de avaliação exige a análise de duas normas, ISO/IEC 9126 e ISO/IEC A ISO/IEC 9126 descreve um modelo de qualidade e alguns exemplos de métricas que podem ser utilizadas para fazerem avaliação de produto de software. Já a ISO/IEC 14598, oferece uma visão geral dos processos de avaliação de produtos de software e fornece guias de requisitos para avaliação. Este artigo tem como principal objetivo apresentar um Método de Avaliação de Qualidade de Software METASOFT - baseado na norma ISO/IEC 9126, Parte 1, juntamente com a norma ISO/IEC Parte 5, a fim de que seja possível fazer uma avaliação do software desenvolvido. 2. Método de Avaliação Para que esse método seja elaborado de uma maneira correta, é importante levar em consideração os aspectos relevantes que serão descritos nas seções seguintes. O método de avaliação proposto neste trabalho e descrito a seguir, na forma de questões, possui duas maneiras de serem respondidas: uma em forma de escolha simples e; outra em forma de múltipla escolha. Conforme demonstrado na Figura 1, as perguntas com respostas de múltipla escolha possuem uma divisão de 0 a 4. Cada número representa um valor, a saber: 0 Total ausência: Indica que o critério avaliado está ausente. 1 Baixa presença: Indica um baixo grau de presença do critério. 2 Moderada presença: Indica um grau de presença moderada no critério. 3 Alta presença: Indica um alto grau de presença do critério, mas não de forma plena. 4 - Total presença: Indica que não há dúvidas de que o critério está totalmente presente. NA O atributo avaliado não se aplica ao software. FIGURA 1: RESPOSTA DE MÚLTIPLA ESCOLHA Existe também, tanto nas questões de múltipla escolha como de escolha simples, um grau de importância () da questão dependendo da relevância da mesma e do software analisado. O próprio avaliador indicará o grau de importância segundo a sua própria concepção. Este grau pode variar de 1 a 4, onde: 1 Significa um baixo grau de relevância em relação ao software analisado. 2 Significa um grau de relevância moderada em relação ao software analisado. 3 Indica um grau de relevância alto em relação ao software analisado. 4 Indica que o grau de relevância é muito importante em relação ao software analisado.

3 3 Cabe salientar que no caso da questão não ser aplicada (NA), é ignorado seu grau de importância. Já o processo sugerido para as questões de escolha simples obedece a uma escala, a saber: SIM: Indica um valor satisfatório e seu peso representa o valor 1. PARCIAL: Indica um valor mediano, e seu peso representa o valor 0,5. NÃO: Indica um valor insatisfatório, e seu peso representa o valor 0. NA: O atributo avaliado não se aplica ao software A seguir é apresentado o questionário, que deverá ser respondido conforme os critérios acima mencionados. CARACTERÍSTICA FUNCIONALIDADE: 1) As funções requeridas no software estão todas disponíveis? 2) O software possui descrição de um possível conhecimento específico necessário para trabalhar com o mesmo? 3) O software possui recursos para acesso seletivo? (Ex: senha para cada usuário ou para cada grupo de usuários.) 4) O software realiza o que foi proposto de forma correta? 5) Qual o grau de facilidade da troca de dados ou informações com outros sistemas? 6) O software está de acordo com as normas e leis, sem descumprir nenhuma lei vigente? (Ex. Alíquotas de impostos, entre outros) 7) O software possui recursos para evitar o acesso de pessoas não autorizadas ao sistema? 8) A empresa desenvolvedora do software oferece serviço de manutenção do software? CARACTERÍSTICA CONFIABILIDADE: 9) O software possui opção para fazer backup? 10) O software nunca apresentou falhas durante sua utilização? 11) Qual o grau de ocorrência dessas falhas, caso ocorra?

4 4 12) Quando ocorrem falhas, os dados não são perdidos? 13) O Software consegue recuperar os dados caso ocorram falhas? Parcial NA 14) As mensagens de erro, caso ocorra, explica de forma clara a conseqüência que causou este erro? CARACTERÍSTICA USABILIDADE: 15) Qual o grau de facilidade para se aprender a usar o software? 16) É fácil treinar novos usuários para usar o software? 17) O software possui manual de instruções para operá-lo? 18) Qual o grau de compreensão das instruções dos manuais, caso existam? 19) As informações nos manuais podem ser encontradas facilmente? 20) O usuário possui um meio de contato para com o fabricante? 21) Qual o grau de indicação dos requisitos básicos de hardware necessários para colocar o produto em uso (memória requerida, espaço em disco, cd-room, entre outros)? 22) O software possui uma apresentação visual adequada? 23) As localizações dos menus são uniformes? 24) Os menus são auto explicativos? 25) O software possui um menu de ajuda? 26) Quando é preciso executar uma tarefa que já havia sido realizado anteriormente, foi fácil lembrar como deveria ser feita?

5 5 27) Ao utilizar a ajuda, qual o grau de facilidade na sua utilização? 28) Qual o grau de facilidade para executar o que a ajuda recomendou, em relação a uma tarefa que não se havia conseguido realizar? 29) Qual o grau de facilidade de se trabalhar com o software? CARACTERÍSTICA EFICIÊNCIA: 30) Quando o software realiza algum tipo de operação o tempo de resposta (velocidade) do mesmo é satisfatório? 31) O software realiza todos os recursos de forma otimizada? Parcial NA 32) O tempo de espera para o software ser inicializado é aceitável? Parcial NA CARACTERÍSTICA MANUTENIBILIDADE: 33) Ao ser instalada uma atualização da versão, essa funciona corretamente? 34) Ao ocorrer um erro no software é fácil localizar onde ocorreu esse erro? 35) É possível fazer adaptação no software por parte do usuário. (Ex: mudança de moeda utilizada no produto) 36) Quando se faz uma alteração no software, este não influência nas demais partes do produto? 37) Ao ser executado comandos que possam ter graves conseqüências quando modificados, o programa mostra alguma mensagem de advertência solicitando confirmação para executa-lo? 38) Qual o grau de facilidade em testar o software depois de feita uma correção no mesmo? 39) O programa fonte possui uma identação com estilo? Parcial NA

6 6 CARACTERÍSTICA PORTABILIDADE: 40) O software roda em mais de um sistema operacional? 41) É fácil a adaptação a outros ambientes? Parcial NA 42) O software possui manual de instalação? 43) O software faz sua instalação de forma automática? 44) Qual o grau de facilidade para se instalar o programa com sucesso seguindo as instruções contidas no manual de instalação, ou na tela? 45) Qual o grau de facilidade em se substituir uma versão por outra? 2.1 Interpretação dos Resultados O processo sugerido para a avaliação de cada critério se dará utilizando uma equação matemática conhecida como regra de três simples. Para que se possa chegar ao resultado final, e verificar assim qual o nível do software analisado, o critério de avaliação será dado de duas diferentes formas. A primeira será através das questões de escolha simples, e a segunda através das questões de múltipla escolha Questões de Escolha Simples Para se chegar ao resultado, devem ser seguidas as etapas mostradas na Tabela 1. Tabela 1: Etapas das questões de Escolha Simples Etapas Descrição Exemplo Passo 1 Contar o número de questões de escolha 25 simples exceto as NA Passo 2 Somar os Totais de SIM 19 Passo 3 Somar todos os de SIM 50 Passo 4 Somar os totais de NÃO 4 Passo 5 Somar os totais de PARCIAL 2 Passo 6 Somar todos os de PARCIAL e 3 Passo 7 Somar os totais de exceto os NA 63 Passo 8 Somar os totais dos Passos Passo 9 Aplicar a Regra de Três ( Passo % Passo 8-- X ) % 53 - X Passo 10 Resultado Parcial 84,12 Como se pode observar na Tabela 1, foram somados todos os graus de importância das respostas PARCIAL e multiplicadas por 0,5, pois como já comentado anteriormente cada uma das respostas possui um referido peso que foi o fator de multiplicação. No

7 7 caso das questões cuja resposta foi SIM/NÃO, não houve necessidade dessa multiplicação devido aos pesos serem respectivamente 1 e 0. Foram somados também todos os graus de importância () dessas questões, independente da resposta, ignorando somente os NA (Não se Aplica). Dessa maneira tem-se o total que representa os 100% para que se possa aplicar a Regra de Três. Após soma-se os graus de importância de SIM (Passo 3), mais os graus de importância de PARCIAL (Passo 6), para se poder chegar ao índice total alcançado pelo software Questões de Múltipla Escolha As questões possuem um valor que pode variar de 0 (zero) até 4 (quatro), ou o NA (Não se Aplica). Para que se possa chegar ao resultado final, a fórmula é semelhante a das questões de escolha simples, como pode ser visto na Tabela 2. Tabela 2: Etapas das questões de Múltipla Escolha Etapas Descrição Exemplo Passo 1 Contar o número de questões de 12 múltipla escolha exceto as NA Passo 2 Somar todos os e após multiplicar 34 x 4 = 136 Passo 3 Multiplicar o valor selecionado em 2 x 3 =6 cada questão pelo seu respectivo Passo 4 Somar todos os valores do Passo Passo 5 Aplicar a Regra de Três ( Passo % Passo X ) Passo 6 Resultado Parcial 75, % X Como pode ser visualizado na Tabela 2, foram somados todos os graus de importância e multiplicado por 4. Fator de multiplicação esse, usado para alcançar o total que representa 100%. Após, no Passo 3, foi multiplicado o valor marcado para cada questão e multiplicado pelo seu respectivo grau de importância. Somando-se todos os resultados do Passo 3, chega-se ao índice alcançado pelo software, para depois aplicar a Regra de Três Resultados Finais De posse dos dois resultados parciais multiplica-se o resultado das questões de escolha simples pelo número de questões aplicadas (Passo 10 x Passo 1). E multiplica-se do mesmo modo também o resultado das questões de múltipla escolha (Passo 6 x Passo 1). Para chegar-se ao resultado final, soma-se os dois resultados obtidos dessa multiplicação e divide-se pelo total geral de questões. No exemplo apresentado, o software analisado teve como resultado final o percentual de 81,40%, sendo considerado excelente e seu nível satisfatório, levando-se em conta o nível de pontuação segundo a norma ISO/IEC 9126, conforme pode ser visto na figura 2.

8 8 Valor medido 100% 80% 60% 30% Excelente Bom Regular Nível pontuado Satisfatório 0% Insuficiente Insatisfatório Escala para a métrica Níveis de Pontuação FIGURA 2: VALOR MEDIDO E NÍVEL DE PONTUAÇÃO, SEGUNDO A ISO/IEC Conclusão A qualidade é uma característica fundamental tanto do processo de desenvolvimento quanto do seu produto final. Atualmente, a busca pelo sistema ideal e cada vez mais perto da perfeição é o objetivo maior. Um fator importante a ressaltar, é que o envolvimento e comprometimento do usuário no processo de desenvolvimento do software, pois um dos fatores para a boa qualidade do software está relacionado com a aceitação do usuário para com o produto. A principal contribuição deste trabalho foi o desenvolvimento do método de avaliação para produto de software METASOFT. Este método foi baseado principalmente na norma ISO/IEC 9126 e poderá ser utilizado por equipes de desenvolvimento de software ou por quaisquer outras pessoas interessadas em avaliar a qualidade de seu produto. Existem diversos métodos de avaliação de produto de software propostos na literatura, (ROCHA, 2001) e (GLASDHEFF, 2000). O METASOFT se diferencia destes, pois inclui um grau de importância para todas as questões deste modelo. Com o uso deste grau consegue-se diferenciar a relevância da questão no software avaliado. 4. Referências Bibliográficas GLASDHEFF, Ana Paula Um instrumento para avaliação de um produto de software. UFC, Dissertação de Mestrado. Disponível em 16/08/2001. IS , International Standard Information Technology Software product evalution Part 5: Process for evaluators; May/ 1996 ISO , International Standard Information Technology Software quality characteristics and metris Part 1: Quality characteristics and sub-characteristics; Jan/1997 ROCHA, Ana Regina et.al Qualidade de Software Teoria e Prática. Editora Prentice Hall.