Business-Driven IT Management

Transcrição

1 Business-Driven IT Management Oracle Enterprise Manager: Empowering IT to Drive Business Value Application Quality Management Rafael Vicente System and Applications Management Oracle Corporation

2 Oracle Enterprise Manager 11g Hardware. Software. Complete. Event and Service Desk Connectors Services Cloud Integration Third Party Plug-ins Sun Ops Center Now Part of Oracle Enterprise Manager Product Family

3 Application Quality: Impacto nos Negócios Os clientes investem em software para prover um serviço melhor e com menos custo para seus clientes Mas um software de má qualidade colocam esses investimentos em risco Mais de 40% das aplicações são lançadas com entre 1 e 10 erros críticos [Software Is Deployed, Bugs and All, SD Times.] Cerca 80% do custo de desenvolvimento é aplicado na identificação e correção de problemas [IBM: The business value of software quality.] O custo de reparação de um erro depois da release do produto é até 100x maior que identificá-lo na fase de desenvolvimento [National Institute of Standards & Technology, 2002] Application Quality Management é mandatório para a agilidade dos negócios e para prover melhores niveis de serviço a baixo custo e risco

4 Satisfação do cliente Satisfação dos usuários Testes de alta qualidade resultam em usuários mais satisfeitos Efetividade do produto Confiabilidade do Software Velocidade do produto Escalabilidade do produto Sem teste Teste informal/formal Baseados em planos Escritos/outros Teste formal utilizando Ferramentas automatizadas 1 Results from Q Customer Satisfaction Survey. 2 Product Effectiveness is the average satisfaction ratings of the nine (9) product functionality items.

5 Estratégia Oracle para Quality Management Middleware DBMS Storage O/S Infrastructure Testing Tools Real Application Testing Application Infrastructure Changes Application Testing Application Tools Testing Suite Application Changes Ferramentas especializadas para teste de infraestrutura e aplicações Ferramentas best-of-breed provém testes de maior qualidade e eficiência Resulta em um produto mais confiável e de maior qualidade

6 Oracle Application Quality Management Alta qualidade de testes em todos os tiers da aplicação Testando mudanças dos aplicativos Application Testing Suite Garantir qualidade e performance com teste dos aplicativos fim-a-fim Testando mudanças de infraestrutura Real Application Testing Projetado e otimizado para testar as mudanças no tier do banco de dados Gerenciamento de dados para teste Data Masking Pack Realize os objetivos de segurança e compliance mascarando dados sensíveis no seu ambiente de teste Permite testes seguros e em escala de produção

7 Testando mudanças nos aplicativos <Insert Picture Here>

8 Oracle Application Testing Suite Solução integrada de testes assegurando qualidade, performance e disponibilidade Oracle Functional Testing Testes funcionais automatizados. Oracle Test Manager Gerenciamento do processo de teste: casos de teste, requisitos e tracking centralizados. Oracle Load Testing Testes de carga e performance automatizados Oracle Corporation Proprietary and Confidential

9 Oracle Functional Testing: Automated Functional & Regression Testing Automates functional & regression testing for Web, SOA and packaged applications OpenScript integrated scripting platform for functional and load testing Intuitive visual scripting interface simplifies test process Powerful Java IDE provides superior scripting extensibility Custom accelerators for EBS, Siebel, ADF & Web Services for efficient, optimized testing

10 Web Functional Testing Overview Web Functional Testing module enables automated functional and regression testing for Web-based applications Automates user actions in browser to validate application functionality and reduce the need for manual testing Lets you record and play scripts in either Internet Explorer or Firefox browsers Enables script editing through rich tree view user interface or extensible Java code view interface Provides additional content validation through custom test cases which can be added to your script Enables unattended script execution through Oracle Test Manager or command line interface 11

11 Browser Add-ons for IE & Firefox Browser add-ons must be installed and enabled in order for record/playback to work in IE and/or Firefox 12

12 Recording Web Functional Test Scripts Click Record Click Record to launch a browser Navigate to the Web application under test Click through the transaction to record See the script recorded in tree view / code view Click Stop to stop recording Standard Web Browser 13

13 Web Functional Test Script Views Web Functional Test script commands are recorded to Tree View and corresponding Java Code View Tree View Java Code View 14

14 Web Functional Testing Script Commands Common script commands automatically recorded for Web Functional Testing scripts include: Launch Browser Navigate (url) Wait for page Click (link, button, image, etc.) Set Text (text box) Select (select box, radio button) Check (check box) Think (time) 15

15 Playback Click Play button to execute Web scripts Iterate button allows you to loop multiple times All script commands will be executed and results show in Results view with results report & additional info in Details view 16

16 Testing Accelerators in ATS Oracle E-Business Suite Testing Accelerators Enables automated functional testing and load testing for Oracle E- Business Suite applications Supports both Web & Oracle Forms application interfaces Supports Oracle EBS R12 (Forms 10g) and 11i (Forms 6i) versions Siebel Testing Accelerators Enables automated functional testing and load testing for Siebel CRM applications Integrates with Siebel Test Automation libraries to simplify scripting Supports Siebel 8.x and 7.x versions Web Services Testing Accelerators Enables automated functional testing and load testing for SOA applications directly at the Web Service interface level Generate Web Service requests from WSDL files, parameterize inputs and combine multiple requests to automate a business flow Supports SOAP/HTTP-based Web Services 17

17 Oracle E-Business Suite Testing in ATS Web Actions Forms Actions

18 Siebel Testing in ATS Siebel SI/Web Actions Siebel HI Actions

19 Forsythe Business Challenges Solution Business Results Integradora de TI; 39 anos provendo soluções de data center; atendem 36% do Fortune 100 Processo complexos de negócio no EBS; crescimento do workload; tempo de testes de regression alto; staff pequeno & cenários de teste inconsistentes Foco em diminuir o ciclo de teste e melhorar qualidade Application Testing Suite- Oracle Functional Testing (OpenScript) for E-Business Suite Automatização de teste funcional e regression para E- Business Suite Forms, Self Service, Concurrent Manager & Oracle Portal 10g (Intranet/Extranet) Redução do tempo de ciclo de teste em 90% comparado com testes manuais Aumento da cobetura de teste e percepção de melhora em qualidade

20 ATS Versus Manual Testing Timesx

21 Oracle Load Testing: Load and Performance Testing and Tuning Realistic load & performance testing for Web, SOA and packaged applications Scale to thousands of concurrent users to simulate peak production loads Delivers better accuracy by performing functional content validation under load Intuitive Web console promotes collaborative testing Integrated server monitors help identify & resolve performance bottlenecks Custom accelerators for EBS, Siebel, ADF & Web Services for efficient, optimized testing

22 Oracle Load Testing Architecture Oracle Load Testing Agents (OATS Agent Service) Oracle Load Testing Server (OATS Application Service) Agent 1 Virtual Users OLT Controller Module OLT ServerStats Module WebLogic Server Agent 2 Agent 3 Virtual Users Virtual Users OLT Database Agent n Virtual Users Oracle DB 24

23 Oracle Load Testing Oracle Load Testing is used to configure load test scenarios, run load tests and view results Uses test scripts created in OFT OpenScript to generate load against your application 27

24 Create a Load Test Scenario First step is to create a load test scenario by selecting the script or scripts you want to run in your load test Select the script(s) from the appropriate OFT Workspace Specify settings for how the script will run (# of VUs, Think Time, ) 28

25 Configure Script Settings (cont.) Common OLT script settings include: # VUs: How many Virtual Users will execute that script System: Which VU Agent system will those Virtual Users run on VU Pacing (Think Time): How much time will a user spend on page before advancing to next page Recorded: Use the same amount of think time as you did when recorded it Random: Use a random think time between min/max thresholds No Delay: Use zero delay between page requests Iteration Delay: How much time does a user spend between successive iterations (runs) of the script User Mode: Which Agent type should be used to execute the script Thin Client/Java Client: Execute script at HTTP protocol level (recommended) Thick Client: Execute script at DOM event level (not scalable) Use Data Bank: Enable any data bank file configured with the script Browser Emulation: Which browser type should the VU s emulate Connection Speed Emulation: What connection speed should the VU s emulate Cache Emulation: Should browser cache be enabled or disabled 29

26 Configure Start/Stop and VU Ramp-up Autopilot allows you to configure the duration of the test and VU Ramp Start / Stop When to begin and end the load test VU Ramp-up How many Virtual Users to start with and how quickly to add more Autopilot also allows you to select ServerStats monitoring configurations 30

27 Configure Server Monitors OLT s ServerStats allows you to monitor back-end servers during a load test Configure monitors to analyze the performance of Web Servers, Application Servers, Databases and other application infrastructure Generate Virtual User load and see how application infrastructure performance is impacted to identify bottlenecks 31

28 View Real Time Results OLT s Watch VU Grid and View Run Graphs tabs allows you to see realtime results as the load test session is running 32

29 Performance vs. Users Shows script completion times (y-axis) plotted against the # of running Virtual Users (x-axis) Bottlenecks will cause script completion times to increase as you add more VU s; otherwise graph should remain flat Invalid server responses may cause scripts to fail/terminate early and a decrease in script completion times 33

30 Post Run Reports Create Reports tab allows users to access results from previously run load test Sessions Select previous test result from Sessions pulldown Access the same default graphs and reports that were available during run-time Create custom graphs and reports Select counters from multiple Sessions and overlay them to compare results 34

31 Comic Relief Load testing com Oracle Application Testing Suite permitiu IT manipular 3Xs o número de transações Business Challenges Solution Business Results Uma das mais reconhecidas instituições de caridade do Reino Unido Demanda única de infraestrutura técnica durante um evento anual de levantamento de doações Necessidade de processar as doações online rapidamente e corretamente durante o evento Application Testing Suite - Oracle Load Testing Testes de carga antes da campanha garantiram o sucesso do evento Processou mais de 450,000 durante um período de 7 horas, com picos de 54 transações por segundo Garantiu que IT pudesse processar o trafégo dos mais de agentes do call center

32 Oracle Test Manager Gerenciamento do processo de teste Gerenciamento do processo de teste em um Web console centralizado Rastreamento abrangente desde requerimentos, casos de testes e problemas/bugs Documentação dos casos de teste manuais e automatizados Criação de relatórios para prover visibilidade do processo de teste Customizável para encaixar na sua metodologia de testes Arquitetura escalável, fácil deploy e gerenciamento

33 Oracle Test Manager: Módulos OTM possui 3 módulos integrados para gerenciamento: Requirements: Documente e gerencie todos os requisitos de teste Tests: Crie os planos de teste e gerencie todos os seus testes manuais e automatizados Issues: Crie defects para qualquer problema identificado durante o teste e acompanhe sua resolução OTM permite gerar relatórios de todos seus ativos de teste Reports: Permite visualizar os relatórios padrão ou criação dos próprios relatórios para requerimentos, testes e issues de um projeto Dashboards: Permite a criação de multiplas visões de relatórios Administrator permite que você especifique usuários permissões, projetos e customizações de campos para se encaixar no seu processo de teste

34 Arquitetura do Oracle Test Manager Test Manager Users (IE or Firefox browser) Oracle Test Manager Server (OATS Application Service) Requirements Test Cases Issues Reports/Dashboards WebLogic Server User 1 User 2 User 3 User n OTM Database Oracle DB

35 Administrator Fields Gerencie campos default e personalizados para as abas de Requirements, Tests, Issues e Test Runs Habilite, desabilite, ou edite os campos Default Adicione ou edite os campos Custom Altere a ordem que os campos e opções são mostrados Especifique que campos quando alterados geram notificações via 40

36 Requirements Interface Requrimentos podem ser criados em uma hierarquia multi-level Crie requerimentos e específique sub-requerimentos Usuários podem especificar informações detalhadas de cada requerimento Campos podem ser customizados através do Administrator Requerimentos são automaticamente numerados quando adicionados Numeração hierárquica ou IDs únicos podem ser mostrados Requirements Tree View Requirement Details 41

37 Requirements Attachments & Associations Usuários podem especificar anexos ou links para cada requerimento Requerimentos podem ser associados a casos de teste que serão usados para validação e rastreamento Issues associados aos casos de testes linkados também são mostrados Attachments Links Associated Tests Associated Issues 42

38 Tests User Interface Usuários podem criar uma hierarquia multi-level dos planos de teste para organizar todos casos de teste Casos de testes manuais podem ser documentados e guardados com informações detalhadas dos passos do teste e dos resultados esperados Usuários podem executar casos de testes manuais e automatizados direto do Test Manager Tests Tree View Test Details Test Steps Test Run History 43

39 Tests Manual Tests Manual Test são usados para guardar definições de teste e os passos detalhados do teste para execução manual Desenvolvedor do teste precisa especificar ações e resultados esperados de cada passo de teste Click Run para executar testes manuais através da interface do OTM Os Campode de Test Run permitem que o usuário guarde informações pertinentes do teste que está sendo rodado Usuários escolhem entre pass/fail e comentam todos os steps e o caso de teste Resultados são arquivados 44

40 Issues User Interface A aba de Issues permite documentar bugs e outros problemas identificados durante o teste, atribuindo desenvolvedores e rastreamento da resolução Issues podem ser associados com testes e outros issues relacionados Quando você adiciona um issue, ele é atríbuido automaticamente com o próximo número disponível no banco de dados e é adicionado no fim da lista Issues Tree View Issue Details 45

41 Issues Attachments & Associations Usuários podem adicionar anexos e links para cada issue Quando criados, issues podem ser associados com casos de teste rodados Issues podem ser associados com outros issues Attachments Links Associated Req. Associated Tests Associated Issues 46

42 Test Manager Dashboard Dashboards permite que você combine múltiplos relatórios em uma visão única Inclua relatórios próprios ou default no seu dashboard Guarde como público ou privado 47

43 Application Testing Suite 9.2 Geração de script automática Zero esforço para criação de scripts para teste de carga Database test accelerator Integração com o Grid Control para diagnóstico de performance das aplicações JVM Diagnostics for mid-tier DB Profiles for Oracle Database Test Starter Kits para EBS R12 e 11i Accelerator para ADF e Adobe Flex Suporta teste de carga e funcional

44 Clientes nos principais segmentos de indústria Financial Services e-commerce & Media Communications and Manufacturing IT Services and Software

45 Vantagens Oracle Use Oracle para testar Oracle Única solução com teste de carga real e sintético Teste o stack completo, desde a aplicação até o banco de dados Grande base de clientes de tecnologia Grande base de clientes de aplicativos Permite oferecer soluções de teste especializadas

46 Perguntas Rafael Vicente - rafael.vicente@oracle.com