Overzicht. Certificatie in Applicatie- 10/6/2010. kwaliteit van software artefacten

Transcriptie

1 Certificatie in Applicatie- Outsourcing kwaliteit van software artefacten Prof. Mark van den Brand Dr Alexander Serebrenik Ir. Amrita Mishra Ir. Martijn Klabbers Overzicht uur Ontvangst uur Inleiding certificatie in outsourcing In de inleiding geeft Alexander Serebrenik aan wat het belang is van goede communicatie binnen outsourcing en kwaliteit van software (tussen)producten en hoe certificatie hierin kan helpen. Verder licht hij de aanpak kort toe uur Aanpak van een van de case studies Voormalig student Amrita Mishra geeft aan hoe zij een van de case studies heeft opgepakt en vertelt haar ervaringen uur Stand van zaken & Toekomstperspectief Martijn Klabbers presenteert de stand van zaken, reeds behaalde resultaten, toepassing op direct en indirecte outsourcing in verschillende scenario s zoals vervolgsourcing en multisourcing. Aangevuld met specifieke interessante punten voor de PON leden. Dit wordt gevolgd door een voorzichtig toekomstperspectief uur Discussie aan de hand van enkele stellingen Professor Mark van den Brand daagt het publiek uit om te reageren op stellingen gerelateerd aan het onderzoek. Hiermee krijgen we meer informatie over het nut van het onderzoek de verder te volgen richting uur Napraten tijdens borrel, aansluitend buffet uur Einde 1

2 Certificatie in Applicatie- Outsourcing Inleiding Prof. Mark van den Brand Dr Alexander Serebrenik Ir Amrita Mishra Ir Martijn Klabbers Wie is LaQuSo? LaQuSo: Laboratory for Quality Software Doel: brug slaan tussen bedrijfsleven en universiteit NIRICT/CeDICT lab. Eindhoven, Nijmegen, Delft, Twente, contacten met Aken, etc. Onafhankelijk instituut, objectieve kijk Oplossingen voor nieuwe uitdagingen van bedrijfsleven 2

3 Communicatie bij applicatie-outsourcing Communicatie bij applicatie-outsourcing 3

4 Communicatie bij applicatie-outsourcing 1 na belangrijkste risico bij outsourcing [Iacovou, Nakatsu]: Original set of requirements is miscommunicated Communicatie bij applicatie-outsourcing CERTIFICAAT gemeenschappelijk referentiekader voordeel voor outsourcer en leverancier ook bij de communicatie met de (potentiële) klant 4

5 Vision Productcertificatie wordt een vast onderdeel van het applicatie- outsourcingsproces Wanneer? Van zaadje tot karbonaadje! CERTIFICAAT Ketenintegratie 5

6 Certificatie Proces originele documenten Foutenrapport Software artifacts Transformatie internal representation Certificatie Analyse Defects in properties/ Specific criteria Context Requirements High level design Tests Filter Select Preprocess Terugkoppeling Certificatie Proces als alles goed gaat originele documenten Software artifact Certificatie analyse Certificaat 6

7 Wat wordt er gecontroleerd? Regels! Beschikbaarheid van de noodzakelijke artefacten Bijv. lijst van functionele requirements Uniformiteit Conformiteit Welke kenmerken is een keuze e van de klant Binnen het document Binnen het project Ten opzichte van externe specificaties en eisen Certificatie Model Competentieniveaus bepalen certificatieniveau Beschikbaarheid certificatieniveau Uniformiteit Conformiteit 7

8 Aanpak Aantonen van toegevoegde waarde certificatie door: Certificatie-analyse toe te passen op bestaande projecten Analysetijd zo kort mogelijk te houden Dmv analyse fouten aan het licht brengen Aantonen dat de fouten een hoge impact hebben Typering case studies # Domein/software Initieel artefact* Geleverd artefact* Outsourcingstype 1 Financieel / Lead Assignment 2 Financieel / ERP (Integration) 3 Overheid / Budget Systeem 4 Transport / Counter System 5 Financieel / Verkoopsysteem 6 Communicatie / DIS Requirements Implementation / System Requirements + Implementation High Level Design Offshore - Dual shore met dochterbedrijf Offshore - Dual shore met dochterbedrijf (Integration) High Level Design met dochterbedrijf 7 Financieel / Leensysteem 8 Automotive / Engine Software Requirements + High Level Design Implementation High Level Design Detailed Design / Implementation High Level Design Detailed Design / Implementation Implementation Detailed Design / Test *In italics de geanalyseerde artefacten Metrics of implementation System / Metrics of implementation Offshore - Dual shore met dochterbedrijf Offshore - Dual shore met dochterbedrijf Offshore - Dual shore met dochterbedrijf Triple shore double outsourcing Nearshore: Supplier = Specialist Nearshore Supplier = Monopolist 8

9 Maar is het niet te duur? Non-experts gebruiken het model In 8 projecten met > 8 (junior) medewerkers: Tijd per medewerker < 50 uur en << 1% projecturen Schatting bij check per component < 1% projecturen Wat levert het op? Certification in Application- Outsourcing a case study Applying the LaQuSo Software Product Certification Model (LSPCM) Prof. Mark van den Brand Dr Alexander Serebrenik Ir Amrita Mishra Ir. Martijn Klabbers 9

10 LSPCM for application outsourcing LaQuSo Software Product Certification Model Rule based analysis Software artifacts need to conform Rules, specific criteria, are grouped by: Product areas (Requirements, HLD,, Test documents) Certification criteria Availability Uniformity Conformance Achievement levels 10/6/2010 PAGE 18 Certification Process original documents Defect report Software artifacts Transformation internal representation Certification Analysis Defects in properties/ Specific criteria Context Requirements High level design Tests Filter Select Preprocess Return to outsourcer 10/6/2010 Page 19 10

11 Overview of Case study Lead assignment system Unification of ERP systems Project initiative Merger of two business processes. Centralization of multiple business processes. Development Framework RUP Company standard for SAP projects Project size 23,000 person-hours 67,000 person-hours Assessment time 40 person-hours 48 person-hours 10/6/2010 PAGE 20 Lead assignment system(1) Certification property: Consistency Artifacts received : Functional requirements(use case) Non-functional requirements List of business rules and software development plan 11

12 Lead assignment system(2) Result of assessment : Contradictions Business rules were contradictory. Use case descriptions were contradictory to use case diagrams. Omissions: Requirements were referring to non-existing business rules. Lack of an appropriate glossary. Absence of performance, reliability and maintainability requirements. Lead assignment system(3) Validation against project outcome Abundance of clarification questions. Deadline delays and Customer dissatisfaction. Project terminated Renegotiations with the customer, the project was restarted. The defects identified were repaired and delivered. The customer was satisfied. 12

13 Unification of ERP systems Certification property: Consistency Artifact received : Functional requirements augmented with flowcharts Result of assessment : Lack of common notation and semantics. No omissions or large defects were revealed. The documents were compliant with company standards. Validation against project outcome Later it was confirmed that the project met its deadlines and it was successful for both customer and supplier. Certificatie in Applicatie- Outsourcing Stand van zaken & Toekomstperspectief Prof. Mark van den Brand Dr Alexander Serebrenik Ir. Amrita Mishra Ir. Martijn Klabbers. 13

14 Overzicht Wat hebben we bereikt met LSPCM analyses? Case studies Impact Conclusies Toekomstige toepassingen van LSPCM in outsourcingpraktijk Voordelen Case studies # Domein/software Initieel artefact* Geleverd artefact* Belangrijkste bevindingen 1 Financieel / Lead Assignment 2 Financieel / ERP (Integration) 3 Overheid / Budget Systeem 4 Transport / Counter System 5 Financieel / Verkoopsysteem 6 Communicatie / DIS Requirements Implementation / System Requirements + Implementation High Level Design Non-functionals niet beschreven Standaarden te weinig aangehouden (Integration) High Level Design aangehouden 7 Financieel / Leensysteem 8 Automotive / Engine Software Requirements + High Level Design Implementation High Level Design Detailed Design / Implementation High Level Design Detailed Design / Implementation Implementation Detailed Design / Test *In italics de geanalyseerde artefacten Metrics of implementation System / Metrics of implementation Vendor lock-in door gebrek maintainability Fouten hersteld maar op verkeerde niveau Inconsistenties gevonden Architectuur was niet onderhoudbaar Architectuur was goed onderhoudbaar Inconsistenties gevonden, in opzet 14

15 Resultaten - samenvatting Impact gevonden fouten: Requirements: Ontbreken van non-functionals High level design: Vertalingen ontbreken Detailed design: Foutherstel op verkeerd niveau Implementatie: Metrieken geven meer controle Tests: Risico gebaseerde aanpak bespaart tijd Veranderingen in certificatiemodel (LSPCM):( ) Meer nadruk op communicatie (vertalingen) Rijker in breedte en diepte Flexibeler Resultaten - samenvatting Conclusie over LSPCM analyses: Bespaart kosten en tijd, verbetert imago Zeer geringe investering nodig Geen (externe) expert nodig, onafhankelijkheid wel aanbevolen Is proces onafhankelijk uitbesteder heeft de vrijheid, maar waarborgt wel kwaliteit! Kortom: certificatie met LSPCM kan nuttig zijn 15

16 Hoe kan certificatie nuttig zijn? De Drama Driehoek Delen, 2009 Outsourcer (CIO, CFO, CPO) Certificatie helpt communicatie en schept duidelijkheid Service provider User Services Applicatie-Outsourcingsproces Feedback loop Decision making Supplier selection Transition Transfer Transformation Service provision Contract termination 16

17 Certificatie toepassen binnen het proces Decision making meer zekerheid Supplier selection eis certificaat Transition certificaten Service provision kwaliteit service gewaarborgd. Contract termination gemakkelijker overdracht Toekomstige toepassingen Offshoring betere communicatie Vervolgsourcing geen vendor lock-in Multisourcing automatische afstemming tussen partijen 17

18 Toekomstige toepassingen Wij helpen! Wie volgt? Certificatie in Applicatie- Outsourcing Stellingen Prof. Mark van den Brand Dr Alexander Serebrenik Ir Amrita Mishra Ir Martijn Klabbers 18

19 Stelling 1 Onderzoek in applicatie-offshoring biedt verdieping van kennis in software ontwikkeling Stelling 2 Certificatie in Applicatie-Outsourcing biedt kansen voor innovatie in outsourcing 19

20 Stelling 3 Met Certificatie in Applicatie-Outsourcing verbetert de communicatie tussen betrokken partijen Stelling 4 Certificatie op meerdere artefacten maakt de afzonderlijke certificaties aanzienlijk sneller en goedkoper 20

21 Stelling 5 Certificatie biedt geen meerwaarde voor de eindgebruiker Stelling 6 Outsourcing is economisch gedreven niet kwaliteit gedreven 21

22 Stelling 7 Hoogwaardige offshoring impliceert onderwijs en onderzoek in global software development Stelling 8 Outsourcing heeft alleen toekomst als er lokaal (bijv. in India) in onderwijs en onderzoek wordt geïnvesteerd 22

23 Stelling 9 Outsourcing/offshoring creëert meer werkgelegenheid voor ICT Nederland Vragen/discussie 23