Kiek Tikrinti Kodą

1. Kiek Tikrinti Kodą How Much Code Inspection Is Enough? Robert T. McCann

2. Testavimo Kainos Sumažinimo Modelis • Turint kodo patikrinimo (inspection) efektyvumą (defektų skaičius rastas per patikrinimą), kaip parengimo lygio funkcija (kodo kiekis patikrintas per darbuotojo valandą), galima sudaryti paprastą kainos modelį, kuris numatys testavimo darbo laiką kaip funkciją nuo kodo testavimo parengimo lygio. • Šis dokumentas pristato tokį modelį ir apskaičiuoja optimalų kodo patikrinimo parengimo lygį, tam kad sumažinti bendrą kainą (patikrinimo ir testo)

3. Paskirtis • Dokumento paskirtis: parodyti kaip egzistuojantys duomenys gali būti analizuojami kainos modelio kontekste tęsiant vystymo procesus: kodo patikrinimą, kodo patikrinimo perdirbimą, testavimą, testavimo atnaujinimą, grįžimo (regression) testavimą

4. Paskirtis • Modelio paskirtis: parodyti kaip sumažinti vystymo kainą valdant laiką sugaištą programinės įrangos patikrinimų paruošimui • Šis modelis gali būti naudojamas busimų programų optimizavimui, naudojant paprastą Fagan-style kodo patikrinimo procesą su žymiu kainos ir darbo laiko sumažinimu ir kokybės pagerinimu

5. Paskirtis • Šis patikrinimų modelis gali nebūti efektyviu ieškant reikalavimų bei projektavimo defektų • Galima praplėsti šį modelį, kad įtraukti daugiau vystymo procesų (reikalavimų paruošimas, reikalavimų patikrinimas, projektavimo vystymas ir jo patikrinimas, defektų ištaisymas ir su tuo susiję patikrinimai)

6. Patikrinimų Efektyvumas • Neįmanoma žinoti tikslaus kodo defektų procento rasto patikrinimu metu kol visi defektai nesurasti. Tačiau yra dydis apibrėžiantis patikrinimų efektyvumą • Tai santykis tarp pagrindinių patikrinimo defektų ir sumos: pagrindiniai patikrinimo defektai plius pagrindiniai defektai rasti testavimo metu • Kodo patikrinimo efektyvumas svyruoja nuo 0 iki 1

7. Kodo Patikrinimo Efektyvumas • Kai kodo patikrinimo efektyvumas yra paskaičiuotas programinės įrangos konfigūracijos įrankiu (CSCI), pasidaro įmanoma apibrėžti santykį tarp pasiruošimo kodo patikrinimui lygio ir kodo patikrinimo efektyvumo • Tai tiesi linija, kuri kerta y ašį 1.0 taške

8. Duomenų Pakeitimai Mažinantys Rezultatyvumą • Apsiribojimas pagrindiniais defektais o ne visi defektai rasti patikrinimo metu • Pašalinant bet kurį duomenų tašką • Naudojant tris skirtingus pasirinkimo kriterijus testo defektams: • Visi testo defektai • Tik kodo defektai, įtraukiant sugeneruotą kodą • Tik kodo defektai, neįtraukiant sugeneruoto kodo

9. Kainos Modelis • Kainos modelis turi įtraukti visas pagrindines kainas, paliestas patikrinimų paruošimo lygyje • Aukščiausiame lygyje šis modelis įtraukia išlaidas susijusias su šiais procesais: • Kodo patikrinimai su patikrinimų perdirbimu • Testavimas su testų perdirbimu ir grįžtamas testas

10. Bendra Suma • Bendra suma apima šias veiklas: • Kodo patikrinimų paruošimas • Kodo patikrinimo taikymas • Kodo patikrinimo atnaujinimas • Testo paleidimas visai programai • Testavimo atnaujinimas • Grįžtamas testas

11. Pradiniai Tvirtinimai • Patikrinimų paruošimo darbas proporcingas peržvelgtam kodui • Kodo patikrinimo taikymas bei atnaujinimas proporcingas pagrindinių klaidų rastų patikrinimuose skaičiui • Testavimo atnaujinimas ir grįžtamas testas proporcingi pagrindinių klaidų rastų testavimo metu skaičiui • Didelė dalis kodo defektų rastų testavimo metu galėjo būti rasta ankščiau kodo patikrinimo metu

12. Kainos Funkcija • Perteklinė suma dėl to, kad ieškome defektų gali būti paskaičiuota pagal šią formulę • Te = C + S*Wri*I + S*D/R + S*I* *(-m)*(Tr*Et-Wri)*R • C – visi patikrinimo darbai • S – bendras patikrintų eilučių sk.(SLOC) • Wri – darbo valandos patikrinimų atnaujinimui

13. Kainos Funkcija • I – surandamas kodo defektų rodiklis: kodo patikrinimų defektai + testo defektų rodiklis • m – kodo patikrinimo efektyvumo kreivės nuožulnumas • R - kodo patikrinimų paruošimo lygis (SLOC/darbo valandos) • D – (koeficientas) visų patikrinimų pritaikymų nuosmukis atsižvelgiant į pasiruošimo lygį • Tr – darbas/defektui tam kad atnaujinti testavimą ir grįžtamam testui • Et – testų efektyvumas

14. Kainos Optimizavimas • Optimalus kodo patikrinimo paruošimo lygis R* gaunamas suradus tašką, kuriame kainos funkcija turi minimumą: • R* = SQRT{D/[I*(-m)*(Tr*Et - Wri)]}

15. Pakeitimų Kaina • Nepakanka žinoti optimalų paruošimo lygį, reikia žinoti ir pakeitimų kainą, kadangi nei vienas žmogaus procesas neapsieina be pakeitimų. • Kaina gali būti paskaičiuota pagal tokią formulę: • Tv = (D*S/ R*3)*<(R - R*)2> • PVZ: Tv = 5.26*<(R - R*)2> darbo valandos • ( <> - vidurkis )

16. Išvados • Jei programa surenka teisingus duomenis iš patikrinimų, testų ir kainos apskaitos procesų, veikimo ir kainos analizė gali suteikti galimybę numatyti programos kainą ir kokybę patikrinimų paruošimo požiūrių. • Tam kad pasiekti didesnį efektyvumą be kodo patikrinimo kainos padidėjimo reikia:

17. Išvados • Naudoti kontrolinį sąrašą to kas yrą pagerintą ir jį atnaujinti • Treniruoti kiekvieną darbuotoją turėti nuosavą kontrolinį sąrašą • Naudoti Watts Humphrey’s Team Software Process/Personal Software Process

18. Išvados • Pavyzdžiui naudojant 91.29 SLOC/darbo valandą paruošimo lygį, vietoj greito bet “purvino” 300 SLOC/ darbo valandą, sutaupo 70000 darbo valandų/MSLOC. • Tokiu būdu analizuojant ir tinkamai kaupiant duomenys galima iškarto dirbti geriau, greičiau ir pigiau