Hierarchical, Requirement-Driven Approach for Automating Module Testing of Graphical User Interfaces

Abstract

Graafisten käyttöliittymien (GUI) manuaalinen testaaminen on aikaavievää, työlästä ja usein myös ikävystyttävää ja virhealtista rutiinityötä. Monesti testaus ei täytä sille asetettuja tavoitteita ja ohjelmiin jää virheitä. Vaikkakin saatavilla on käyttöliittymien automaattiseen testaamiseen tarkoitettuja sovelluksia, niiden tehokas käyttö ei ole aina ongelmatonta.

Tässä diplomityössä tutkitaan graafisten käyttöliittymien testauksen automatisointia. Erityisesti tarkastellaan, mitä erityispiirteitä, ongelmia ja haasteita graafisten käyttöliittymien automaattiseen testaamiseen liittyy. Työssä tutustutaan aiheesta julkaistuihin tieteellisiin ja empiirisiin raportteihin tavoitteena kartoittaa nykyhetken tilanne ohjelmistojen automaattisessa testaamisessa. Lisäksi työssä evaluoidaan joitakin automaattiseen GUI testaamiseen tarkoitettuja akateemisia, kaupallisia ja ilmaisia järjestelmiä.

Työn päätavoitteena on tutkia, kannattaako automaattinen testaaminen aloittaa jo GUI:n kehitysvaiheessa. Työssä suunnitellaan graafisten käyttöliittymien automaattiseen yksikkötestaamiseen tarkoitettu järjestelmä, joka soveltuu myös kehitysaikaiseen testaukseen.

Työn loppupäätelminä on, että automaattinen ohjelmiston testaaminen kannattaa, mutta tämä edellyttää testausstrategiaa, joka ottaa huomioon yrityksen laatutavoitteet ja testattavan kohteen erityisominaisuudet. Hyvä strategia asettaa testaukselle konkreettiset ja mitattavat tavoitteet. Automatisoinnin hyöty kasvaa, jos regressiotestaus voidaan automatisoida. Testausprosessiin on hyvä saada mukaan formaaleja menetelmiä, jotka edesauttavat testitapausten automaattista generointia. Testattavuus kannattaa ottaa huomioon jo järjestelmän arkkitehtuurissa.

Graafisten käyttöliittymien automaattisen moduulitestaamisen edellytyksenä on, että testaus ei perustu menetelmiin, jotka eivät sovellu kehitysvaiheen testaukseen (kuten käyttäjän toimenpiteiden nauhoittamiseen). Testitapausten ylläpidon helppouteen tulee kiinnittää erityistä huomiota, koska kehitysvaiheessa ohjelma muuttuu usein. Ylläpidettävyys saavutetaan tekemällä testitapaukset hierarkkisiksi, jossa ylimmän tason testitapaukset kuvaavat liiketoiminnallista tasoa. Mitä automaattisimmin nämä ylimmän tason testitapaukset saadaan konvertoitua tasolle, jota testaustyökalu pystyy käsittelemään, sitä helpompaa on testitapausten ylläpito.