Automaattinen testien tuottaminen ei-hienosäädetyillä laajoilla kielimalleilla: kahden eri työkalun tarkastelu

No Thumbnail Available

Files

URL

Journal Title

Journal ISSN

Volume Title

Perustieteiden korkeakoulu | Bachelor's thesis
Electronic archive copy is available locally at the Harald Herlin Learning Centre. The staff of Aalto University has access to the electronic bachelor's theses by logging into Aaltodoc with their personal Aalto user ID. Read more about the availability of the bachelor's theses.

Date

2024-09-05

Department

Major/Subject

Tietotekniikka

Mcode

SCI3027

Degree programme

Teknistieteellinen kandidaattiohjelma

Language

fi

Pages

27

Series

Abstract

Testaus on iso osa ohjelmistokehitystä. Testauksella pyritään ennaltaehkäisemään virheitä ohjelmistoissa. Viimeaikaiset kehitykset laajoissa kielimalleissa ovat saaneet pohtimaan, voisiko niillä automatisoida testien tuottamista ja näin ollen vähentää manuaalista ihmistyötä. Tämän kandidaatintyön tavoite on analysoida kahta akateemisessa kirjallisuudessa esiteltyä testien tuottamismenetelmää, jotka pohjautuvat laajoihin kielimalleihin. Näissä menetelmissä laajoja kielimalleja ei hienosäädetä kohdeprojektia varten. Käyn läpi menetelmien toimintaperiaatteet ja pohdin niiden käytännöllisyyttä. Käytännöllisyys tarkoittaa sitä, miten hyvin menetelmä soveltuu mielivaltaiseen yksityiseen projektiin testien tuottamiseen. Tutkimuksen kohteena olevat menetelmät, Libro ja TestPilot osoittavat heikkouksia ja vahvuuksia testien tuottamisessa. Menetelmät eivät esimerkiksi toimi oikein, jos testauksen kohteena oleva ohjelmistopaketti on riippuvainen ulkoisista tiedostoista. Menetelmät eivät myöskään välttämättä sovellu hyvin yksityisiin projekteihin, sillä alkuperäisissä tutkimusraporteissa niiden suorituskykyä on mitattu enimmäkseen tekoälymallin entuudestaan tuntemilla ohjelmistopaketeilla. Lisäksi menetelmien kyky luoda monimutkaisia testejä jää epäselväksi. TestPilot ja Libro kuitenkin tuottavat lupaavia tuloksia tekoälymallin entuudestaan tuntemille ohjelmistopaketeille. Yleisesti ottaen testien tuottamismenetelmät, jotka eivät käytä projektikohtaisesti hienosäädettyä laajaa kielimallia, kuten Libro ja TestPilot eivät välttämättä sovellu hyvin testien tuottamiseen yksityisiin projekteihin, mutta aihetta tulisi tutkia lisää esimerkiksi suuremmilla evaluaatioseteillä.

Description

Supervisor

Lauri Savioja

Thesis advisor

Rintanen, Jussi

Keywords

laajat kielimallit, testit, automaattitestaus, testien tuottaminen

Other note

Citation