Expert Elicitation in Technology Readiness Assessment

No Thumbnail Available

URL

Journal Title

Journal ISSN

Volume Title

Elektroniikan, tietoliikenteen ja automaation tiedekunta | Master's thesis

Date

2010

Department

Major/Subject

Laskennallinen tekniikka

Mcode

S-114

Degree programme

Language

en

Pages

[10] + 73

Series

Abstract

Tässä työssä käsitellään asiantuntijamielipiteiden hyödyntämistä teknologian valmiustason määrityksessä. Työssä suunnitellaan ja toteutetaan prosessi sekä käytännön työkalu asiantuntija-arvioiden hankkimiseen, analysointiin ja raportointiin. Asiantuntijamielipiteet kerätään sähköpostikyselyiden avulla ja syötetään analyysiä varten kehitettyyn ohjelmaan, joka tiivistää tiedon helposti ymmärrettäviksi kuviksi ja tunnusluvuiksi. Työssä vertaillaan eri analyysimenetelmiä ja niiden paremmuutta sekä arvioidaan yleisesti asiantuntijamielipiteiden hyödyntämisen luotettavuutta ja prosessiin liittyviä harhoja. Erot erilaisten analyysimenetelmien välillä todetaan varsin pieniksi ja tärkeimmät huomion kohteet asiantuntijamielipiteiden hyödyntämisessä liittyvät datan keräykseen ja epävarmuustekijöiden arviointiin ja niiden minimointiin. Lopputuloksena työssä toteutettu prosessi ja analyysiohjelma ovat käyttökelpoinen ja toimiva tapa teknologian valmiustason määritykseen.

This thesis covers expert opinion elicitation for Technology Readiness Assessment. A process and a tool is designed and implemented for obtaining, analysing and reporting expert opinion. The experts are contacted by web questionnaires and the data is inputted in the analysis program, which composes the data in easily interpretable diagrams and figures. This thesis compares different analysis methods in terms of their performance and discusses in general the usage of expert opinion, its reliability and related biases. The differences between the analysis methods are found to very small and most important indications of the final results are that most attention in expert elicitation should be paid to collection of data and estimating and minimising the uncertainties in the process. In conclusion, the process and analysis tool developed in this thesis are a practical and well working technique for Technology Readiness Assessment.

Description

Supervisor

Lampinen, Jouko

Thesis advisor

Kauhanen, Laura

Keywords

technology readiness level, technology readiness assessment, expert elicitation, expert opinion, decision analysis, latent variable model, ordinal data, teknologian valmiustason arviointi, teknologia-arviointi, asiantuntijamielipiteiden hyödyntäminen, asiantuntijamielipide, päätösanalyysi, latenttimuuttujamalli, ordinaaliasteikko

Other note

Citation