torstai 14. helmikuuta 2008

Living Labs, osa II: Tutkijan näkökulma

In HIIT -blogissa aiemmin kerrattujen suopeiden kehityskulkujen ansiosta on HIIT lähitulevaisuudessa kantava yhä raskaampaa viittaa suomalaisessa Living Lab -hovissa. On siksi ajankohtaista kirjoittaa auki kantamme tähän problematiikkaan. Living Lab on avokätisimmänkin arvion mukaan käsitteenä hieman epäselvä, vasta hakemassa paikkaansa platonisessa ideoiden taivaassa. Kuten Prof. Mäntylä sarjan ensimmäisessä osassa totesi, erinäiset käärmeöljy-linimenttien kaupustelijat ovat vehkeilleet itsensä mukaan hoviin.

Siinä missä Mäntylä luotasi soveliaimpia ja toivotuimpia tarkoitusperiä ”elävälle laboratoriolle”, tämä kirjoitus pyrkii kuvaamaan systemaattisemmin sen luonnetta tieteellisenä menetelmänä. Tuloksena on karakterisointi sen mahdollisuuksista, rajoista sekä horisontissa siintävistä haasteista nimenomaan tutkijoille. Lähtökohdakseni otan Mäntylän lainaaman Prof. Mitchellin alkuperäisen määritelmän: Living Labin päämääränä on ”luoda metodiikka, jolla voitaisiin päästä läheiseen vuorovaikutukseen todellisten käyttäjien kanssa heidän todellisessa käyttötilanteissaan ja sen kautta tunnistaa, kehittää, kokeilla ja hioa ratkaisuja esiinnouseviin monisyisiin ongelmiin.”

Metodologiselta kannalta tämä määritelmä kattaa kuitenkin enemmän ”Labin” tavoitteita kuin sen luonnetta.

Oman näkemykseni kristallisoin seuraavasti:

Kokeellisen tutkimuksen teknisiä termejä käyttäen Living Lab on tutkimusalusta suuren mittaluokan kvasi-kokeille, joiden tarkoituksena on prototyyppien konstruktiivinen evaluointi lopputuotteen kannalta realistisessa kontekstissa.

Tämä on kirjoitukseni takeaway—kiireellisimmät ”show me the money” -lukijat voivat tämän sisäistettyään siirtyä vaikka seuraamaan putoavia pörssikursseja. Kärsivällisemmille lukijoille esitän seuraavassa ruumiinavauksen ja prognoosin.

Tiukasti ottaen Living Lab ei siis itsessään ole tieteellinen menetelmä vaan tutkimusalusta, jonka päällä voidaan käyttää useita menetelmiä. Kun jokin alue tai yhteisö on instrumentoitu ja infrastruktuuri rakennettu, voidaan sovelluksia testata useasti eikä vain kerran. Tätä Living Lab -terminäkin vihjaa: voidaanhan vaikka kemian laboratoriotakin voidaan käyttää useisiin kokeisiin. Alustan toivotaan laskevan yksittäisen kokeen kustannuksia.

Mutta aivan kuten ”oikeatkin” laboratoriot, määrittää Living Lab puitteissaan suoritetuille kokeille reunaehtoja. Purettuna leikkauspöydälle, Living Labin sisältä löytyy viisi yhteistä nimittäjää sen piirissä suoritettavalle tutkimukselle:

1. Suuri mittaluokka. Tutkittavaan kenttään on sisällytetty tekijöitä suuremmassa mittakaavassa kuin mitä aikaisemmat menetelmät ovat mahdollistaneet.

2. Naturalistisuus. Tutkimus toteutetaan luonnollisissa olosuhteissa, vähintäänkin laboratorion ulkopuolella.

3. Teknologia-keskeisyys. Tutkimuksessa tuotettu tieto koskee ensisijassa jotakin teknologista prototyyppiä.

4. Kontrollin osittaisuus. Tutkimuksen tapahtumat on (vain) osittain tutkijan harjoittaman kontrollin piirissä.

5. Konstruktiivisuus. Tutkimuksen tavoite on luoda konstruktiivista ymmärrystä, sellaista josta on hyötyä suunnittelussa ja päätöksenteossa.

Käydäänpä läpi näitä yksi kerrallaan.

1. Suuri mittakaava on ehkä distinktiivisin piirre, mutta valitettavasti relativistinen. Suuri mihin nähden? Mieleen tulee omaa häntäänsä jahtaava kissa. Living Lab –retoriikka on lyönyt vastapalloon nimenomaan nykyistä evaluonti-metodiikkaa, joka on ollut otannoiltaan rajoittunutta. Living Lab on lupaus tavoittaa sellaisia emergenttejä ilmiöitä teknologian käytössä, joiden ajatellaan (tai luullaan) olevan pienempien kokeiden saavuttamattomissa. Mäntylä luetteli useita ilmiöitä, joita näillä haetaan, enkä näe niitä tarpeen kerrata. Living Labia on oikeastaan turha järjestää, mikäli pyydykseen ei aiota saada juuri tällaisia ilmiöitä. Esimerkiksi olisi arveluttavaa järjestää Living Lab pelkästään tutkiakseen kännykän LCD-näyttöjen ulko- ja sisätilakäyttöä tai jonkin nettisivuston layouttia. Yleisemmin ottaen, ”suuruuden” kategorioita ovat ainakin:

- Kokeen kesto. Nykyiset kestot ovat kertaluokkaa viikko.

- Osallistujamäärä. Tyypillinen n mitataan kymmenissä ei sadoissa.

- Toimijaryhmät. Tätä voidaan ajatella myös laajemmin osallistujaryhmien lukumäärällä, jos peruskäyttäjien lisäksi on mukana muita toimijoita kaupallisista kunnallisiin ja yhteisöllisiin.

- Geografinen laajuus. Yksittäisen kodin sijasta koko kaupunginosa.

- Sovelluskonteksti. Yksittäisen sovelluksen sijasta kokonainen ICT-paradigma?

Toteutuneissa Living Labeissa, kuten Rotuaari, on osasia jokaisesta kategoriasta.

Suuruus on investointi myös kahden muun tutkimuspäämäärän kannalta: a) tilastollinen voima ja b) tulosten yleistyvyys. Yksinkertaisesti mitä enemmän on havaintopisteitä, sitä pienempiä ja pienempiä ilmiöitä datasta voidaan luotettavasti eritellä. Toiseksi, mitä enemmän on havaintopisteitä tuottavia ihmisiä, sitä laajempaan joukkoon tulostenkin voidaan toivoa yleistyvän. Molemmat hyödyt voidaan kuitenkin vesittää harkitsemattomalla koeasuunnittelulla. Jo niin triviaali asia kuin tilastollisen testin valinta voi mennä pieleen, esimerkiksi jos ei huomioida epätasapainoista koeasetelmaa, puuttuvaa dataa tai ei-gaussilaisia jakaumia.

2. Toinen piirre, naturalistisuus, on näennäisesti yhtä vaikea piirre kuin ensimmäinen. Tämä piirre on kuitenkin merkityksellinen rajanvetona laboratoriossa järjestetyille kokeille. Tässä kontekstissa se on siksi helppo määritellä: naturalistisuus tarkoittaa yksinkertaisesti, että kokeessa vaikuttavat tekijät syntyvät ja elävät tutkijan vaikutuksen ulkopuolella. No, Living Labin järjestely väistämättä vaikuttaa esiin nouseviin ilmöihin. Ajatellaan esimerkiksi Oulun Rotuaaria. Se, että kyseinen alue oli instrumentoitu ja sinneoli tuotu uusia vimpaimia ei voinut olla merkkaamatta aluetta paikalliseksi kuriositeetiksi jota tullaan ehkä katsomaan matkankin takaa kuten isoisämme sirkusten friikkejä. Hyvää tahtovat Living Lab -turistit tahtomattaan tuottavat näin ei-todenmukaista dataa tutkijan mielipahaksi. Johtopäätösten validiteetin kannalta on äärimmäisen tärkeää pystyä selvittämään tämä solmuinen vyyhti: missä määrin jokin havaittu ilmiö oli keinotekoisten tekijöiden ja missä määrin luonnollisten tekijöiden aikaansaama?

3. Living Lab on noussut esille nimenomaan ICT:n ympärillä olevissa keskusteluissa, ja on luonnollista liittää se ponnisteluihin, jotka tähtäävät prototyyppien kehittämiseen. Tällä kriteerillä esimerkiksi MIT:n Reality Mining -koe ei ollut Living Lab. Ko. kokeessa 60 MIT:n opiskelijalle annettiin ContextPhone-puhelimet, jotka keräsivät sensoridataa lukukauden ajan. Tutkimuksen tarkoitusperänä ei ollut sovellusprototyypin (tai itse kännykän) testaaminen vaan yhteisön jäsenten liikkeiden ja kohtaamisten louhiminen ja mallintaminen. Yleisemminkin, ihmis- ja sosiaalitieteelliset kokeet oikeilla ihmisillä oikeissa konteksteissa eivät ole Living Labeja vaan vain suuren mittakaavan naturalistisia kokeita. Ne ovat Living Labeja vasta kun niiden tarkoitus on konstruktiivinen: prototyypin kehittäminen sitä oikeilla käyttäjällä testaamalla. Tämän rajanvedon takia näen tämän kolmannen kriteerin keskeisenä.

4. Neljäs piirre on suoraa seurausta toisesta ja kolmannesta. Living Lab on koe. Piste. Yksikään Living Lab ei väistä tätä ongelmaa, koska jokaisessa on vähintään se kontrollin aspekti, että jokin prototyyppi tuodaan käyttäjien luonnolliseen elinympäristöön. Kontrollia voidaan harjoittaa toki monella sofistikoituneemmallakin tavalla, mm. käyttäjäpopulaation valinnalla, tuotteen eri variaatioissa, käyttöliittymämuutoksin, ohjeistuksin, hinnotteluin, teknologisia ja kaupallisia toimijoita sisällyttämällä yms. Mutta koska tutkija ei pysty kontrolloimaan kaikkia ilmiöön vaikuttavia aspekteja, se on vain ”muka koe”, kvasi-koe (engl. quasi-experiment). Miksi tämä on ongelma? Tehdessään päätelmiä muutoksesta tiede nojaa aina ns. kontrafaktuaaliseen päättelyyn: muutos (efekti) päätellään vertaamalla kahta havaintoa ikään kuin ne olisivat syntyneet samassa paikassa samalla hetkellä. Esimerkiksi uuden prototyypin impaktia verrataan joko kuvitteelliseen tai todella kerättyyn vertailukohtaan siitä, millaista käyttäjien elämä oli ennen prototyyppiä.

Laboratoriossa, jossa muut kausaaliset tekijät voidaan (ideaalisesti) eristää kokeen ulkopuolelle, tämä kontrafaktuaalinen päättely toimii kohtuullisen luotettavasti. Living Labille tästä avautuu kuitenkin keskeinen haaste. Huolellisen kontrollin kautta nostetaan tutkijan kykyä attribuoida havaitut muutokset teknologiaan ja sen piirteisiin eikä satunnaisilmiöihin. Esimerkiksi kuvitteellisessa paikkatietoista palvelua testaavassa Living Labissa voitaisiin esimerkiksi havaita, että tietyn sovelluksen käytön aikana ihmiset käyvät tavarataloissa useammin kuin toisten sovellusten aikana. Onko tämä sovelluksen ansiota? Entä jos kyseinen testi tapahtui joulun aikana, kuinka tutkija pystyy erottelemaan joulun ja itse sovelluksen vaikutukset toisistaan? Tästä kysymyksestä palaamme luonnollisen ja keinotekoisen (koeasetelman luoman) ongelmaan. Vain osa keinotekoisesti tuotetuista ilmiöistä on hyväksyttäviä, osa ei ole.

5. Prototyypit ovat, by definition, epätäydellisiä artefakteja. Niistä puuttuu jokin piirre tai toiminnallisuus, joka mahdollistaisi niiden korottamisen oikean tuotteen tai palvelun kastiin. Living Labien suuri lupaus perustuu arveltuun potentiaan tämän epätäydellisyyden (ja tietämättömyyden) paikkaamisessa. Tämän takia ensimmäinen kysymys Living Lab –tutkimusta mietittäessä tulisi olla: Mikä on kysymys. Living Labit ovat ongelmanratkaisun ja päätöksenteon välineitä. Niillä tuotetaan tutkimustietoa koskien jotakin epäkypsää, ts. prototyypin asteella olevaa konseptia ja näin ratkaisevasti edesautetaan sen kehitystä tuotteeksi. On keskeistä tietää mikä tuo epäkypsä kohta on ja millainen tutkimus voisi sitä mitenkään auttaa.

Lainaten Mäntylää, Suomi on viimeaikoina menestynyt hyvin nimen omaan tuotteiden kehittäjänä, mutta painopiste on siirtymässä tuotteista lisäarvoa tuottaviin palveluihin. Tällä alueella suomalaiset eivät ole olleet lainkaan yhtä kilpailukykyisiä. Niiden kehittäminen edellyttää tekniikan osaamisen ohella käyttäytymis-, yhteiskunta- ja suunnittelutiedeiden osaamista. Living Lab näyttäytyy tässä kriisissä keitaana erämään keskellä. Valitettavasti Living Lab on käsitteellistetty eräänlaisenä “brute force” -ratkaisuna: järjestetään iso koe ja katsotaan mitä käyttäjät pitävät. Keidas voikin olla kangastus. Ensin pitää identifioida yksikin niin merkittävä ongelma, että kevyemmät menetelmät eivät työhön sovellu ja on aivan pakko haaskata miljoonia asian selvittämiseksi. Sen jälkeen on työstettävä suunnitelma tinkimättömästä kokeesta, joka tuottaa kiistämättömän vastauksen kysymykseen eikä sorru kokeellisen tutkimuksen lapsentauteihin.

Kirjoituksiani teknologian evaluoinnista:

Oulasvirta, A. (2005). Grounding the innovation of future technologies. Human Technology, 1 (1), 58-75.

Oulasvirta, A. (2008). Black boxes and white boxes: Where is evaluation heading. interfaces, 72, 7-9.

Oulasvirta, A. (painossa). Field experiments in HCI: Promises and challenges. Future Interaction Design, Part 2. Springer.

7 kommenttia:

Tero Heiskanen kirjoitti...

Jäi askarruttamaan, miksi korostat teknologia- ja prototyyppikeskeisyyttä living lab:eissa (kohta 3.)? Viitatussa Prof. Mitchellin alkuperäisessä määritelmässä en näe sitä kovin vahvana, jos ollenkaan. Otan esimerkin: Suuri kännykkäfirma rakentaa käyttäjädatankeräysjärjestelmän kännykän sisään, sopii 100 miljoonan kännykän käyttäjän kanssa ehdot miten dataa kerätään ja käsitellään. Firma luovuttaa dataaa julkiseen tutkimukseen. Julkiset tutkimusta tekevät tahot käyttävät saatua dataa perustutkimukseen (esim. ihmistieteet). Kännykkäfirma käyttää dataa omalla tavallaan kehitystyössään. Olisiko tällainen living lab? Tietoa käytetään sekä teknologian kehitykseen että perustutkimukseen.
Antamasi konstruktiivisuuden ehto "Ne ovat Living Labeja vasta kun niiden tarkoitus on konstruktiivinen: prototyypin kehittäminen sitä oikeilla käyttäjällä testaamalla." voitaisiin täyttää vastaavalla esimerkillä vaikkapa jakamalla protoasteella olevaa ohjelmistoa käyttäjien omistamiin laitteisiin.
Jos living labin kriteerit ovat nuo kuvaamasi, niin eikö silloin julkiselle tutkimukselle olisi huomattavasti mielenkiintoisempia menetelmät, jossa ei ensisijaisesti olla kehittämässä teknologiaa, mutta joissa hyödynnetään "living"-piirteitä, kuten kohtia 1 ja 2?

Antti Oulasvirta kirjoitti...

Totta, hyvä havainto. Mitchellin määritelmä eroaa siinä omastani. Syynä on varmaan heidän N_House, joka pyörii jonkin verran sen ympärillä, voidaanko kodin askareita luotettavasti tunnistaa sensoridatan pohjalta. Ts. passiivista datan keräystä.

Näen 3. kriteerin välttämättömäksi kahdesta syystä. 1) Jos tässä ei tutkita prototyyppejä, mikä tahansa iso kenttäkoe on Living Lab-- ja näitä on PALJON sosiaali- ja ihmistieteellisissä piireissä ja nykyään myös teknistieteellisissä. Prototyyppien evaluaation ongelma on kuitenkin aika omalaatuinen ja pitää tämän aiheen myös uutena.

2) Toinen syy on puhtaasti pragmaattinen: mukana keskusteluissa ja rahoittajina on tahoja, joiden ensisijainen (ja ääneen ilmaistu) tavoite on kehittää prototyypin asteella olevia palveluita.

Mutta prototyyppejä on eri asteilla. Kysymyksen ratkaisee se, mikä on tiedon intressi: Jos tutkitaan esimerkiksi koneoppimiskomponenttia, joka olisi osa jotakin tulevaa oikeaa sovellusta, kai koetta voi kutsua Living Labiksi. Tässä tutkitaan kuitenkin edellytyksiä oikealle sovellutukselle.

En ota kantaa siihen, mihin julkisen rahan laittaminen on järkevää. Prototyyppien evaluaatio isossa mittakaavassa voi oikein järjestettynä olla palkitsevaa. Kenttäkokeita noin perustutkimuksellisessakin mielessä kannattaa myös rahoittaa. En näe näitä toisiaan poissulkevia.

Anonyymi kirjoitti...

ei tarvitse osata suunnittelutieteitä vaan suunnittelutaitoja ja sitä, miten tieteellistä ja epätieteellistä tutkimustietoa ja mitä tahansa lähteitä käytetään hyvien palveluiden ja tuotteiden suunnittelussa ja muotoilussa. yksinkertaista. turhaa tehdä asiasta monimutkaisempaa kuin se oikeasti on.

tieteellä tuotetaan tietoa, taidolla artefakteja. näiden välissä on aukko, jota käyttäjätutkimus ei paikkaa.

Anonyymi kirjoitti...

erittain mielenkiintoinen, kiitos

Unknown kirjoitti...

The acclaimed Swiss cast Tag Heuer Aquaracer was founded in 1860 by Edouard Heuer, a 20 year old adolescent man who was addicted of attention time-keeping. In 1969, he afraid the accomplished watchmaking industry by actualization a alarm called "Micrograph" as authentic as 1/100 th of a second, again followed by a added authentic "Semicrosplit", which alcove 1/50 th of a second.

Anonyymi kirjoitti...

wide range of obsolete electronic parts made in Russia & ex-Soviet Union Brand Names are represented in our stocklistUkraine Distributor of obsolete electrical parts. Obsolete electrical and electronic parts include AC & DC drives, speed controls, power supplies, electrical hardware, relays, circuit boards, switches, sensors, photoelectrics, contactors, motors, stepping motors, servo drives, starters & pressure, other machine interfaces, temperature & process controls.

Best regards,

Alex

please contact us:
e-mail :stock-nelikvid@mail.ru
fax: +38 067 236 8637
skype: radiodetali123

Anonyymi kirjoitti...

выкуп заводских остатков радиодеталей

ICQ 177-211-010
tel:+38(095)8561468
Людмила

Разъем 2рм22куэ4ш3в1
Разъем на плату 8-8 RJ-45 (LU1T516-43LF)
PJ147 Есть
2РМД27КУН7Г5В1/разъем
AMP103783-9 разъем
2РТТ40КПЭ3Ш21В
1-098, Разъем аудио 3.5мм "гн" стерео пластик на плату (зеленый)
РРС3-4-А-7-1-В
Имп.разъем BLS-02
СШРГ55П30ЭГ1 розетка рос Коннектор ОС
PJ002С (4.8mm*2.50mm center pin) Есть
ШР55СК6НШn-К
Разъем онц-рг-09-10/22-р7
Разъем 2х12 (м) для пайки на плату (PBD-24)
ШР32ПК10ЭШn-К
РРС3-19-1-А-1-В
Гнездо VOLVO S - 40 Radio - переходник на разъем EVRO
Коннектор RGB20P
Разъем на плоский кабель 2х12 (м) (IDC-24)
ШР32У4НГn-К
ШР48СК9ЭГn-К
Разъем GST15i5S B1 WS -91.951.3053.0 < 1000 WE
Соединитель BST14i3KF-S 50 10SW
СШР32П10ЭШn
Разъем РСТ на шлейф 14 конт. 2х 7 (п) (FDC-14)
Колонки DEFENDER SPK-170 ЧЕРНЫЕ 2.0 2x2 Вт, разъем для наушников # 65165 (40) 7дн
2РМГ42БПН45ШnЕ1(2)(Б)
Соединитель RST20i3 96.233.3003.1 -96.233.3003.1 Запрос WE
Разъем 2рмд24б10г5в1
Соединитель GST18I3S B1NZR2A MGR01
РРС4-4-1-А-3(4…12)-В
СР50-160ФВ(5) группа Разъемы ---14293
Разъем питания 4 конт. (п) шаг 2,54 на плату для подкл. CD-ROM (BL-4M)
ШР48У2ЭГn-К
2РМГД33БПЭ32ШnЕ1(2)(Б)
Разъем онц-рг-09-10/22-в2
ШР32СК1ЭГn-К
488306 соединитель "Ultra-fast" 2-520184-2
Разъем на плату ACER (3+2pin 1.65mm) Есть
РРС3-19-А-7-1-В
разъем SIM Card reader FMS0062-2001-1
ОНЦ-РГ-09-24/30Р1(2,3,11,12,13,14,15)БС
DB-15F разъем D-SUB
2РМТ36Б22ШnВ(А)1(ЛБ)В
2РМДТ36КУЭ22ШnВ(А)1(ЛБ)В
СР75-615ФВ СОЕДИНИТЕЛЬ РАДИОЧАСТОТНЫЙ. 1990-2010 ГОДА.
ШР28ПК1ЭШn-К
Разъем 32N-SMA-50-1/E Заказ
SPTB-10 (разъем для колонок, 24х70 мм)
Разъем RST20i3 96.031.4053.0 В -96.031.4053.0 Запрос WE


60543