Uutiset

Uusi chatbot etsii tietoa sovelluksista

”Hey GUI” on keskusteleva chatbot, joka etsii tietoa sovelluksista ja niiden käyttöliittymistä, ja mikä parasta käyttäjä ei tarvitse koodaustaitoja.
Hey GUI is a chatbot that can be used to find images or textual information about apps and their user interfaces using natural language conversations.
“Hey GUI” on uusi chatbot, joka osaa vastata kysyjälle kuvina ja tekstinä ja etsiä tietoa sovelluksista ja käyttöliittymistä käyttäjän kielellä.

Chatbotit ovat jo arkipäivää. Niiden perusajatus on ohjata käyttäjä kohti ratkaisua. Kysyjä voi tulevaisuudessa saada vastauksen tekstin sijaan myös kuvina. ”Hey GUI” chatbot osaa vastata kysymyksiin lähettämällä kuvia ja kuvakaappauksia sovelluksista tai yksinkertaisilla lauseilla. Tutkijat hyödynsivät työssään puhelimessa olevia sovelluksia ja sovellusten datatietoa.

”Chatbot toimii ilman mitään koodaustaitoja ja voi esimerkiksi hakea tietoa, mikä puhelimen sovelluksistani on päivitetty viimeksi tai mitkä sovelluksistani pyytävät lupaa käyttää puhelimen kameraani”, tutkijatohtori Kashyap Todi Aalto-yliopistosta kertoo.

Tärkeää tietoa chatbottien kehittäjille ja tutkijoille

Erilaiset sovellukset ja graafiset käyttöliittymät sisältävät itsessään jo valtavasti tietoa. Tietoa voidaan käyttää erilaisiin tarpeisiin. Tutkijat selvittivät työssään, mitkä ovat käyttäjien mielestä chatbotin tärkeimmät ominaisuudet ja miten käyttäjät haluavat keskustella chatbotin kanssa.

Tutkimuksessa otettiin huomioon kolme kohderyhmää: suunnittelijat, ohjelmistokehittäjät ja peruskäyttäjät. Ohjelmistokehittäjät voivat käyttää chatbotia, kun suunnittelevat uusia sovelluksia, mutta samalla chatbot auttaa tavallisia käyttäjiä löytämään tietoa sovelluksista eri älylaitteissa.

”Tutkimuksen tavoitteena oli lisätä ymmärrystä siitä, mitä toimintoja käyttäjät enimmäkseen hakevat chatbotista ja miten he muotoilevat kysymyksiä, erityisesti millaisia sanoja ja missä muodossa he käyttävät niitä”, Kashyap sanoo.

Tutkimus tehtiin verkkokyselynä, jonka tavoitteena oli selvittää, mitkä chatbotin ominaisuudet käyttäjien mielestä ovat hyödyllisiä ja miten he muotoilevat kysymyksensä. Kyselyyn vastasi yli 100 ihmistä ja heiltä saatiin tietoa 21 yleisimmästä chatbotin ominaisuudesta ja yli 1300 kysymystä, joita he ehdottivat ja kertoivat käyttävänsä eniten chatboteissa.

”Suunnittelijat voivat saada esimerkiksi inspiraatiota, miten suunnitella verkkokaupan käyttöliittymä, kun chatbot osaa tarjota heille vastauksena kuvakaappauksia olemassa olevista vaihtoehdoista. Ohjelmistokehittäjät voivat kysyä chatbotilta, millaisia värikoodeja on käytetty sisäänkirjautumispainikkeessa ja chatbot tarjoaa heille useita vaihtoehtoja, Kashyap kertoo.

Peruskäyttäjien kysymyksissä painottuivat erityisesti yksityisyyteen ja saavutettavuuteen liittyvät asiat. Yleisimpiä kysymyksiä olivat erilaiset auttamiseen liittyvät kysymykset kuten, missä puhelimen sovelluksissani on kartta. “Hey GUI” auttaa kysyjää löytämään tiedon itse käyttöliittymästä ja keskustelee kuvien ja kuvakaappausten avulla. Chatbotin vastaukset perustuvat kyselyssä esiin tulleisiin yleisimpiin ilmaisumuotoihin.

Tutkimus on tehty yhteistyössä Luxemburgin ja Bayreuthin yliopistojen kanssa ja tulokset esitellään alan ”Designing Interactive Systems” -konferenssissa. Chatbotin prototyyppi on parhaillaan työn alla. Kyselyssä kerätty aineisto ja chatbotille esitetyt kysymykset löytyvät osoitteesta https://osf.io/g97my/ 

Lue lisää:
Projektisivu
Tutkimusartikkeli
Lyhyt video chatbotin toiminnasta
Pitkä video chatbotin toiminnasta

Lisätietoa:
Kashyap Todi (englanniksi)
Tutkijatohtori, Aalto-yliopisto, tietoliikenne- ja tietoverkkotekniikan laitos
kashyap.todi@gmail.com
050 4723 177

Antti Oulasvirta
Professori, Aalto-yliopisto, tietoliikenne- ja tietoverkkotekniikan laitos
antti.oulasvirta@aalto.fi
050 3841 561

Suomen tekoälykeskus FCAI

Suomen tekoälykeskus FCAI on osaamiskeskittymä, jonka ovat käynnistäneet Aalto-yliopisto, Helsingin yliopisto ja Teknologian tutkimuskeskus VTT. FCAI:n tavoitteena on kehittää uudenlaista tekoälyä, joka voi toimia ihmisen kanssa monimutkaisessa ympäristössä ja auttaa uudistamaan suomalaista teollisuutta. FCAI on yksi Suomen Akatemian lippulaivoista.

Read more
FCAI
  • Päivitetty:
  • Julkaistu:
Jaa
URL kopioitu

Lue lisää uutisia

Kolme ihmistä keskustelemassa pöydän ääressä kannettavien tietokoneiden kanssa. Teksti: Visiting Professorships at TU Graz, 1.10.2026 - 31.1.2027.
Yhteistyö, Tutkimus ja taide, Opinnot, Yliopisto Julkaistu:

Hae vierailevaksi professoriksi TU Graz:iin

Unite!-yliopistoallianssiin kuuluva TU Graz Itävallassa kutsuu kokeneita post doc -tutkijoita hakemaan kahta täysin rahoitettua vierailijaprofessuuria. Hakuaika päättyy 20.2.2026, ja tehtävät alkavat 1.10.2026.
Moderni aula, jossa iso ruskea sohva, värikäs taideteos ja portaat. Takaseinällä on '50' logo.
Mediatiedotteet Julkaistu:

Hanaholmenin 50-vuotisjuhlanäyttely muuttuu eläväksi verkossa – Suomen ja Ruotsin yhteistyön historia kaikkien ulottuville

Rakennetun ympäristön mittauksen ja mallinnuksen instituutti MeMo on luonut Hanaholmenin 50-vuotisjuhlanäyttelystä virtuaalimallinnuksen, joka on saavutettavissa kaikkialla maailmassa.
Kolme henkilöä kävelee talvella kyltin vieressä, jossa lukee 'Aalto-yliopisto'. Taustalla lumisia puita ja rakennuksia.
Tutkimus ja taide Julkaistu:

Suomen Kulttuurirahasto myönsi apurahoja tieteeseen ja taiteeseen

Apurahan sai 15 henkilöä tai ryhmää Aalto-yliopistosta.
Ilmakuva raitiovaunusta kaarevalla radalla, jota ympäröivät puut ja rakennukset kaupunkimaisemassa aurinkoisena päivänä.
Palkinnot ja tunnustukset, Yhteistyö, Tutkimus ja taide Julkaistu:

Vuoden Ympäristörakenne 2025 -palkinto Kalasatama-Pasila -raitiotielle

Palkinto myönnetään tunnustuksena ansiokkaasta rakennetun ympäristön suunnittelusta ja toteutuksesta. Aalto-yliopiston asiantuntijat kehittivät hankkeen kestävyysratkaisuja.