Digitoday

Kone tunnistaa puheen suun liikkeistä

Julkaistu:

Oulun yliopiston konenäön ryhmässä on kehitetty menetelmä puheen tunnistamiseksi koneellisen suun liikkeiden analysoinnin avulla.


TkT Guoying Zhao sekä professori Matti Pietikäinen ovat lähiaikoina julkaistavassa tutkimuksessaan kehittäneet menetelmän, jossa kone voi automaattisesti tunnistaa puhuttuja lauseita tai sanoja pelkän visuaalisen informaation avulla, yliopisto kertoo.

Hahmontunnistustutkimuksessa on etsitty tapoja koneelliseen, visuaaliseen tietoon perustuvaan puheenymmärtämiseen, mutta tähänastisissa menetelmissä huulten liikkeiden luotettava seuranta on ollut ongelmallista.

Nyt kehitetyssä menetelmässä tunnistetaan ensin kasvot ja silmät, joiden perusteella suun alue paikannetaan. Tämän jälkeen hyödynnetään paikallisia kuvaajia suun liikkeiden seurantaan, mikä on aiempia menetelmiä luotettavampi tapa.

Yliopiston mukaan erityisen huomionarvoista on, että saadut tulokset ovat antaneet jopa parempia tuloksia kuin aiemmin eri informaatiolähteitä yhdessä käyttävillä menetelmillä on saavutettu. Menetelmää voidaan käyttää esimerkiksi meluisissa ympäristöissä tai kuulovammoista kärsivien ihmisten apuna.

HaTuTuSta jo 30 vuotta

Suomen Hahmontunnistustutkimuksen Seura ry (HaTuTuS) on täyttänyt 30 vuotta. Merkkipäivän kunniaksi Oulun yliopistolla järjestetään tänään juhlaseminaari, jonka pääpuhujana esiintyy alan huippututkija, professori Rama Chellappa.

Oulun yliopiston konenäön tutkimusryhmä isännöi juhlaseminaaria sekä Chellappan vierailua.

Chellappa käsittelee juhlaseminaarissa pitämässään puheessaan hahmontunnistusta videokuvasta. Videokuvan analysoinnin avulla voidaan esimerkiksi tunnistaa ihmisiä kävelytyylin ja kasvojen perusteella. Tästä on hyötyä esimerkiksi turvakamerajärjestelmien kehittämisessä.

Kommentit

    Näytä lisää

    Näitä luetaan!
    1. 1

      Poliisi: Espanjan taloräjähdys liittyy terrori-iskuun – talossa valmisteltiin isoa kaasupommia

    2. 2

      S-ryhmä vaihtaa Otto-automaatit Nosto-automaatteihin – valikoimassa myös 10 euron setelit

    3. 3

      IS SEURAA: Kolmas pidätys tehty, poliisi pysäytti uuden iskun yöllä – katso suoraa lähetystä

    4. 4

      Karmeaksi flopiksi teilatun F1-kisan olosuhteet järkyttivät suomalaisia – ”Tupakka-askit ja käytetyt kondomit lojuivat siellä”

    5. 5

      Markel, 20, luuli ilotulituksen alkaneen Cambrilsissa – Taistelun jyly tallentui videolle

    6. 6

      Trump kommentoi Barcelonan iskua tarinalla sian vereen kastetuista luodeista – pidetään yleisesti keksittynä

    7. 7

      Poliisi IS:lle: Moottoripyöräjengiä epäillään törkeistä rikoksista – neljä tutkintavankeudessa

    8. 8

      Koulubussi ja henkilöauto kolaroivat Konnevedellä – neljä loukkaantui, kaksi vakavasti

    9. 9

      Jari Sillanpää kauhistui nähdessään itsestään tuoreita kuvia – limsa lihotti: ”Olin sokissa”

    10. 10

      Salkkarit-tähden muodonmuutos hämmästytti fanit – näin suosikkinäyttelijä vastaa ulkonäkökritiikkiin

    11. Näytä lisää
    1. 1

      IS SEURAA: Kolmas pidätys tehty, poliisi pysäytti uuden iskun yöllä – katso suoraa lähetystä

    2. 2

      Kalliimpi jäi kotiin – huomasitko, millainen kello vilahti Putinin ranteessa Savonlinnassa?

    3. 3

      Huijareiden uusi kikka on härski tuplapuhelu – pahimmillaan tyhjenee koko tili

    4. 4

      Ampumahiihtokuningas julkaisi kuvan sydänkäyrästään, suomalaisasiantuntija hämillään: ”Täysin uskomatonta”

    5. 5

      Salkkarit-tähden muodonmuutos hämmästytti fanit – näin suosikkinäyttelijä vastaa ulkonäkökritiikkiin

    6. 6

      Keskituloinen Julia säästi vuodessa 10 000 euroa – näin se onnistui

    7. 7

      Anna: Huippumalli Angelika Kallio jätti luksuselämän – hänen poikansa tyrmistyi: ”Kuinka voit tehdä tämän minulle!”

    8. 8

      Madonna jakoi tavalliselta vaikuttavan kuvan syntymäpäiviltään – kiusallinen yksityiskohta hämmentää: ”Luulin sitä jalaksi”

    9. 9

      Porvoolainen Antti näki pakettiauton ajavan väkijoukkoon La Ramblalla – poliisi vie sivullisia museosta suojapaikkaan

    10. 10

      Pettämiskohuaan kulttuurierolla selittänyt Usain Bolt juhli villisti mielitiettynsä kanssa – rakas on näyttävä jamaikalaiskaunotar

    11. Näytä lisää
    1. 1

      Trombeja, tulvia, kuukauden sademäärä kerralla... Näille paikkakunnille lauantain rajuilma iskee pahiten!

    2. 2

      IS SEURAA: Kolmas pidätys tehty, poliisi pysäytti uuden iskun yöllä – katso suoraa lähetystä

    3. 3

      25 kuvaa: Rajuilman jäljet – tällaista tuhoa Suomessa riehunut ”Kiira” sai aikaan

    4. 4

      Ukkosmyrsky riehui ja katkoi sähköjä – IS seurasi Kiira-myrskyä hetki hetkeltä

    5. 5

      Sokeria 28 vuotta vältellyt ”maailman kaunein isoäiti” pelmahti aamu-tv:seen – katsojat eivät uskoneet silmiään: ”Ketä hän luulee huijaavansa?”

    6. 6

      Vain 10 prosenttia osaa vastata oikein tähän tarkkuustestiin – kokeile!

    7. 7

      Viereinen matkustaja valitti Sara Forsbergin käytöksestä lentoemännälle – laulaja tilitti kohupäivityksessä: ”Hän haisee p**seeltä”

    8. 8

      ”Fiilikset menevät vuoristoratoja” – Sara Sieppi kyllästyi hänen ja Roope Salmisen suhteesta velloneisiin huhuihin: Uhkeana hellettä tihkuvissa bikinikuvissa

    9. 9

      Rikolliset kehittivät pirullisen tavan viedä maksukortin tiedot kylmäasemalla

    10. 10

      Katso video Kiiran voimasta: Vesi tulvi supermarketin katosta Espoossa, lasiseinä rämähti 35 metrin korkeudesta kadulle Helsingissä

    11. Näytä lisää
    Näitä luetaan!
    1. 1

      Poliisi: Espanjan taloräjähdys liittyy terrori-iskuun – talossa valmisteltiin isoa kaasupommia

    2. 2

      S-ryhmä vaihtaa Otto-automaatit Nosto-automaatteihin – valikoimassa myös 10 euron setelit

    3. 3

      IS SEURAA: Kolmas pidätys tehty, poliisi pysäytti uuden iskun yöllä – katso suoraa lähetystä

    4. 4

      Karmeaksi flopiksi teilatun F1-kisan olosuhteet järkyttivät suomalaisia – ”Tupakka-askit ja käytetyt kondomit lojuivat siellä”

    5. 5

      Markel, 20, luuli ilotulituksen alkaneen Cambrilsissa – Taistelun jyly tallentui videolle

    6. Näytä lisää
    1. 1

      IS SEURAA: Kolmas pidätys tehty, poliisi pysäytti uuden iskun yöllä – katso suoraa lähetystä

    2. 2

      Kalliimpi jäi kotiin – huomasitko, millainen kello vilahti Putinin ranteessa Savonlinnassa?

    3. 3

      Huijareiden uusi kikka on härski tuplapuhelu – pahimmillaan tyhjenee koko tili

    4. 4

      Ampumahiihtokuningas julkaisi kuvan sydänkäyrästään, suomalaisasiantuntija hämillään: ”Täysin uskomatonta”

    5. 5

      Salkkarit-tähden muodonmuutos hämmästytti fanit – näin suosikkinäyttelijä vastaa ulkonäkökritiikkiin

    6. Näytä lisää
    1. 1

      Trombeja, tulvia, kuukauden sademäärä kerralla... Näille paikkakunnille lauantain rajuilma iskee pahiten!

    2. 2

      IS SEURAA: Kolmas pidätys tehty, poliisi pysäytti uuden iskun yöllä – katso suoraa lähetystä

    3. 3

      25 kuvaa: Rajuilman jäljet – tällaista tuhoa Suomessa riehunut ”Kiira” sai aikaan

    4. 4

      Ukkosmyrsky riehui ja katkoi sähköjä – IS seurasi Kiira-myrskyä hetki hetkeltä

    5. 5

      Sokeria 28 vuotta vältellyt ”maailman kaunein isoäiti” pelmahti aamu-tv:seen – katsojat eivät uskoneet silmiään: ”Ketä hän luulee huijaavansa?”

    6. Näytä lisää