Digitoday

Valikko

Tutkija kehitti työkalun uutisten seurantaan

Perjantaina väittelevä Juha Makkonen on kehittänyt menetelmiä uusien uutistapahtumien havaitsemiseen ja aiemmin havaittujen tapahtumien seuraamiseen. Google News voi olla nopea, mutta onko se tarpeeksi tarkka?


Terveyden ja hyvinvoinnin laitoksessa työskentelevä filosofian maisteri Juha Makkonen esittää semanttisia luokkia, joihin sanat ryhmitellään merkitystensä mukaan samankaltaisten sanojen joukoiksi. Luokkia ovat esimerkiksi yleiset sanat sekä organisaatiot, henkilöt ja paikanilmaukset. Tekstistä tunnistetaan myös ajanilmaukset.

Tuloksena käytännön uutishaku voisi esimerkiksi erottaa toisistaan kaksi eri lento-onnettomuusuutista, jotka ovat samanlaisia yleisten sanojen kannalta, mutta erilaisia paikkojen ja ajanilmausten suhteen, Helsingin yliopisto hahmottaa.

Tarkkuutta nopeuden
kustannuksella


Automaattinen uutistapahtumien seuranta on tietojenkäsittelytieteen ja siinä tiedonhaun piiriin kuuluva tutkimusalue, jossa kehitetään menetelmiä digitaalisen uutisvirran hallintaan.

Uutisvirta koostuu useista, mahdollisesti erikielisistä uutislähteistä, joissa voi olla digitaalisia online-uutisia ja radio- sekä televisiouutisia.

Perinteiset tiedonhakumenetelmät, jotka ovat internet-tiedonhakujärjestelmien perustana, vertailevat tekstidokumentteja joukkoina sanoja ja käsittelevät sanoja merkkijonoina nopeasti. Erityisen vaikeaa on ollut tunnistaa kaksi samantyyppistä uutistapahtumaa, Makkonen taustoittaa.

Väitöskirjan nimi on Semantic Classes in Topic Detection and Tracking (Semanttisten luokkien soveltaminen automaattisessa uutisseurannassa).

Se mitä Makkosen keinoin hävittäisiin nopeudessa, voitettaisiin tarkkuudessa. Kielellinen analyysi hidastaa toimintaa jonkun verran, mutta väittelijän mukaan sitä voitaisiin tarvittaessa kompensoida laittamalla rautaa riviin.

Tuntuva
parannus


Oma kysymyksensä tosin on, missä määrin Google tai esimerkiksi Yahoo jo käyttävät tämäntyyppisiä semanttisia menetelmiä omissa uutispalveluissaan.

Makkonen kuitenkin veikkaa, että kovin syvälliseen sisältöanalyysiin ei suurissa uutispalveluissa vielä mentäne, koska käsiteltävän aineiston määrä on niin mittava. Jos dataa tulee sisään nopeammin kuin sitä pystytään käsittelemään, palvelut jäisivät koko ajan jälkeen, Makkonen miettii.

Juha Makkosen uusilla menetelmillä erot olivat etenkin olemassa olevien uutisten seurannassa tilastollisesti merkittäviä, ja keinot paransivat tuntuvasti uutistapahtumien seurannan tarkkuutta verrattuna perinteiseen lähestymistapaan.

Uusien tapahtumien tunnistamista menetelmä paransi vähemmän. Tämä alue pysyy edelleen vaikeana ongelmana yksinkertaisesti siitä syystä, että uusia tapahtumia pitää verrata kaikkeen vanhaan. Silloin vertailuaineisto on sanalla sanoen valtava.

Kommentit

    Näytä lisää

    Näitä luetaan!
    1. 1

      Yön uutiset: Katso mitä tapahtui, kun nukuit

    2. 2

      HS: Kahvi uhkaa loppua maailmasta, tilanne dramaattisen vakava – myös Suomen Paulig on huolissaan

    3. 3

      Teinitytöt legginseissä käännytettiin lähtöportilla, somemyrsky nousi USA:ssa – huippumalli Chrissy Teigen: ”Olen lentänyt ilman housuja”

    4. 4

      ”Maailman turvallisin” kolikko otetaan tänään käyttöön – siihen on piilotettu salainen ominaisuus

    5. 5

      Australiassa aavemainen tunnelma, syklonin tuhovoima tuntuu jo – ”Aivan kuin tavarajunia tulisi läpi vasemmalta ja oikealta”

    6. 6

      Leo Komarov teki kiistanalaisen sopimuksen – ura Leijonissa vaakalaudalla

    7. 7

      Bikinipöksyt kokevat tänä kesänä muodonmuutoksen – pukisitko itse yllesi?

    8. 8

      Australian ”Jurassic Parkista” löytyi valtavia dinosaurusten jalanjälkiä

    9. 9

      Autotehtaan 30 000 euron vuosipalkka herätti ihmetystä – näin Valmet Automotive vastaa

    10. 10

      Täällä asuvat Suomen tyytyväisimmät asukkaat – listalla uusi kärkikunta

    11. Näytä lisää
    1. 1

      Bikinipöksyt kokevat tänä kesänä muodonmuutoksen – pukisitko itse yllesi?

    2. 2

      Vihreä Nissan lepää kyljellään Tornion keskustassa – poliisi kertoo, miksi ei puutu tapaukseen

    3. 3

      Salainen laatuvirhe paljastui omakotitalosta – lattiakaivon hinnaksi tuli lähes 40 000 euroa

    4. 4

      "Ei kai alapää ole hygieenisempi?" – julkisessa saunassa sattunut tapaus kuohuttaa taas HS:n mielipideosastossa

    5. 5

      Tässäkö Suomen raskaimmat ja stressaavimmat työt? Katso 30 ammatin lista

    6. 6

      Albinismia sairastavat kaksostytöt ihastuttavat malleina – poseeraavat nyt yhdessä tumman isosiskonsa kanssa

    7. 7

      Karu kuva rannalta kertoo, miksi sukeltaja etsi kahville lähteneitä pilkkijöitä – hoksaatko, mikä sitten herätti pelastajien huomion?

    8. 8

      Äiti kysyi, mistä uudet farkut kiristävät? 4-vuotiaan pojan ronski vastaus huvittaa

    9. 9

      Autotehtaan 30 000 euron vuosipalkka herätti ihmetystä – näin Valmet Automotive vastaa

    10. 10

      Liisa on saanut 560 e/kk ilmaista rahaa vuoden alusta saakka – näin perustulokokeilu vaikutti elämään

    11. Näytä lisää
    1. 1

      Merkel tyrmistyi ”hävyttömästä” tempusta – Trump ojensi 350 miljardin laskun

    2. 2

      Rovaniemen junan lähtö viivästyi yllättäen – konduktööriltä kylmäävä kuulutus: ”Junassa on vakava henkeä uhkaava tilanne”

    3. 3

      Nuoren naisen asunnosta levisi karmea haju 48 asunnon taloyhtiöön – löydön puhdistamiseen tarvittiin siirtolava

    4. 4

      Teinityttö tervehti tuntematonta miestä koulumatkalla – siitä käynnistyi painajainen

    5. 5

      Suomen tunnetuin bordelli pyöri Riihimäellä – rattohotelli Bonanzan henkilökunnalla suora ohje lapsiperheiden varalle

    6. 6

      IS seurasi tapahtumien etenemistä: Terrori-isku parlamentin luona Lontoossa – 4 kuoli

    7. 7

      Teinityttö julkaisi hervottoman kuvaparin äidistään kostean illanvieton jälkeen – kiusallinen kuva villitsee somessa: ”Lauantai ja sunnuntai”

    8. 8

      Tiesitkö? Helsingissä asuu yksi kaikkein aikojen menestyneimmän heviyhtyeen kitaristi – rakastui suomalaiseen Mariaan, elää nyt lapsiperheen arkea Suomessa

    9. 9

      Vihreä Nissan lepää kyljellään Tornion keskustassa – poliisi kertoo, miksi ei puutu tapaukseen

    10. 10

      Pilvi Hämäläiselle kävi hillitön asumoka – saapui Jussi-gaalaan Aina Inkerin polvisukissa: ”En muistanut, että mulla on halkio”

    11. Näytä lisää
    Näitä luetaan!
    1. 1

      Yön uutiset: Katso mitä tapahtui, kun nukuit

    2. 2

      HS: Kahvi uhkaa loppua maailmasta, tilanne dramaattisen vakava – myös Suomen Paulig on huolissaan

    3. 3

      Teinitytöt legginseissä käännytettiin lähtöportilla, somemyrsky nousi USA:ssa – huippumalli Chrissy Teigen: ”Olen lentänyt ilman housuja”

    4. 4

      ”Maailman turvallisin” kolikko otetaan tänään käyttöön – siihen on piilotettu salainen ominaisuus

    5. 5

      Australiassa aavemainen tunnelma, syklonin tuhovoima tuntuu jo – ”Aivan kuin tavarajunia tulisi läpi vasemmalta ja oikealta”

    6. Näytä lisää
    1. 1

      Bikinipöksyt kokevat tänä kesänä muodonmuutoksen – pukisitko itse yllesi?

    2. 2

      Vihreä Nissan lepää kyljellään Tornion keskustassa – poliisi kertoo, miksi ei puutu tapaukseen

    3. 3

      Salainen laatuvirhe paljastui omakotitalosta – lattiakaivon hinnaksi tuli lähes 40 000 euroa

    4. 4

      "Ei kai alapää ole hygieenisempi?" – julkisessa saunassa sattunut tapaus kuohuttaa taas HS:n mielipideosastossa

    5. 5

      Tässäkö Suomen raskaimmat ja stressaavimmat työt? Katso 30 ammatin lista

    6. Näytä lisää
    1. 1

      Merkel tyrmistyi ”hävyttömästä” tempusta – Trump ojensi 350 miljardin laskun

    2. 2

      Rovaniemen junan lähtö viivästyi yllättäen – konduktööriltä kylmäävä kuulutus: ”Junassa on vakava henkeä uhkaava tilanne”

    3. 3

      Nuoren naisen asunnosta levisi karmea haju 48 asunnon taloyhtiöön – löydön puhdistamiseen tarvittiin siirtolava

    4. 4

      Teinityttö tervehti tuntematonta miestä koulumatkalla – siitä käynnistyi painajainen

    5. 5

      Suomen tunnetuin bordelli pyöri Riihimäellä – rattohotelli Bonanzan henkilökunnalla suora ohje lapsiperheiden varalle

    6. Näytä lisää