Digitoday

Tutkija kehitti työkalun uutisten seurantaan

Julkaistu: , Päivitetty:

Perjantaina väittelevä Juha Makkonen on kehittänyt menetelmiä uusien uutistapahtumien havaitsemiseen ja aiemmin havaittujen tapahtumien seuraamiseen. Google News voi olla nopea, mutta onko se tarpeeksi tarkka?


Terveyden ja hyvinvoinnin laitoksessa työskentelevä filosofian maisteri Juha Makkonen esittää semanttisia luokkia, joihin sanat ryhmitellään merkitystensä mukaan samankaltaisten sanojen joukoiksi. Luokkia ovat esimerkiksi yleiset sanat sekä organisaatiot, henkilöt ja paikanilmaukset. Tekstistä tunnistetaan myös ajanilmaukset.

Tuloksena käytännön uutishaku voisi esimerkiksi erottaa toisistaan kaksi eri lento-onnettomuusuutista, jotka ovat samanlaisia yleisten sanojen kannalta, mutta erilaisia paikkojen ja ajanilmausten suhteen, Helsingin yliopisto hahmottaa.

Tarkkuutta nopeuden
kustannuksella


Automaattinen uutistapahtumien seuranta on tietojenkäsittelytieteen ja siinä tiedonhaun piiriin kuuluva tutkimusalue, jossa kehitetään menetelmiä digitaalisen uutisvirran hallintaan.

Uutisvirta koostuu useista, mahdollisesti erikielisistä uutislähteistä, joissa voi olla digitaalisia online-uutisia ja radio- sekä televisiouutisia.

Perinteiset tiedonhakumenetelmät, jotka ovat internet-tiedonhakujärjestelmien perustana, vertailevat tekstidokumentteja joukkoina sanoja ja käsittelevät sanoja merkkijonoina nopeasti. Erityisen vaikeaa on ollut tunnistaa kaksi samantyyppistä uutistapahtumaa, Makkonen taustoittaa.

Väitöskirjan nimi on Semantic Classes in Topic Detection and Tracking (Semanttisten luokkien soveltaminen automaattisessa uutisseurannassa).

Se mitä Makkosen keinoin hävittäisiin nopeudessa, voitettaisiin tarkkuudessa. Kielellinen analyysi hidastaa toimintaa jonkun verran, mutta väittelijän mukaan sitä voitaisiin tarvittaessa kompensoida laittamalla rautaa riviin.

Tuntuva
parannus


Oma kysymyksensä tosin on, missä määrin Google tai esimerkiksi Yahoo jo käyttävät tämäntyyppisiä semanttisia menetelmiä omissa uutispalveluissaan.

Makkonen kuitenkin veikkaa, että kovin syvälliseen sisältöanalyysiin ei suurissa uutispalveluissa vielä mentäne, koska käsiteltävän aineiston määrä on niin mittava. Jos dataa tulee sisään nopeammin kuin sitä pystytään käsittelemään, palvelut jäisivät koko ajan jälkeen, Makkonen miettii.

Juha Makkosen uusilla menetelmillä erot olivat etenkin olemassa olevien uutisten seurannassa tilastollisesti merkittäviä, ja keinot paransivat tuntuvasti uutistapahtumien seurannan tarkkuutta verrattuna perinteiseen lähestymistapaan.

Uusien tapahtumien tunnistamista menetelmä paransi vähemmän. Tämä alue pysyy edelleen vaikeana ongelmana yksinkertaisesti siitä syystä, että uusia tapahtumia pitää verrata kaikkeen vanhaan. Silloin vertailuaineisto on sanalla sanoen valtava.

Kommentit

    Näytä lisää

    Näitä luetaan!
    1. 1

      Yksi kuollut ja muutamia loukkaantunut yliajossa Helsingin keskustassa

    2. 2

      Venäjän valtion lentokoneeseen lastattiin Lappeenrannassa laatikkokaupalla Koskenkorvaa ja konjakkia

    3. 3

      Maisa Torppa kannustaa rakastaan sporttisena Jyväskylän MM-ralleissa – ”Vettä tulee, kun saavista kaatamalla”

    4. 4

      Mikä puserrus! Järjettömän treenattu Britney Spears, 35, hurmasi – rintavako näkyi avoimesti

    5. 5

      Tiesitkö tätä? Hyytävä yksityiskohta herttuatar Catherinen vaatteista tuli ilmi – kuninkaallisille välttämätön tapa

    6. 6

      Pikkulapsi putosi kerrostalon ikkunasta Helsingissä – loukkaantui vakavasti

    7. 7

      Postilla kävi järkyttävä kirjemoka Savossa – Kutsu lapsen hautajaisiin ei tavoittanut vieraita

    8. 8

      Uhkean tv-tähden uimapuku ei välttämättä sopisi yleiselle uimarannalle – illuusio alastomuudesta: Upea figuuri paljastui

    9. 9

      Kysely: Suomalaisia pidetään verrattain rumina – täällä paikalliset vievät jalat alta

    10. 10

      EK11: Esapekka Lappi jyrää Jyväskylässä – suomalaisilla yhä neloisjohto

    11. Näytä lisää
    1. 1

      Putinin turvamieheltä yllättävä veto Punkaharjulla – Saimi Hoyer: ”Tarjoilijamme toimi, kuten oli kehotettu”

    2. 2

      Keltamekkoinen nainen varasti huomion Olavinlinnan laiturilla – Putinin vieressä myös illallisella

    3. 3

      Maailman halvin remonttikikka – Jutta uudisti keittiönsä 18 eurolla Lidlin materiaaleilla

    4. 4

      Putinilta sympaattinen ele tv-kameroiden edessä – huomasitko mitä tapahtui?

    5. 5

      Kirsi Salo, 50, yllättää yläosattomissa – poseeraa sensuellissa uintikuvassa vain lumpeenlehti povensa peittona

    6. 6

      Kysely: Suomalaisia pidetään verrattain rumina – täällä paikalliset vievät jalat alta

    7. 7

      Näkemiin, Suomi! Näin Putin jätti Savonlinnan yöllä, Niinistöä odotti karumpi kyyti

    8. 8

      Robert Enke teki itsemurhan, leski avautuu nyt salatusta kaksoiselämästä: ”Edes lähimmät ystävät eivät tienneet”

    9. 9

      Venäjän presidentti jätti onnittelut Suomelle lausumatta – Moskovan ex-suurlähettiläs: Putin on puhunut Suomesta ”hieman erikoisella tavalla”

    10. 10

      Nainen teki 3 muutosta aamupalaan, ja paino alkoi pudota

    11. Näytä lisää
    1. 1

      Marjanpoimijoiden touhut hillasuolla herättivät epäilyt – Matti kurkisti ämpäriin ja tyrmistyi

    2. 2

      Perheenäiti Laura, 31, joutui häipymään joogatunnilta kesken touhun – julkaisi rehellisen tilityksen: Nolo tarina leviää

    3. 3

      Kansainvälisen uintiliiton julkaisema kuva järkyttää – ”Todella nöyryyttävää, epäkunnioittavaa, skandaali”

    4. 4

      Teinityttö julkaisi tavalliselta näyttävän kuvan itsestään ja poikaystävästään – synnytti yllättäen silmittömän nettiraivon

    5. 5

      Putinin turvamieheltä yllättävä veto Punkaharjulla – Saimi Hoyer: ”Tarjoilijamme toimi, kuten oli kehotettu”

    6. 6

      Duudsonit-Jukka esittelee tyrmäävän vaimonsa Instagramissa – tältä näyttää julkisuudesta pois pysytellyt kaunotar

    7. 7

      Keltamekkoinen nainen varasti huomion Olavinlinnan laiturilla – Putinin vieressä myös illallisella

    8. 8

      Testasimme viikon unihaasteen: mitä tapahtuu, kun menee nukkumaan joka ilta klo 21?

    9. 9

      ”Palopuron puuma” Laura, 40, vaihtoi nuupahtaneen liiton 15 vuotta nuorempaan mieheen: ”Seksi on hyvää”

    10. 10

      Mökkinaapuri järjesti harvinaisen viheliäisen koston auton lämmitysajastimen avulla

    11. Näytä lisää
    Näitä luetaan!
    1. 1

      Yksi kuollut ja muutamia loukkaantunut yliajossa Helsingin keskustassa

    2. 2

      Venäjän valtion lentokoneeseen lastattiin Lappeenrannassa laatikkokaupalla Koskenkorvaa ja konjakkia

    3. 3

      Maisa Torppa kannustaa rakastaan sporttisena Jyväskylän MM-ralleissa – ”Vettä tulee, kun saavista kaatamalla”

    4. 4

      Mikä puserrus! Järjettömän treenattu Britney Spears, 35, hurmasi – rintavako näkyi avoimesti

    5. 5

      Tiesitkö tätä? Hyytävä yksityiskohta herttuatar Catherinen vaatteista tuli ilmi – kuninkaallisille välttämätön tapa

    6. Näytä lisää
    1. 1

      Putinin turvamieheltä yllättävä veto Punkaharjulla – Saimi Hoyer: ”Tarjoilijamme toimi, kuten oli kehotettu”

    2. 2

      Keltamekkoinen nainen varasti huomion Olavinlinnan laiturilla – Putinin vieressä myös illallisella

    3. 3

      Maailman halvin remonttikikka – Jutta uudisti keittiönsä 18 eurolla Lidlin materiaaleilla

    4. 4

      Putinilta sympaattinen ele tv-kameroiden edessä – huomasitko mitä tapahtui?

    5. 5

      Kirsi Salo, 50, yllättää yläosattomissa – poseeraa sensuellissa uintikuvassa vain lumpeenlehti povensa peittona

    6. Näytä lisää
    1. 1

      Marjanpoimijoiden touhut hillasuolla herättivät epäilyt – Matti kurkisti ämpäriin ja tyrmistyi

    2. 2

      Perheenäiti Laura, 31, joutui häipymään joogatunnilta kesken touhun – julkaisi rehellisen tilityksen: Nolo tarina leviää

    3. 3

      Kansainvälisen uintiliiton julkaisema kuva järkyttää – ”Todella nöyryyttävää, epäkunnioittavaa, skandaali”

    4. 4

      Teinityttö julkaisi tavalliselta näyttävän kuvan itsestään ja poikaystävästään – synnytti yllättäen silmittömän nettiraivon

    5. 5

      Putinin turvamieheltä yllättävä veto Punkaharjulla – Saimi Hoyer: ”Tarjoilijamme toimi, kuten oli kehotettu”

    6. Näytä lisää