SÄHKÖINEN PLAGIAATINTUNNISTUS SUOMEN KORKEAKOULUISSA

1. SÄHKÖINEN PLAGIAATINTUNNISTUS SUOMEN KORKEAKOULUISSA Havaintoja teknologian hyödyistä ja kehittämistarpeista Totti Tuhkanen, Turun yliopisto 12.5.2014

2. Esittelijän työpöydältä: • Sähköisen plagiaatintunnistuksen käyttöönottopolku Turun yliopistossa: • Plagiaatintunnistusteknologiaa koskeva esiselvityshanke elo-joulukuussa 2011 • n. 500 henkeä työllistänyt pilotointi helmi-kesäkuussa 2012 • järjestelmän hankinta ja käyttöönotto elo-joulukuussa 2012 • velvoittava käyttö väitösten ja lisureidentarkastuksissa 1.1.2013 alkaen • velvoittava käyttö kandien ja gradujen tarkastuksissa 1.8.2013 alkaen • * • Työnohjaajia, opettajia, selvittäjiä sekä kirjastoinformaatikkoja on koulutettu kontaktiohjauksena n. 800 henkeä, tiedekunnissa tarjotaan myös vertaisohjausta. • Tarkastettu on tähän mennessä noin 2800 opinnäytettä: • 220 väitöskirjaa • 1350 pro gradua • 1230 kandidaatin tutkielmaa • tuhansia harjoitustehtäviä • satoja tutkimussuunnitelmia, kypsyysnäytteitä, proseminaaritöitä • Käyttöönottokokemukset ovat olleet rohkaisevia. • Tilastointi tehdään neljännesvuosittain.

3. KONTEKSTI

4. % % % Suomessa vallitsee OSALLIStUVAN ohjauksen KÄYTÄNTÖ. Luottamusperiaatetta pidetään tärkeänä. Plagiaatintarkastusistunto on työnohjauksen päättävä istunto, kattava opinnäytteen läpikäynti ja arviointi-tilaisuus. Kuvassa FM Mirkka Hirvonen ja rehtori Kalervo Väänänen Turun yliopistosta.

5. Turun yliopistossa kohdattuihin plagitointivilppitapauksiin on liittynyt usein • taustatekijänä: • ohentunut ohjaussuhde • puutteita opiskelu- tai kielitaidossa • elämänhallinnan ongelmia • kyvyttömyyttä tunnistaa tieteellisen kirjoittamisen luonne erotuksena esim. some-kirjoittamisen käytännöistä.

7. Vuosina 2008-2013 Suomen korkeakouluihin hankittiin kattava PT-infrastruktuuri osaksi koulutuksen ja tutkimuksen laatujärjestelmää. Hankinta- ja käyttöönottopolut olivat melko kirjavia ja PT-toiminnalla ei näyttänyt olevan selkeää omistajaa. Päätettiin tutkia, miten toiminnan perusrakenteita voitaisiin selkeyttää ja vahvistaa. • Selvitystyö käynnistyi helmikuussa 2013 tiedonkeruulla korkeakoulujen PT-järjes-telmähankinnoista sekä palvelujen organisoinnista ja resursoinnista. • Kickoff -seminaari 18.4.2013 Hankenilla: - 80 osallistujaa, 18 alustajaa- perustettiin 4 jatkotyöryhmää. • JTR:t kokoontuivat vuonna 2013 14 kertaa ja toteuttivat useita tiedonkeruita ja pilotointeja. Verkosto-yhteistyöhön osallistui yli 100 opinto-ja tieto- ja yleishallinnon edustajaa. • JTR:ttukivat PT-järjestelmienkäyttäjien kansallista verkostoitumista. • Selvitysmies luovutti raportin OKM:nKorkeakoulu- ja tiedepolitiikan osastolle7.3.2014. • Jatkotyöryhmien selvitysalueet olivat: • hankintakriteereihin liittyvän vaatimusmäärittelyn kehittäminen ja asiakkuuskonseptinkehittäminen, • PT-järjestelmientietoturvaa ja tietosuojaa määrittävien tekijöiden kartoitus, • PT-järjestelmienkäyttösääntöjen ja prosessiohjeiden benchmarkkausja kehittämistarpeiden kartoitus, sekä • PT-järjestelmienreferenssitietokantojen kehittämistarpeiden kartoitus ja kehittämispolitiikan hahmottelu.

8. Tekniikka Toiminta - osaksi kokonaisarkkitehtuuria - osaksi laatujärjestelmää

9. Plagiointi on ylihistoriallinen ongelma • Jo muinaiset kiinalaiset… • Tang-dynastian (618-907) aikana tunnettiin laaja plagiarismiongelma(Miyazaki 1976) • Suomessa hylättiin plagiointivilpin vuoksi väitöskirjat vuosina 1847 ja 1853 (Luukkanen 2002) • Plagiointi sai uusia merkityksiä ja muotoja WWW:n myötä 1990-luvulla, kun opinnäytteissä lähdetyön painopiste alkoisiirtyä tiedekirjastoista avoimeen tietoverkkoon. Tiedeyhteisön proaktiivinen ohjausvaikutus lähdetyöhön oheni. • Suomi oli tunnistinteknologian kehittelyssä alusta alkaen mukana: • Berkeleyn yliopistossa avattiin uraauurtava Plagiarism.org -palvelu 1995 • Tampereen teknillinen yliopistossa käyttöön PLAKKI vuonna 1998. • Teknologianäkökulman ja arvoanalyyttisen näkökulman yhdistävää analyysia edustaa esim. TaY:n plagiointityöryhmän varhainen selvitysraportti (Surakka et. al.) vuodelta 2003. • Globaaleihin vertailutietokantoihin pohjautuvan tunnistinteknolo-gian käyttö plagiointiongelman hallinnan tukena yleistyiSuomessa 2010-luvun vaihteesta alkaen. Samalla tuotiin keskusteluunongelman sidos korkeakoulutuksen kansainvälistymiseen. 29.10.2007 YLE, Tuotantoyksikkö Kantti. Kantti.net. HY:n kirjasto, Franzenin kadun yksikkö 1970-luvulla. Kuva: Eero Piirainen /Esko Isopuro. Miyazaki, I. 1976: China’s Examination Hell: The Civil Service Examinations of Imperial China. NY, Weatherhill. Luukkanen, T. L. 2002. Samamenetelmä, erikohtalot – kaksiväitöskirjaplagiaattiateologisessatiedekunnassa. Teoksessa H. Mustakallio (toim.) Suomenkirkkohistoriallisenseuranvuosikirja 89–91 (1999–2001). Helsinki: Suomenkirkkohistoriallinenseura.

10. Plagiaatintunnistusjärjestelmät Suomen korkeakouluissa • 34 korkeakoululla on PT-järjestelmä. Markkinoita jakavat Urkund ja Turnitin • ensimmäinen laaja hankintavaihe 2008-09 Amkit-verkostontoimesta • kolme yliopistoa toteutti käyttöönoton vuonna 2010 • 11 yliopistoa kilpailutti hankinnan vuosina 2011-13 • ensimmäisen vaiheen hankinnoista enemmistö oli ruotsalaisia Urkundeja, toisen vaiheen hankinnoista amerikkalaisia Turnitineja • vasta kilpailutukset toivat kokonaisarkkitehtuuriajattelun käyttöönottojen suunnitteluun.

11. Koulutuksen ja lähituen organisointi Käyttötavan määrittelyvastuu Integraatiot ja lisensiointi • palvelun omistajuus on 75 % opintohallinnolla • loppukäytön tuki on ~75 % organisoitu OHA:n eri toimintamuotojen kautta • myös kirjastoinformaatikoilla merkittävä rooli käyttäjätuessa ja käyttöön koulutuksessa • lisenssit, integraatiot, tekninen online-tuki yleensä IT-palveluilla, kuitenkin hajaantuneesti • joissakin tapauksissa (amk) loppukäyttäjätuki ja ylläpitovastuu toimittajalla. • PT-palveluiden kehittämisen kannalta omistajuustilanne ei ole ongelmattoman selkeä. • suuria kehittämistarpeita liittyy referenssiaineistojen kattavuuden ja teknisen laadun kehittämiseen.

12. Miten yleistä plagiointi on Suomessa? • Plagiointiongelman laajuutta koulutustasoittain ei Suomessa ole tilastollisesti kartoitettu. • Vertailukelpoinen tilastointi on todettu erittäin haasteelliseksi mm. IPPHEAE:n (Impact of Policies for Plagiarism in Higher Education Across Europe) EU-tasoisessa seurantatutkimuksessa 2013. ”IPP” • Toimintatutkimuksen tuottamat havainnot opiskelijoiden asenteista ja kokemuksistaSuomessa ovat vastanneet 2000- ja 2010-luvulla kansainvälisten tutkimusten keskimääräisiä tuloksia. • Seurannalle on luotu lähtökohta: TENK:n1.3.2013 voimaan tulleen HTK-ohjeen mukaan: • ”Hyvän tieteellisen käytännön loukkausta koskevasta epäilystä ja siihen liittyvistä päätöksistä HTK-prosessineri vaiheissa on tehtävä ilmoitus tutkimuseettiselle neuvottelukunnalle, jotta se voi seurata ohjeistuksen noudattamista ja tutkimusetiikan tilaa Suomessa.” • Tilastoivan seurannan käynnistäminen vaatinee 3 – 4 vuoden valmisteluajan. • Korkeakouluissa koetaan epävarmuutta ilmoituskynnyksestä (vilpin vakavuusaste) sekä tapausten luokittelusta tutkimusvilpin tai opintovilpin piiriin (käsitteiden kattavuus). – Olisi tarve legitimoida aina seuraamus -periaatesekä harmonisoida ohjeistuksia ja käsitteitä.– Seurantatiedon keruun pohjaksi tarvitaan korkeakoulujen sisäisen tapahtumaraportoinninvakiinnuttaminen (2013 vain TY ja MPK) sekä korkeakoulun ja TENK:n välisen tiedonvaihdontarkempi ohjeistus/sähköinen asiointiprosessi.

13. SK 50/2013: ”Ovatko suomalaiset 200 kertaa rehellisempiä kuin ruotsalaiset?” Suomi vs Ruotsi? Vertailukohdan tarjoavassa Ruotsissasanktioihin johtaneiden opiskelu-vilppitapausten määrää seurataan korkeakoulujen vuositilastoinnissa. – Ruotsalaisen seurantatiedon käytettävyyttä voi heikentää yliopistojen ja ammattikorkeakoulujen tapahtumatiedon yhdistäminen tuloskategorioissa.Seurantamenettelyä ollaankin uudistamassa 2014. Opintoihin liittyvien vilppitapausten määrä nousi 20012012 531%.1Vuonna 2012 Ruotsissa sanktioitiin 801tapausta, joista n. 450 liittyi plagiointiin; 81 % näistä tapauksista johti opiskelijan määräaikaiseen erottamiseen. – Suomen korkeakoulujen opiskelijamäärään suhteutettuna vertailutaso olisi n. 290 sanktioitua tapausta joista 163 liittyisi plagiointivilppiin. Universitetskanslersämbetet, Rapport 2013:6: Disciplinärenden 2012 vid universitetochhögskolor, 8-9, 12 diagram 5 (osa).

14. 135 % 178 % 1033 % 41 % 684 % 175 % 133 % 167 % 140 % 228 % 492 % 202 % 1100 % Andelen disciplinärenden per lärosäte 2012 (antalet disciplinärenden delat med antal helårsstudenter)Universitetskanslersämbetet, Rapport 2013:6: Disciplinärenden 2012 vid universitetochhögskolor,s 12, diagram 6. David Barrett: The cheating epidemic at Britain’s universities. University cheating league table. The Telegraph 05 Mar 2011.

15. PlagiarismReferenceTariff antaa kansallisen tason ohjeiston eri asteisen plagiointi-vilpin sanktiointiin.

16. SÄHKÖISEN PLAGIAATINTUNNISTIMEN TOIMINTAPERIAATE 3. Ref 2. Ref Plagiaatintunnistin on kehittynyt kokotekstihakukone, joka suorittaa lähdetekstin ja vertailutekstien samankaltaisuusvertailun. PT osaa käsitellä vaihdettuja sanajärjestyksiä, tehdä vertailuja synonyymisanojen kautta ja vähittäin myös kielestä toiseen. 1. Ref PT Esimerkkinä kuvattu Turnitin.comin tietokannat, tiedot vuodelta 2013.

17. PT-toiminnallisuus oppimisalustaan integroituna (84 % integroitu/ollaan integroimassa) Opettaja, opiskelija ja tunnistusjärjestelmä OPETTAJA OPISKELIJA PT-JÄRJESTELMÄ 3. Ref 2. Ref Osoitelinkki 1. Ref Perustaaoppimisalustaan plagiaatintunnistus -palautustehtävän. Laatii kirjallisen opintosuorituksen ja tallentaa tekstin palautustehtävään 1-n kertaa. Antaa palautetta /todistuksen tarkastuksesta Arvioi vertailun tulosraportin löydökset. Arvioi ohjaavan palautteen tarpeen. VERTAILURAPORTTI TULKITSEE MERKITSEE LAATII

18. PLAGIAATINTUNNISTIN KORKEAKOULUN TOIMINTAKONTEKSTISSA OHA IT KH Monissa korkeakouluissa on jääty järjestelmäkäyttäjiksi: laatupalvelun tasoa tai plagiarisminhallinnan politiikkaa ei ole määritelty.

19. Esittelijän työpöydältä: FAIRUTU-PALVELUN SIDOKSET YO- ja amk-laki Laki viranom. toiminnan julkisuudesta Tekijänoi-keuslaki TENK:HTK 2012 20% 80% PT-järjestelmän käyttö liittyy koulutuksen ja tutkimuksen ydinprosesseihin ja niiden kautta moniin toimintaa ohjaaviin säädöksiin ja ohjeisiin. Myös teknisiä rajapintoja voi olla useita. Näin tiiviisti organisaatioon ”kiinninaulatun” tietojärjestelmän hankinnassa korostuvat pitkän elinkaaren hyödyt ja vaatimukset.

20. PANOS–TUOTOS-SUHTEEN HALLINTA? Kaikki plagiointi ei ole plagiointivilppiä. Plagiointivilppi on osa opiskeluvilppiä.

21. VÄHITELLEN KUMULOITUVAT HYÖDYT… Seuratuilla ongelmakursseilla vilpistely on saatu hallintaan! Kohdatut plagiointitapaukset 2005 2012 Tunnistin ”puree” !

22. SUOSITUKSIA KEHITTÄMISTOIMENPITEIKSI

24. – Plagiaatintunnistuksen käyttöönotto on tiedekustantajille yhtä kuormittava asia kuin korkeakouluille!

25. VS Hajautettu vs keskitetty tietovarastointi ja siihenliittyvä sähköinen plagiaatintunnistusmenettely. Vrt. Theseus ja eThesis

27. MUITA TEKNOLOGIA- JA YHTEENTOIMIVUUSKYSYMYKSIÄ • (raportissa käsiteltyjä ongelma-alueita) • Osittaiset indeksoinnit • Eksklusiiviset lisensioinnit • Epävalidit tallennusmuodot • Manipuloidut tallenteet • Käytettävyys (käyttöliittymät) suora-käytössä ja integroiduissa ympäristöissä Näytekuva LaTeX-ohjelmalla tuotetunPDF-tallenteen rikkomastaalkuperäisyysraporttinäkymästä.

28. TYÖKÄSITTEIDEN MÄÄRITTELYTARVE

29. PLAGIOINTI- PLAGIOINTI VILPPI OPISKELU- VILPPI Sähköisen plagiaatintunnistuksen ulottuvillaoleva plagiointi PT-järjestelmillä kontrolloitavissa olevalähdetiedon käyttö on osa laajempaailmiökenttää. Sen hallintaan liittyvää käsitteistöäon tarve laajentaa ja täsmentää. Kaavio on Kari Silpiön (Haaga-Helia) laatimasta käsitemäärittelyartikkelista(raportin 6. luku 6)

30. Uudet tarvittavat käsitteet: • Plagiointi opintosuorituksessa • Opiskeluvilppi • Plagiointivilppi Kaavio on Kari Silpiön (Haaga-Helia) laatimasta käsitemäärittelyartikkelista(raportin 6. luku)

31. Eettinenkirjoittaminen Plagiointi opintosuorituksessa PlagiointivilppiTahallinen tai törkeästä piittaamattomuudesta seurannut plagiointi opintosuorituksessa - Suora kopiointi - Mukaillen tehty kopiointi - Vapaamatkustaminen ryhmätyösuorituksessa - Epärehellinen yhteistoiminta - Itsensä plagiointi Tahaton plagiointi opintosuorituksessa - Hyväksyttävästä tietojen tai taitojen puutteesta tai lievästä huolimatto­muudesta johtunut puutteelli­nen lähdeviittaaminen a. Tekstion oma luomus. b. Lähdeviittauksetja lähdeluetteloovat kunnossa. c. Epäsuorat lainaukset on pyritty tekemään vääristele-mättä asiasisältöä. d. Sitaattioikeus täyttyy suorien lainausten tapauksessa. Kaavio yllä on Kari Silpiön (Haaga-Helia) laatimasta käsitemäärittelyartikkelista(raportin 6. luku 6)

32. NORMATIIVISTEN OHJEISTOJEN HARMONISOINTITARVE

33. Vilppitapausten käsittely- ja HTK-ohjeistojenitsearvioinnintueksi tuotetut suositukset valmisteli Aalto-yliopiston lakimies Anna Johansson. Raportti, luku 7.

34. Esimerkki tieteellisen tiedon käytön koulutukseen nivelle-tystäPT-järjestelmän käyttö-valmennuksestaopintopoluneri vaiheissa.Käyttö liitetään opintojenvaiheen mukaisiin osaamis-tavoitteisiin.Tämän geneerisen, sekäamk- että yliopisto-opintojensuunnittelua tukevan mallin määritteli työryhmä MarkkuIhonen, Elizabeth San Miguel , Irma Mänty, Anne Nevgi, SannaSuoranta, Sari Tervonen, TottiTuhkanen. Raportti, luku 8.

35. Esimerkki usean näkökulman kysymyssarjasta, jolla voidaan kartoittaa ohjausmenettelyjen mitoituksen riittävyyttä sekä ohjaavan aineiston löydettävyyttä ja kattavuutta. Kysymyssarjat laati työryhmä MarkkuIhonen, Elizabeth San Miguel, Irma Mänty, Anne Nevgi, SannaSuoranta, Sari Tervonen, TottiTuhkanen. Raportti, luku 8.

37. YHTEENVETO TUNNISTETUISTA KEHITTÄMISALUEISTA: • HANKINNAT JA PALVELUNKEHITTÄMINEN • Luodaan valmius yliopistojen ja ammattikorkeakoulujen hankintayhteistyöhön kansallisella tasolla • Kehitetään järjestelmien ja toimintaprosessien kokonaistietoturvaa • Kehitetään PT-järjestelmientestausmenettelyjä • Kehitetään PT-järjestelmienluotettavuutta ja käytettävyyttä parantaviatoimintamalleja ja teknisiä ratkaisuja • TUOTANTOKÄYTTÖ JA TOIMINNAN LAADUN KEHITTÄMINEN • Kehitetään plagiointitapausten laadullista ja määrällistä seurantaa • Esitetään PT-käytäntöjen ja ohjausjärjestelmien liittämistä KKA:nlaatuauditoinnin piiriin • Määritellään suomalaisten vertailutietovarantojen kehittämistavoitteet • Sovitaan vertailutietovarantojen kehittämisohjelmalle omistaja • Määritellään vilppitapausten käsittelyn ja HTK-ohjeistojen kattavuuden, rakenteen ja käsitteellisen tarkkuuden kehittämiselle yhtenäiset tavoitteet • Määritellään HTK:n koulutukselle opintojen vaiheen mukaiset suositukset.

38. LOPUKSI HYVÄ KÄYTÄNTÖ LÄNSIRANNIKOLTA:

39. Eettinen ohjeisto Rehtori Kalervo Väänänen vahvisti 5.9.2013 Turun yliopiston Oppimisen eettiset ohjeet opiskelijoille ja opettajille. Ohjeet sitovat jokaista ylioistoyhteisömme jäsentä henkilökohtaisesti. Opintovilppi on rikkomustätä ohjeistoa sekä hyväätieteellistä käytäntöä vastaan.

40. Lisätietoja selvitysraportista: Totti Tuhkanen Puhelin 040 5022526 totti.tuhkanen@utu.fi Raportti on ladattavissa osoitteesta: https://confluence.csc.fi/x/iRFBAg