fairUTU

1. Getty Images Plagiaatintunnistus Turun yliopiston opinnäytteissä ja harjoitustöissä Totti Tuhkanen Turun yliopiston opintohallinto 3.10.2013 A.D. Getty Images fairUTU

2. 1 Miksi? Sähköinen plagiaatintunnistus otettiin osaksi opetuksen ja tutkimuksen tukipalveluita, koska: • Opinnäytetekstien kollaasimaisuus ja ’wikipedisaatio’ kuormittavat opettajia yhä enemmän– lähdetiedon käytön ohjausta on tarve tehostaa opintojen kaikissa vaiheissa. • Korkeakoulujen laatukilpailu kiristää työnohjauksen vaatimuksia–tunnistusjärjestelmä jo standardivaatimus ohjausprosesseissa: 37 korkeakoulua on hankkinut plagiaatintunnistusjärjestelmän Suomessa. • Monikulttuurisessa ympäristössä tarvitaan uudenlaisia seurannan välineitäKansainvälistyminen luo tilausta menettelytavoille, joilla voidaan tukea turvallista juurtumista suomalaiseen toiminta- ja arvoympäristöön. • Tiedeyhteistö käy plagiarismiinliittyvistä ongelmista aktiivista arvokeskustelua, esim: • H. Hurme: ”Plagiaattoreiden sisäänmarssi?” C. Woolson: ”When a Mentor becomes a Thief” • S-K Spoof: ”Plagioimalla tohtorikoulutukseen?” H. Schmoll: ”Plagiate von Professoren. Ergebenheit macht Diebe.” • K. Sintonen: ”Uudet ohjeet tutkimusvilpin ennaltaehkäisemiseksi.” S. Ji: ”90% of peer-reviewed clinical research is completely false” • A-L Paavola: ”Kone tunnistaa kopion”

3. 1 Miksi? Plagiaatintunnistusjärjestelmä otetaan käyttöön vaiheittain lukuvuoden2012 – 2013 aikana Miten kollaasimaisuus ja wikipedisaatio ilmenevät opinnäytetekstien valmistelussa? • Tiedonhankinnan strategiat omaksutaan sosiaalisen median kehyksestä: • Nopea teknisesti helppo sähköinen tiedonhaku hämärtää lähdekritiikin merkityksen. Kevyt parafraasi koetaan jo omaksi tiedoksi. Nootitusta mieluummin karsitaan kuin lisätään.Lähteiden sidoksia ei pohdita. ”Google vs. ’avoin Internet’ ” • Intuitiivinen ja kaikkiruokainen tiedonmuodostus heikentää tulosten verifioitavuutta: • – viitejärjestelmän merkitys muuttuu, kun käsitys lähdetiedon vaatimuksista muuttuu.– Internet-linkkien takana olevan viitetiedon muutosmekanismeja on vaikea kontrolloida. • ”Eilen siinä vielä luki näin!” • Itsekritiikin velvoite korvautumassa yhteisökritiikin odotuksella: • – lähdekriittinen tiedonhankinta vs. julkaistun tiedon jälkipuinti:proaktiivinenreaktiivinentoiminta. ”Tiedon DNA on muuttunut” Kuva: http://commons.wikimedia.org/wiki/File:Socrates_Louvre.jpg + tt Kuva: http://wwws.wikimedia.org

4. 1 Miksi? Tieteellisen vilpin seurantaa tehostetaan • TENK:n 14.11.2012 julkaisema ”Hyvä tieteellinen käytäntö ja sen loukkausepäilyjen käsitteleminen Suomessa -ohje luo ensimmäistä kertaa korkeakouluille velvoitteen raportoidaTENK:lle käsittelyyn otetuista ja käsitellyistä plagiointivilppiä koskevista selvityksistä. • Ruotsissasanktioihin johtaneiden opiskeluvilppitapausten määrää seurataan vuosi-tilastoinnissa. Määrä nousi 20092010 48% ja 20012011 522%.1 Tapauksista suuri osa oli plagiarismia. Tulokset kertovat sekä ongelman että sen tunnistusmenettelyjen nopeasta kehittymisestä. Högskolverket Rapport 2012:19R Disciplinärenden 2011 vid universitetet och högskolor

5. 1 Miksi? 135 % 178 % 1033 % 41 % 684 % 175 % 133 % 167 % 140 % 228 % 492 % 202 % 1100 % The Telegraph: The cheating epidemic at Britains’s universities HögskolverketRapport 2012:19R Disciplinärenden 2011 vid universitetet och högskolor

6. 2 Miten toimii? Opettaja, opiskelija ja tunnistusjärjestelmä OPETTAJA OPISKELIJA Osoitelinkki Perustaa Moodleen Turnitin-palautustehtävän. Laatii kirjallisen opintosuorituksen ja tallentaa tekstin Moodleen 1-n kertaa. Antaa palautetta Arvioi vertailun tulosraportin löydökset. Arvioi ohjaavan palautteen tarpeen. TURNITIN-JÄRJESTELMÄ VERTAILURAPORTTI TULKITSEE MERKITSEE LAATII

7. 2 Miten toimii? 3. Ref 2. Ref PT-järjestelmä on kehittynyt kokotekstihakukone, joka suorittaa lähdetekstin ja vertailutekstien samankaltaisuusvertailun. PT osaa käsitellä vaihdettuja sanajärjestyksiä, tehdä vertailuja synonyymisanojen kautta ja vähittäin myös kielestä toiseen. 1. Ref Mm. CROSSREF.ORG CENGAGEELSEVIERIEEE EMERALD NPG PUBMED … PT

8. Turnitin on globaali palveluohjelmisto. Miljoona rekisteröityä opettajaa käyttää sitä aktiivisesti 10 000 opetusorganisaatiossa. Kirjautuneita opiskelijoita on 20 miljoonaa. Suomessa Turnitinia käyttävät: - Aalto-yliopisto, - Hanken, - Itä-Suomen yliopisto, - Lappeenrannan tekn.yo, - Taideyliopisto, - Tampereen yliopisto, - Tampereen tekn.yo, - Turun yliopisto, - Vaasan yliopisto ja - Metropolia. Ruotsin suurimmat yliopistot ovat siirtyneet Turnitinin käyttäjiksi.

9. Sidokset TIETOINFRA NORMATIIVINEN OHJAUS IDM Laatu- käsikirja Tutkinto- vaatimukset Moodle Opinto-johtosääntö UTUGS- ohjeisto fairUTU Turnitin OPSU Eettinen ohjeisto Julkaisu- säännöt UTU-Doria Vilppi-käs.ohje FinELib lisensiointi TENK HTK-ohje Arkisto- sääntö

10. 3 Voiko sen kanssa elää? Ensimmäisessä seurantakyselyssä: • Opettajista 90 % ja opiskelijoista 100 % on pitänyt Turnitin-järjestelmää hyvin toimivana ja selkeänä käyttää  muutosvastarinta suht’ vähäistä • Tiedekuntiin on organisoitumassa omia PT:n käyttöä kehittäviä ryhmiä syntyy omaa käyttökulttuuria !

11. 3 Voiko sen kanssa elää? Seuratuilla ongelmakursseilla vilpistely on saatu hallintaan! Samalla työaikaa on vapautunut mekaanisesta taustatyöstä varsinaiselle ohjaukselle. Kohdatut plagiointitapaukset 2005 2012 Turnitin ”puree” !

12. 3 Voiko sen kanssa elää? TEKNIIKKA 20% TOIMINTATAVAT 80% - Oireiden hoito ei riitä, on yritettävä tunnistaa ongelmien syitä (-mikä saa ”oikaisemaan”?) ja tarvittaessa muutettava toimintatapoja + Toiminta- kulttuuri! toimenpiteet havainnot ”Turun yliopiston menettely-ohjeet vilppitapaus-ten varalle” Opetus-suunni-telmat Arviointi Opetus Metodi-opetus Tiedon-hankinta-koulutus

13. 4 Työkäsitteitä ja rajauksia Plagioinnilla tarkoitetaan yleisten tutkimuseettisten normien vastaista toisen henkilön tuottaman aineiston lainaamista ja esittämistä oman työn tuloksena. Tekstuaalisen plagioinnin muotoja on kuvattu seuraavasti: 1)”Kopioi ja liitä”-plagiointi tarkoittaa kopiointia suoraan Internetistä, tulostetusta materiaalista, käsikirjoituksista tms. jonkun muun tuottamasta materiaalista, ja oman nimen liittämistä tekijänä tällaiseen teksiin. Suorat käännökset ilman asianmukaista lähdeviittausta ovat myös kopioi ja liitä -plagiointia. 2)Jälkien häivytys; plagiointi sanaa tai sanoja vaihtamalla tarkoittaa tekstin kopioimista lähteestä siten, että tekee lähdetekstiin vain pieniä muutoksia esim. korvaamalla sanoja niiden synonyymeillä, jättää lähdeviittaukset pois parafraaseista, tai merkitsee suoran lainauksen parafraasiksi. 3) Itsensä plagiointi tarkoittaa saman sisällön käyttämistä useassa eri suorituksessa. 4)Idean, metaforan, konseptin tai tyylin plagiointi tarkoittaa toisen tekijän päättelyn seuraamista vaihe vaiheelta siten, että mukaillaan toisen tekijän teoksen sisältöä ja esitetään lainattu ajatusrakenne tai ilmaisutapa omana. 5) Yhteistoiminnallinen plagiointi tarkoittaa täydellistä tai osittaista vapaamatkustamista ryhmätyössä. 6) Institutionaalinen plagiointi: avustajien/haamukirjoittajien käyttö tekstien valmistelussa. Punaisella on merkitty ne plagioinnin muodot, joita sähköinen Turnitin voi käsitellä. (Lähde: Veikko Surakka et al: Plagiointi opintosuorituksissa. TTY 2003 – luokitus pohjautuu Cecilia Barnbaumin typologiaan vuodelta 2002.; Kari Silpiö, Opiskeluvilppi ja plagiointi korkeakoulujen opinto-suorituksissa, 77-78) fairUTU

14. 4 Työkäsitteitä ja rajauksia Turnitin tunnistaa Merkkijonojen samankaltaisuuksia Samankaltaisuus todennetaan indeksoidussa tietokannassa olevien viiteaineistojen välillä. Turnitin ei tunnista Kuvamuotoon (kuten tiff, jpg, png) tallennettua tekstiä Indeksoimattomia aineistoja, kuten aivan vasta verkkoon laitettuja aineistoja. (vauhti: 10 milj. sivua/vrk) fairUTU

15. 5 Opettajan työnäkymä Saapuneiden palautusten lokero-välilehdellä näet kurssilaistesi palauttamat aineistot. Klik!

16. Esimerkki 1 Lukema osoittaa, kuinka paljon arvioitavaan tekstiin sisältyysamankaltaisuutta Turnitin-tietokannan aineistoihin verrattuna. Click! • Videos: • About OriginalityCheck • Viewing Originality Reports Väritehosteella merkitty teksti on samasanaista toisenTurun yliopistossa tietokantaan tallennetun tekstin kanssa. Tulos osoittaa 100% samankaltaisuutta toisen opiskelija- Tekstin kanssa.

17. Esimerkki 1 Voimme nähdä, että: A: 68%(molemmissa UTU-teksteissä) vastaa nelsonmandela.orgin sisältöä, B: 27-28 % vastaa answers-sivuja (joiden välillä on riippuvuus?) C: 26 %vastavuus toisen yliopiston kahteen tekstipalautukseen (ovat duplikaatteja?) - Tässä tulosnäkymässä on kolme mahdollista kopiointitapausta. • Videos: • About OriginalityCheck • Viewing Originality Reports

18. Esimerkki 2 Plagiaatti? Click! ?

19. Tässäkirjoittaja on korvannutyksittäisiänumero/koodiarvojatoisiin, muttahyödyntänytmuuntekstirakenteensellaisenaan. Kyseessä on heikkotasoinenparafraasi. Esimerkki 2

20. Tiettylähde (48) esiintyyuseinkappaleidenjohtolauseissa. Viittaustalöydöksenopiskelijatyöhönei ole, jotenopettajahaluaavertailla opinnäytteitätarkemmin. Esimerkki 3 Avoimen internetin sivuilla olevat sisällöt sekä kustannettujen julkaisujen sisällöt pääsee näkemään suoraan kokoteksteinä. Yliopistoissa tallennettujakäsikirjoituksia ei näytetä ilman ohjaajan suostumusta.

21. Tiettylähde (48) esiintyyuseinkappaleidenjohtolauseissa. Viittaustalöydöksenopiskelijatyöhönei ole merkittynä, jotenopettajahaluaavertaillaopinnäytteitätarkemmin. Esimerkki 3 TurnitinPaperViewRequest DearTotti Tuhkanen, Turnitin is forwardingthisrequest on behalf of Nigel M(…), an instructor at Tampereen yliopisto. Thisinstructorrequestsyourpermission to view the paper, ”Draft_1", submitted to yourPlagiaatintunnistuskokeilu/GR(Moodle 6666666) class at Turun yliopisto on Aug 6, 2013. Thisinstructorhasfound a 90% match to thispaper in a papersubmitted to hisorherG-history/NM(Moodle 671&&&&) class. Ifyouchose to grantpermission to the instructor to view the paper, simplyreply to thisemail. Pleaseconfirm the text of the student'spaper is displayed in yourreplyemail. By replying to thisemail, youwillbesending an email (including the text of yourstudent'spaper) to the requestinginstructor, Nigel M(…). The text of the paperpreviouslysubmitted to yourclass is includedbelow. Pleaseremoveanyidentifyingstudentinformation in the textbelow to respect the privacy of yourstudentprior to sending. Thankyou for usingTurnitin, The TurnitinTeam

22. Katso löydöksen alkuperäistekstit Klikkaa! Kommenttifraaseja + omat kirjoitetut kommentit! Voit myös tulostaa arviointiraportin pdf-tiedostoksi. • Katso opetusvideot: • Using Marks and Comments • Using Rubrics for Grading and Evaluating Originality näyttää vastaavuudet Grademarkilla liität palautemerkintöjä suoraan tekstiin

23. ”PIKASILMÄILYOHJE” MONOGRAFIAN/ yhden artikkelin vastaavuusjakauma ARTIKKELIVÄIKKÄRIN eri artikkeleidenvastaavuusjakauma 40 % Sarjatiedoissa, formaaleissa tiedoissa Tittelisivut Julkaisematon OK ! Yleensävähänvastaavuuksia Johdantoluku 98 % 100% Paljon tai tosi paljonvastaavuuksia 40 % 20 % Metodiluku Vaihtelevastitai vähänvastaavuuksia Julkaistu Julkaisematon Julkaistu Julkaisematon Empiria Vähän vastaavuuksia Päätelmät OK ! Tosi paljonvastaavuuksia Lähteet

24. Kunarvioit Turnitin-raportin samankaltaisuuslöydöksiä: • Korkeat %-luvut eivät sellaisenaan kerro ongelmista testissä: ne voivat kuvata myös luvallisia samankaltaisuuksia (sitaateissa tai viitteissä; • Lyhyetkin samankaltaisuudet voivat olla signaali epäkypsästä lähteiden käytöstä. Katso myös >1 % -löydökset. • Joidenkin asioiden täsmällinen ilmaiseminen johtaa väistämättä yhteneviin ilmaisuihin – tässä on merkittävää vaihtelua eri tieteenalojen välillä, ja olet oman alasi käytäntöjen paras asiantuntija; • Alkuperäisyyden tarkastus on osa työnohjausta, joten kohdattavia ongelmia on hyvä tarkastella tekstin kypsyysasteen ilmeneminä – puutteista koituvat jälkityöt ovat tekstin edelleen kypsyttelyä. • Plagiointiepäilyn kohdatessasi pyydä ensin opiskelijalta selvitystä. Opiskelijalla on oikeus tulla kuulluksi, mutta ei velvollisuutta perustella ratkaisujaan.

25. YHTEENVETÄEN: • Opiskelu- ja tutkimusvilpin käsittelysäännöissä ei ole mitään ”uutta”; menettelyohjeet pohjautuvat voimassa oleviin säädöksiin. • PT-palaute on yksi tekstin kypsyysasteen indikaatio. Erityisesti opinnäytteissä tekstiä on voitava korjata ja kehittää; siksi opiskelijalle tulisi tarjota mahdollisuus itse testata tekstiään ennen suorituksen luovuttamista opettajan/työnohjan arvioitavaksi. • Muodollisesti korrekti lähdeviittaus voi olla myös ongelmallinen. “From Ferret we have chosen the base-line dataset (sentence segmentation, tokenisation and lowercase), baseline plus lemmatisation, baseline plus stop-word removal, punctuation removal and number replacement. From the LM models, we have chosen bigram per-plexity and trigram perplexity. From all features computed using LCS, we have chosen the sum of the longest common subsequence for all sentences normalised by total number of sentences in associated suspicious document. Table 2 provides the average similarity scores of the selected features grouped by document type. We observed that for some features the scores did not always decrease linearly from near copy to non-plagiarism as they should. “1 _________________________ Chong, Specia, Mitkov 2010, 2. From all features computed using LCS, we have chosen the sum of the longest common subsequence for all sentences normalised by total number of sentences in associated suspicious document. Table 2 provides the average similarity scores of the selected features grouped by document type. We observed that for some features the scores did not always decrease linearly from near copy to non-plagiarism as they should. Korrekti viittaus lähteeseen, mutta onko lähde OK? Mahdollinen tulos: Lähteen viittaukset eivät ole kunnossa!

26. Onnea ohjaustyöhön !