Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

Table of Contents

IDAn käyttötarkoitus ja käyttöönotto

...


Suomalaisilla korkeakouluilla ja valtion tutkimuslaitoksilla on maksuton käyttöoikeus Fairdata-palveluihin kuuluvaan IDA – Tutkimusdatan säilytyspalveluun-palveluun, jossa kullakin organisaatiolla on tietty määrä organisaatiokohtaista IDA-käyttöoikeutta. IDA on opetus- ja kulttuuriministeriön järjestämä palvelu suomalaisen tutkimusjärjestelmän toimijoille. Palvelun tuottaa CSC – Tieteen tietotekniikan keskus Oy..

IDAa käytetään sellaisen tutkimusdatan säilytykseen, joka liitetään julkaistaviin tutkimusaineistokuvailuihin Qvaimella tai Metax-rajapinnan kautta. Julkaistut aineistot ovat selailtavissa Etsin-palvelussa ja Tiedejatukimus.fi-portaalissa. IDAssa säilytettävästä datasta tulee julkaista vähintään kuvailutiedot. Käyttäjät päättävät itse palveluun tuomiensa sisältöjen avoimuudesta, jakamisesta ja käyttöpolitiikasta. Aineiston omistajalla ja rekisterinpitäjällä on vastuu aineiston käsittelystä voimassaolevan lainsäädännön ja muiden velvoitteiden mukaisesti. 

Palvelun Fairdata-IDA palvelun käyttöönottamiseksi organisaation tulee ottaa yhteyttä fairdata@csc.fi ja nimetä organisaatiolle yksi tai useampi IDA-yhteyshenkilö, jotka myöntävät oman organisaationsa käyttäjien CSC-projekteille IDA-käyttöoikeuden ja projektinkohtaista IDA-säilytystilaa.

...

Näet kunkin organisaation käyttöoikeuden

...

koon täältä.

...

Organisaatiokohtaista käyttöoikeutta voi tarvittaessa

...

kasvattaa. Lisätietoa IDAn käyttöpolitiikassa.

IDA-

...

yhteyshenkilöllä on oikeudet hallinnoida organisaation käyttäjien IDA-käyttöoikeuksia ja säilytystilojen kokoa my.csc.fi-

...

  1. Tutustu myös PowerPoint-esittelyyn IDA-hakemusten käsittely MyCSCssa.pptx (pptx).

portaalissa, mutta ei automaattisia "pääkäyttäjäoikeuksia" itse IDA-palvelussa. Jos organisaation IDA-yhteyshenkilö haluaa oikeuden hallinnoida kaikkea organisaation IDA-palvelussa säilytettävää dataa, voi hän luoda tutkijoiden puolesta palvelun käyttöön tarvittavat CSC-projektit ja hakea niille IDA-säilytystilaa.

Vaikka IDA-säilytystilan myöntää hakijan kotiorganisaatio, tulee datan omistajuudesta sopia erikseen. On suositeltavaa sopia hyvissä ajoin aineistoon kohdistuvista oikeuksista tutkimukseen liittyvien eri toimijoiden kesken.

IDA on opetus- ja kulttuuriministeriön järjestämä palvelu suomalaisen tutkimusjärjestelmän toimijoille. Palvelun tuottaa CSC – Tieteen tietotekniikan keskus Oy.

IDAn etuja datan avaamisessa:

  • Data jäädytetään IDAssa ennen sen avaamista sen eheyden varmistamiseksi ja käyttäjävirheiden minimoimiseksi. Jokaisesta jäädytetystä tiedostosta tehdään datan eheyden varmistamiseksi kopio toiselle tallennusmedialle ja tiedostoille lasketaan tarkistussumma.
  • IDA ei ole rajoitettu tietylle tieteenalalle tai tietyille dataformaateille.
  • Palvelua voidaan käyttää organisaatioiden välisissä tai kansainvälisissä tutkimushankkeissa.
  • Data voidaan avata alkuperäisessä kansiorakenteessaan sen sijaan, että aineistoon liitetyt tiedostot on paketoitu yhdeksi zip-paketiksi. Julkaistun datan hyödyntäjä voi ladata aineistoon kuuluvia tiedostoja joustavasti tarpeidensa mukaan Etsimestä.
  • Myös huomattavan suuria, yhteensä satojen gigatavujen tai joidenkin teratavujen kokoisia aineistoja voidaan avata yhtenä kuvailtuna tutkimusaineistoina, jolla on yksi pysyvä tunniste. Yksittäinen aineisto voi olla myös kasvava, niin että siihen lisätään julkaisemisen jälkeen uutta dataa.
  • IDAssa säilytettävälle Qvaimella kuvaillulle ja julkaistulle aineistolle annetaan DOI-tunniste viittauksia varten. 
  • IDAssa säilytettävän ja Qvaimella kuvaillun datan kuvailutiedot ovat löydettävissä Etsimestä ja Tiedejatutkimus.fi-portaalista
  • Palvelua käyttämällä voi vastata julkaisijan, rahoittajan ja kotiorganisaation vaatimuksiin FAIR-periaatteiden ja avoimen tieteen vaatimusten osalta ("niin avointa kuin mahdollista, niin suljettua kuin välttämätöntä")
  • IDAssa säilytettävä ja Qvaimella kuvaultu data on mahdollista siirtää rajapinnan yli pitkäaikaisssäilytykseen Fairdata PAS-palveluun (Fairdata PAS-palvelun käyttö vaatii sopimuksen).

Organisaation IDA-yhteyshenkilön tehtävät

  1. IDA-säilytystilahakemusten arviointi ja IDA-säilytystilan jakaminen oman organisaation käyttäjille 
  2. Organisaation IDA-käyttöoikeuden hyödyntämisen seuraaminen 

Tietoa IDA-yhteyshenkilöille

Organisaation IDA-yhteyshenkilön tehtävät

Käyttöoikeuden ja -säilytystilan jakaminen oman organisaation käyttäjille. IDA-yhteyshenkilön päätehtävänä on jakaa IDA-käyttöoikeutta ja IDA-säilytystilaa organisaationsa käyttäjille. Organisaatio voi halutessaan nimetä useamman kuin yhden IDA-yhteyshenkilön, joilla on yhtäläiset oikeudet käsitellä IDA-hakemuksia organisaationsa osalta.

. Organisaatio voi halutessaan nimetä useamman kuin yhden IDA-yhteyshenkilön, joilla on yhtäläiset oikeudet käsitellä IDA-hakemuksia organisaationsa osalta.

...

  1. Käyttäjien ja projektien tietojen ajantasaisuuden varmistaminen yhteistyössä CSC:n kanssa

...

  1. Palveluyhteyshenkilönä toimiminen omassa organisaatiossa

IDA-yhteyshenkilön nimeäminen ja ohjeita IDA-yhteyshenkilölle

Children Display

Tietoa IDA-yhteyshenkilöille

Mikä on CSC-projekti ja sen vastuuhenkilö

IDAn käyttöön liiittyy termi "CSC-projekti". CSC-projekti on ryhmä CSC-tunnuksen omaavia käyttäjiä, joilla on oikeus käyttää IDA-palvelua ja projektin yhteistä jaettua säilytystilaa IDA-palvelussa, ja jotka voivat yhdessä muokata ja julkaista tutkimsaineistoja Qvain-työkalulla. Kussakin CSC-projektissa tulee olla yksi nimetty käyttäjä – CSC-projektin vastuuhenkilö – joka vastaa CSC-projektin jäsenten pääsystä IDA-palveluun, palveluun tallennetusta datasta ja palvelun käytöstä (lue lisää edellytyksistä ja velvollisuuksista). 

Ajantasainen tieto palvelusta. CSC tarjoaa IDA-yhteyshenkilöille koulutuksia ja tietoa ajankohtaisista muutoksista IDAssa ja muissa Fairdata-palveluissa.

IDAn käytöstä ja IDA-tilan hakemisesta

Säilytystila IDAssa myönnetään CSC-projektille ja jokaisella IDAa käyttävällä CSC-projektilla on oltava yksi projektikohtainen vastuuhenkilö. Tämä vastuuhenkilö on se projektin jäsen, joka luo CSC-projektin ja anoo tilaa organisaationsa IDA-yhteyshenkilöltä MyCSC:ssä. Projektin vastuuhenkilö myös hallinnoi projektin muita jäseniä (liittää ja poistaa heitä) MyCSC:ssä. Myös organisaation IDA-yhteyshenkilö voi toimia projektien vastuuhenkilönä. Tarkempaa tietoa löytyy IDAn käyttöehtoja käsittelevältä sivulta, kohdasta "Projektin vastuuhenkilön käyttöehdot".

Kun projektin vastuuhenkilö on lähettänyt my.csc.fi-asiakasportaalissa IDA-tilahakemuksen, siitä tulee (kullekin) IDA-yhteyshenkilölle sähköposti-ilmoitus. Ilmoituksessa kerrotaan, että yhteyshenkilöllä on uusi IDA-säilytyspalvelun käyttölupahakemus hyväksyttävänä CSC:n asiakasportaalissa. IDA-yhteyshenkilöä pyydetään käymään tarkastamassa hakemus ja valitsemaan hyväksyykö vai hylkääkö hän hakemuksen organisaationsa IDA-oikeuden osalta. Yhteyshenkilö voi myös myöntää eri määrän säilytystilaa kuin hakemuksessa on alun perin haettu.

Projektin vastuuhenkilö voi pienentää tai kasvattaa olemassa olevan IDA-projektin säilytystilan kokoa my.csc.fi-asiakasportaalissa. Jos projektin vastuuhenkilö pienentää projektinsa säilytystilaa, muutos hyväksytään automaattisesti. Jos projektin vastuuhenkilö kasvattaa projektinsa säilytystilaa, pyyntö lähtee IDA-yhteyshenkilön hyväksyttäväksi.

CSC voi IDA-yhteyshenkilön pyynnöstä poistaa projektin ja sen datat IDAsta. Sovi tästä ensin kyseisen IDA-projektin vastuuhenkilön kanssa, ja ota tämän jälkeen yhteyttä yhteyttä fairdata@csc.fi.

Kun data on julkaistu ja IDAan ei ole enää tarvetta tallentaa uutta dataa

IDAn käyttö ei ole rajattu yhteen oikean elämän tutkimusprojektiin tai tiettyyn rahoituspäätökseen. Yksi IDAa käyttävä CSC-projekti voi tuottaa tai julkaista useita tutkimusaineistoja Etsimeen. 

  • CSC-projektin vastuuhenkilön rooli on hallinnollinen. CSC-projektin tai sen vastuuhenkilöt tiedot eivät esimerkiksi näy julkaistussa tutkimusaineistossa automaattisesti.
  • Myös organisaation IDA-yhteyshenkilö voi toimia IDAa käyttävien CSC-projektien vastuuhenkilönä. Tällöin IDA-yhteyshenkilö voi itse hakea IDA-säilytystilaa itseltään. Datan palveluun tuomisen ajaksi tutkijan tai TKI-toimijan voi lisätä CSC-projektiin jäseneksi. 
  • Lisätietoa CSC-tunnuksista ja CSC-projekteista (englanniksi).

Vastuuhenkilön vaihtuessa

CSC-projektin vastuuhenkilö voi nimetä tilalleen uuden vastuuhenkilön ottamalla yhteyttä CSC:n asiakaspalveluun (servicedesk (a) csc.fi)

Huom: Jos CSC-projektin vastuuhenkilö on tutkija tai TKI-toimija, joka Jos tutkija haluaa yhä jatkaa IDAssa olevan datan jakamista Etsimessä julkaistuna tutkimusaineistona, mutta ei enää tallettaa ja julkaista uutta dataahän tai hänen kollegansa eivät voi enää toimia vastuuhenkilönä, suosittelemme että hän ottaa yhteyttä kotiorganisaation IDA-yhteyshenkilöön sopivan vastuuhenkilön löytämiseksi. Dataan liittyvä CSC-projekti tulee pitää aktiivisena myös datan julkaisun jälkeen, mikäli dataa halutaan yhä säilyttää IDAssa. Projektin vastuuhenkilöä voi kuitenkin vaihtaa. Jotta dataa voidaan säilyttää ja hyödyntää alkuperäisistä tekijöistä riippumatta, on tärkeää, että IDAssa säilytettävän datan tuntevat henkilöt ovat dokumentoineet datan, kuvailleet sen Etsimeen, dataan liittyvistä oikeuksista on sovittu ja datalle on asetettu jatkokäytön mahdollistava lisenssi. Huomaa, että IDAn käyttöehdot edellyttävät käyttäjiä julkaisemaan IDAan tallentamansa datan kuvailutiedot yhtenä tai useampana aineistona, niin että ne ovat löydettävissä Fairdata Etsin -palvelusta. 

Jos taas IDA-säilytystilalle ei ole enää tarvetta, säilytystilan vastuuhenkilön tai IDA-yhteyshenkilön tulee ilmoittaa siitä CSC:lle ottamalla yhteyttä asiakaspalveluun (asiakaspalvelu fairdata (a) csc.fi). Säilytystilassa olevan datan poistosta tulee sopia CSC:n kanssa. Datan siirto omaan käyttöön ja muuhun tallennuspaikkaan on hoidettava itse.

CSC ei poista käyttäjien palveluun käyttöehtojen mukaisesti lisäämää julkaisemaa dataa palvelusta neuvottelematta asiasta CSC-projektin vastuuhenkilön tai IDA-tilan myöntäneen organisaation kanssa.

...

IDA

...

Säilytystilaa hakiessa hakemuksen tekijän tulee arvioida haettavan säilytystilan koko gibitavuissa (GiB). Gibitavu (GiB) = 1 073 741 824 tavua eli noin 1073 gigatavua (GB). Hakijan kannattaa tarkistaa jo olemassa olevien IDAan mahdollisesti tallennettavien tiedostojen koko, ja arvioida näiden perusteella lopullinen tilatarve. Huom: Olemassa olevan IDA-säilytystilan kokoa voi helposti kasvattaa (tai pienentää) my.csc.fi-asiakasportaalissa.

Kannattaa huomata, että isojen datamäärien siirrossa IDAan kestää aikaa. Esimerkiksi 1 GiB kokoisen tiedoston siirto 10 Mb/s yhteyden yli tyypillisesti kestää noin 10 minuuttia ja nopean 100 Mb kiinteän yhteyden yli pari minuuttia. Suosittelemme käyttämään isojen tiedostojen/datamäärien siirtämiseen esim. kotiorganisaation tarjoamaa nopeaa kiinteää yhteyttä sekä IDAn komentorivityökaluja, jotka kertovat selkeästi siirtojen onnistumisesta.

Alla muistin virkistykseksi tietoa tallennustilojen kokoihin liittyen.

Tiedostokokojen yksiköt pienimmästä suurimpaan

1 tavu (B) = perusyksikkö datan koolle
1 kibitavu (KiB) = 1024 tavua
1 mebitavu (MiB) = 1024 kibitavua
1 gibitavu (GiB) = 1024 mebitavua
1 tebitavu (TiB) = 1024 gibitavua
1 pebitavu (PiB) = 1024 tebitavua 

Esimerkkejä tiedostoista ja säilytystiloista

Huomaa, että tiedostojen voivat vaihdella paljonkin, esimerkiksi kuvan tai videon laadusta riippuen.

...

ja henkilötietoja sisältävä data

IDAn

*) perustuu tutkimukseen liittyvien 14000 tekstinkäsittelytiedoston, 1000 esitysgrafiikkatiedoston, 4 miljoonan JPEG-kuvan, 27000 PDF-tiedoston ja 7000 MPEG-tiedoston tietoihin, sekä 5 ei-tutkimukseen liittyvän 30 minuutin HD h264 -videon tietoihin.

** esimerkinomainen koko, joka ei perustu tutkimukseen liittyvistä tiedostoista laskettuun tiedoston keskimääräiseen kokoon.

IDA-käyttötilastojen katselu

IDA-yhteyshenkilöt voivat katsella organisaationsa IDA-käyttötilastoja MyCSC-portaalissa (my.csc.fi). Kirjaudu sisään Hakalla kohdasta 'Login/Register' -> valitse vasemmasta reunasta "IDA Application Management".

Näkymä näyttää ensin paljonko organisaatiosi IDA-käyttöoikeudesta on myönnetty IDAa hyödyntävien CSC-projektien käyttöön ja paljonko käytetystä tilasta on kokonaisuudessaan projektien valmistelualueilla (staging) ja jäädytetyillä alueilla (frozen). 

Näkymä summaa myös montako projektia, käyttäjää ja tiedostoa organisaatiollasi on yhteensä IDA-palvelussa ja montako julkaistua tutkimusaineistoa IDAssa säilytettävään dataan liittyy Fairdata Etsin-palvelussa.

Alempana näkymässä voit tarkastella odottavia ja jo hyväksyttyjä IDA-tilahakemuksia (Applications) ja IDAa käyttäviä CSC-projekteja (Projects). Projektilistauksessa saat riviä klikkaamalla lisätietoa kyseisestä IDAa käyttävästä projektista (esim. projektin nimi, sen julkaisemien aineistojen pysyvät tunnisteet, alkamis- ja päättymispäivä). Listaa voi järjestää eri tavoin otsikkoja klikkaamalla.

Sulkeutuvat projektit ja datan poisto

Näet varoitusmerkin niiden projektien kohdalla, joiden vastuuhenkilön tunnus on lukossa / puuttuu tai projektissa ei ole yhtään käyttäjää. Jos näin on, projekti tulee sulkeutumaan sen päättymispäivänä (End date) ja projektin data, myös julkaistu, poistetaan 90 päivän kuluttua projektin sulkeutumisesta. Projektin jäsenien CSC:lle ilmoittamiin sähköpostiosoitteisiin lähetään CSC:ltä 3 automaattista varoitusviestiä ennen projektin sulkeutumista.

CSC tiedottaa IDA-yhteyshenkilöille, kun organisaation IDAa käyttävä projekti sulkeutuu, esim. puuttuvan vastuuhenkilön vuoksi, ja sen data on menossa poistoon 90 pv kuluttua CSC-projektin sulkeutumisesta. Organisaatio voi halutessaan pyrkiä löytämään CSC-projektille uuden vastuuhenkilön (jolloin IDA-palvelun käyttöä voidaan jatkaa) tai datalle uuden säilytyspaikan.

IDA-käyttötilastojen jatkokehitys

Olethan yhteydessä, jos IDA-käyttötilastojen esitystavassa MyCSC:ssä parannettavaa tai jos organisaatiosi IDA-käyttötilastoissa on mahdollisia virheitä: fairdata@servicedesk.fi

Image Removed

Yllä kuva organisaation IDA-yhteyshenkilön näkymästä MyCSC-portaalissa.

IDAn etuja datan avaamisessa

  • Data jäädytetään IDAssa ennen sen avaamista sen eheyden varmistamiseksi. Tämä tarkoittaa, että dataa säilytetään IDAssa read only-tilassa käyttäjävirheiden minimoimiseksi. Lisäksi jäädytetyn datan säilytyksestä ja eheydestä huolehditaan replikoimalla jokainen jäädytetty tiedosto toiselle tallennusmedialle ja laskemalla jokaiselle jäädytetylle tiedostolle SHA256-tarkistussumma (checksum).
  • Datan säilyttäminen IDAssa mahdollistaa useita tiedostoja ja erilaisia kansiorakenteita sisältävän datan avaamisen alkuperäisessä kansiorakenteessaan sen sijaan, että aineistoon liitetyt tiedostot on paketoitu yhdeksi zip-paketiksi. Tällöin datan hyödyntäjä voi myös ladata aineistoon kuuluvia tiedostoja joustavasti tiedosto/kansio kerrallaan, tarpeidensa mukaan.
  • IDAsta voi avata tarvittaessa huomattavan suuria, yhteensä satojen gigatavujen tai joidenkin teratavujen kokoisia aineistoja yhtenä kuvailtuna tutkimusaineistoina, jolla on yksi pysyvä tunniste.
  • Datan voi myös avata kumulatiivisena eli kasvavana aineistona, lisätietoa ominaisuudesta uutisessa Fairdata.fi-verkkosivustolla
  • IDAssa säilytettävälle Qvaimella kuvaillulle aineistolle saa DOI-tunnisteen viittauksia varten.
  • IDAssa säilytettävä data on mahdollista kuvailla Qvaimella ja siirtää pitkäaikaisssäilytykseen Fairdata PAS-palveluun. PAS-palvelun käyttö vaatii sopimuksen.
  • IDAssa säilytettävän ja Qvaimella kuvaillun datan kuvailutiedot ovat löydettävissä Etsimestä ja tiedejatutkimus.fi-portaalista

IDA-ohjeistus verkkosivuilla

IDAn käyttöehdot ja henkilötiedot

IDAn käyttöehtojen mukaisesti käyttäjä sitoutuu olemaan tallentamatta palveluun tietoja, jotka koskevat EU:n yleisen tietosuoja-asetuksen 9 artiklassa lueteltuja ”erityisiä henkilötietoryhmiä” (https://www.privacy-regulation.eu/en/9.htm). IDA-käyttöehtojen osana tulee huomioida CSC:n tieteen tutkimuksen ja opetuksen palvelujen yleiset käyttöehdot. Jokainen IDA-käyttäjä rekisteröi itselleen CSC-tunnuksen ja hyväksyy käyttöehdot

Käsittelijä (CSC) vastaa järjestelmiensä ja palveluidensa tietoturvallisuudesta. IDAn tapauksessa tietoturvallisuuden hallinta on toteutettu valtionhallinnon perustason mukaisesti. CSC:n palvelut kattava yleinen tietoturvallisuuden hallinnan kuvaus on tarvittaessa nähtävissä CSC:n tietoturva-sivulla.
Aineiston omistajalla ja rekisterinpitäjällä on viime kädessä vastuu aineiston käsittelystä lakien ja muiden velvoitteiden mukaisesti.
Projektiryhmän kesken tulee noudattaa yhteisiä turvallisuuskäytäntöjä sekä aineistoa tallennettaessa että uudelleen haettaessa. Pääsyoikeudet henkilötietoja sisältävään tietoon tulee olla rajattu asiakkaan toimesta ja asiakas vastaa omien käyttäjiensä ohjeistuksesta sekä ohjeistuksen valvonnasta.
Lisäsuojauksen  Lisäsuojauksen voi toteuttaa tallentamalla henkilötiedot asiakkaan toimesta pseudonymisoidussa muodossa.

Lisätietoa: Henkilötietojen suojatoimet Fairdata-palveluissa (technical and organisational security measures, TOMs)

Lisätietoa

Lisää ohjeita IDA-palveluun liittyen löydät tämän wikisivun alisivuilta sekä Fairdata.fi-sivustolta:

Yhteydenotot

Voit olla yhteydessä CSC:hen osoitteessa fairdata@csc.fi