2018-12-13

Aika: to-ryhmän kokouksen yhteydessä to 13.12. klo 8.30–10 (etäkokous) 

Osallistujat: Hely Lahtinen, Kaapo Seppälä, Marjut Anderson, Karoliina Sipovaara, Lara Anastasiou

  1. Sopimusten tilanne
    1. Turussa sopimus allekirjoitettu 
    2. Jyväskylässä työn alla
    3. CSC:n palvelutilaus työn alla 
    4. Sopimukset
  2. Laskutus & raportointi 
    1. Kaksi kertaa vuodessa exam-johtoryhmän hyväksymisen jälkeen 
  3. Työpakettien kuulumiset
    1. projektisuunnitelmat tammikuun lähitapaamiseen 9. tai 10.1., yhteinen läpikäynti (esittely exam-johtoryhmälle 18.1.) 
    2. Älytentti: Projekti saatu nyt auki ja aletaan työstämään projektisuunnitelmaa
      1. Hankeaika 2020 loppuun, siihen mennessä proto pitää olla testattuna ja suunnitelma mahdollisesti tuotantoon ottamisesta examissa. Prototyyppiä voidaan kuitenkin testata ns. irrallisena examista. 
      2. Beta-versio aktiiviseen examiin jo ennen hankkeen päättymistä? 
      3. Tenttiaineiston kerääminen referenssimateriaaliksi myös muista exam-korkeakouluista kuin TY:stä mahdollista tutkimustarkoituksiin, korkeakoulut itse kuitenkin päättävät datan antamisesta. Asiaa voi viedä eteenpäin kehryn kautta 
    3. Työpakettien kuukausikatsausten kerääminen 
      1. Lara kalenteroi kuukausikatsausten keräämisen niin, että ajoittuvat ennen DC-hankkeen johtoryhmää
      2. Jokainen työpaketti toimittaa lyhyen katsauksen oman työpaketin asioihin omalle wiki-sivulle: Työpaketit tai Laralle
  4. Viestintä
    1. DC roadshown tuotosten läpikäynti (Karoliina) 
    2.  Esteettömyys ja saavutettavuus -osahankkeesta otettu yhteyttä ja kysytty arvioinnin osahankkeen tarpeita käydä läpi esteettömyysasioita. Marjut sopinut Merja Laamasen kanssa, että palataan asiaan ensi vuoden puolella kun examin korjaukset saatu tuotantoversioon. 
    3. Mietittiin voisiko myös arvioinnin osahankkeen osalta olla tarvetta tarkemmalle esitelylle joka suunnattu muille osahankkeille: "EXAMin mahdollisuudet muissa osahankkeissa". 
    4. Webinaari seuraavan kerran tammikuussa - yhteistentti / Titta, tenttivierailu / Liisa 
  5. Muuta
    1. To-ryhmän lähitapaaminen tammikuussa, ajoitetaan samaan tapaamiseen myös osahankkeen asioita
    2. Digioppimisen saavutettavuus -koulutus DigiCampus-hankkeen toimijoille 18.12.
      1. Webinaarissa käydään läpi mitä saavutettavuus tarkoittaa, ketkä siitä hyötyvät ja mitä verkkosisällön saavutettavuudelta edellytetään. Webinaarissa keskitytään oppimisympäristön saavutettavuuteen ja annetaan käytännön vinkkejä saavutettavaan sisällöntuotantoon. Osallistujat voivat esittää kysymyksiä sekä etukäteen (tässä Teamsin viestiketjussa) että webinaarissa.
      2. Webinaari on tiistaina 18.12. kello 9.00-10.00 Collaborate-verkkoympäristössä osoitteessa: http://bit.ly/esahanke 


2018-11-20

Aika: ti 20.11.2018 klo 12.30–13.30

Paikka: Aalto-yliopisto & Zoom: https://cscfi.zoom.us/j/246913246

Osallistujat: Marjut Anderson, Lara Anastasiou, Liisa Kallio, Titta Koski, Hely Lahtinen, Sanna Sintonen

Agenda 

  1. Sopimusten tilanne
    1. Sopimuksia työstetty siten, että Katja Puralta Oulusta eilen lähtenyt Turkuun ja Jyväskylään 
    2. Sopimusten jälkeen projektisuunnitelmat
  2. Projektikäytännöt 
    1. Kokoustaminen: Puhuttiin, että Titta tulisi säännöllisesti mukaan to-ryhmän kokouksiin
      1. Turun työpaketin osalta Hely voisi alussa edustaa to-ryhmän kokouksissa ja Kaapo mukaan 
  3. Työpaketit ja projektisuunnitelmien tilanne
    1. Projektisuunnitelmien tilanne: 
      1. Tämän vuoden puolella pitäisi olla kaikkien työpakettien osalta, esitetään exam-jorylle tammikuussa
      2. Salitentin osalta luonnos olemassa 
        1. Toiveikas aikataulu, että jonkinlainen vaatimuusmäärittely exam-kehitykselle keväällä, tämän perusteella työmääräarvio
    2. Yhteistentti: Ei vielä suunnitelmaa valmiina
      1. Mitä seuraavan kahden vuoden aikana tullaan tekemään? 
        1. Miten yhteistentti konseptoidaan kansalliseksi ratkaisuksi? Missä tilanteissa on järkevää käyttää tietyn korkeakoulun examia? → Kuvaustyö
        2. Erityislääkääritentti karvalakkiversio, vielä ei esim. rajapintoja mihinkään. 
        3. Suoritusten siirto - ristiinopiskelun palveluväylän hyödyntäminen? 
          1. kansallinen palveluväylä tällä hetkellä heikosti käytössä, hankkeissa odotetaan pääasiassa RiKen palveluväylän valmistumista
        4. Kysymyspankki: iso työ, mutta tarpeellinen, mietittävä mitä opittu nykyisestä kysymyspankista
        5. Skaalautuminen: pääsykokeet?
    3. Oppimisanalytiikkaa osana hanketta?
      1. Voiko olla osa 4. työpakettia? 
  4. Tapahtumat
    1. DC-roadshow: kommentteja? 
      1. Karoliina luvannut koostaa osahankkeen osalta roadshown antia yhteen
      2. Osahanke ei saanut kovinkaan paljon uutta materiaalia, kuitenkin hyvää keskustelua ja markkinointia
    2. DC Hackaton 29.11. 
      1. Ei vaadi toimenpiteitä osahankkeelta, korkeakouluissa voi mainostaa 
  5. Muuta
    1. AMK-valintakoehanke: Soteli-koe ja sen hyödyntäminen pääsykokeissa - hanke käynnissä, ei ole annettu paljon tietoa ulkopuolelle
    2. YleSHarviointi-hanke: myöskin jatkuvan arvioinnin teema, mutta varsinaisia teknisiä ratkaisuja ei, kaikissa hankekorkeakouluissa ei ole myöskään esim. examia
    3. MeDigi-hanke
    4. Oppimisanalytiikka: APOA, 
    5. Katsaus hankkeisiin, joissa arvointi / oppimisanalytiikka mukana - Karoliina? 
    6. "EXAM kansallinen ratkaisu sähköiseen arviointiin vrt. DigiCampus-oppimisympristö" 
  6. Viestintä
    1. Webinaarien mainostus: Lara postaa digicampus.fi, teamsiin ja kehrylle
      1. Henna vetämään? 
  7. Seuraavat tapaamiset
    1. To-ryhmän kokoukset torstaisin vuoden loppuun
    2. 9.1. to-ryhmän lähipäivä: Tähän mennessä työpakettien projektisuunnitelmat valmiina

2018-10-11

Aika: to 11.10. klo 8.30–10

Paikka: Zoom https://cscfi.zoom.us/j/246913246

Paikalla: Marjut Anderson, Lara Anastasiou, Liisa Kallio, Titta Koski, Hely Lahtinen, Kaapo Seppälä, Sanna Sintonen

Agenda 

  1. Hallinto
    1. Sopimusasiat kesken, Oululta odotetaan vielä sopimusluonnoksia. 
  2. Projektikäytännöt
    1. työpakettien projektisuunnitelmien tilanne
    2. Kokoukset
      1. 1.11. (muutetaan tarvittaessa) 
      2. 29.11.
      3. EXAM-lähipäivä 20.11. → tarve hankeasioille? 
    3. työkalut 
  3. Työpaketit - työpakettien kuulumiset 
    1. WP1: Salitentti-paketista ei tällä hetkellä mitään uutta. Alkusyksystä tehty testailua ja pientä suunnittelua. 
    2. WP2: Aurograding: rakennetaan tiimiä tällä hetkellä omista resursseista, mukaan tullut Kai Hakala, joka tulee myös roadshowhun mukaan. Projektia ei ole vielä avattu. 
      1. Totin kanssa TY:n sisällä kerätään tiimiä eri tiedekuntien/laitosten edustajia, joiden kautta kerätään suomenkielisiä tenttiaineistoja, joiden avulla opetetaan algoritmiä. Todennäiköisesti tehdään jonkilaista otantaa.
    3. WP3: Testauksessa ja tilanne tällä hetkellä hyvä. Pilotoidaan 4.12. neljässä eri yliopistossa (HY mukaan ensi vuonna). Pilotin perusteella tehdään jatkokehityssuunnitelma. 
      1. Pyritään siihen, että uusi versio olisi käytössä pilotoivissa korkeakouluissa 
  4. DC Roadshown suunnittelu osahankkeen osalta 
    1. Yleisesittely osahankkeesta ja työpaketeista (pari minuuttia), diaesitys työn alla 
      1. Lara varmistaa, miten esittely hoidetaan
      2. Yhteinen lyhyt ppt-esitys: Lara ja Karoliina työstävät pohjan ensi viikon alkuun mennessä
    2. Arvioinnin kehittäminen yhtenä työpaja-aiheena: osahankkeen edustaja toimii yhtenä fasilitaattorina tai sihteerinä työpajassa 
    3. Ilmoittatuminen auennut: Ilmoittautuminen viimeistään viisi päivää ennen tapahtumaa osoitteessa https://elomake.uef.fi/lomakkeet/21026/lomake.html
    4. Loppuviikon aikana päivitetään tieto roadshowsta myös EXAMin nettisivuille sekä välitetään sähköpostitse kehittäjäryhmälle tiedoksi
      1. DigiCampuksen lähettämä mainos: DigiCampus roadshow.docx
  5. Muuta tapahtumat
    1. DigiCampus hanketapaaminen it-päivien esipäivänä 5.11. klo 16-18 - paikalla ainakin Marjut 
      1. asialista ja ilmoittautuminen teamsissa
    2. IT-päivien työasemahallinnon työpaja 6.11. 
      1. Pyritään saamaan paikalle työasemahallinnon väkeä
      2. Marjut ja Liisa paikalla, Titta myös todennäköisesti paikalla
  6. TO-ryhmän asiat: testauksen tilanne
    1. Erikoislääkäritentti:
      1. keskimäärin ollu aika vähän tenttijöitä per paikkakunta 
      2. Ohjelman voi asentaa myös eri aikaan kuin uuden version
        1. Ohjelma pitää olla niillä koneilla, joiden välillä tenttikonearvonta suoritetaan
    2. Marjut: testauksen tilanne alkaa näyttää jo paremmalta
    3. Ensi viikon aika seuraava testaus ja sen jälkeen pitäisi päättää voidaanko versio ottaa tuotantokäyttöön. Keskustelua aiheesta jatketaan kehryn kokouksessa. 

2018-09-20 Projektiryhmän kokous

Aika: to 20.9. klo 9.30 - 10.30
Paikka: connect.funet.fi/xm
Paikalla: Marjut Anderson, Lara Anastasiou, Titta Koski, Kaapo Seppälä, Liisa Kallio, Hely Lahtinen, Sanna Sintonen

Sopimukset

  • sopimustilanne
    • Tilanne ei ole toistaiseksi edennyt 
  • raportointikäytännöt → ei käyty läpi tässä kokouksessa

Projektikäytännöt

  • Hankkeen asioita koottu wiki-sivuille, myös työpakettien kuulumiset pitäisi päivittää kuukausittain → Työpaketit
    • Lara raportoi kuukausittain dc-hankkeelle
  • EXAM-lähipäivien yhteyteen hankkeen asioita, käytäntöjen sopimista, suunnittelua?
  • Projektisuunnitelmat
    • Projektisuunnitelmien työstäminen yhdessä to-ryhmän kanssa
  • Kokoukset
  • muut työkalut?
  • EXAM-töiden tilaaminen (määrittely, toteutus)

Työpaketit - työpakettien kuulumiset

  • WP3 - yhteistentti
    • Pilottitentti 4.12.
    • 3 erikoisalaa, joista 2 pieniä eli pari tenttiä ja yksi vähän isompi (voi tulla useampi tentti per paikkakunta), maksimissaan 10 yhtäaikaa per korkeakoulu
    • Korkeakoulut pitäisi saada päivittämään sivujaan aikataulujen osalta → ei vielä hyvää paikkaa, mihin kerätä kaikki aikataulu- ja tilatiedot sekä ohjeet → mikä olisi hyvä paikka, koska näitä ei kannata päivittää moneen paikkaan. Linkit EXAMin wiki-sivuille? 
    • Tenttitilojen tilanne, pilotissa mukana
      • Oulu
      • mahdollisesti UEF (UEF:lla haasteita Oodin kanssa, eivätkä ole vielä voineet ottaa 4-versioita käyttöön)
      • mahdollisesti Turku, jos saadaan 4.1. versio käyttöön ja toimimaan 
      • Tampere niin, että TTY järjestää tenttitilan
      • Helsinki siirtyy yhteistenttiversioon vasta joulukuun alussa, joten ei mukana tässä 
    • Aikataulu on haastava, mutta versio saadaan kyllä tehtyä aikataulussa ja toimivuutta voidaan testata. 
      • Liitteiden hallinta aiheuttaa vielä haasteita, isojen/raskaiden liitteiden tuki vielä epävarmaa ja vaatii enemmän testausta
    • Mahdollisesti kaksikielisiä tenttiöitä, voidaan tarvittaessa ratkaista niin, että kaikki kysymykset esitetään kahdella kielellä
    • Mietitään vielä pilotoidaanko joulukuussa erikoislääkäritentin osalta yhteistenttiä vai korkeakoulukohtaisia tenttejä, pilotti kuitenkin tarvitaan 
      • päätös tentin toteuttamistavasta pitää olla viimeistään 8.11. 
      • Tähän mennessä osataan jo arvioida version toimintaa 
    • Titta informoi yliopistoja siitä, mitä pitää olla, että tentin voi tehdä - katsotaan yhdessä RiKen/Liisan kanssa
      • Palvelun liittäminen Hakaan vie aikansa, joten se on hyvä aloittaa mahd. pian. 
      • EXAMin asetukset, tenttien kestot, aukioloajat ym. 
      • Versioiden yli voi hyvitä (Huom. kypsäri, Oodi-taloilla Oodi-version huomioiminen)

Viestintä ja tapahtumat → ei käyty läpi tässä kokouksessa

  • DC brändityö ja pohjat
  • DC uutiskirje ja EXAM uutiskirje
  • Blogitekstit
  • Yhteiset tapahtumat


2018-08-14 Arvioinnin kehittäminen -osahankkeen projektiryhmän kokous

Paikka: Turun yliopisto, Publicum SH 209
Aika: 14.8.2018, klo 9.15–11.00
Paikalla: Totti Tuhkanen (Turun yliopisto), Titta Koski (Oulun yliopisto), Kaapo Seppälä (Turun yliopisto, tulevaisuuden tutkimuskeskus), Liisa Kallio (Jyväskylän yliopisto), Marjut Anderson (CSC), Lara Anastasiou (CSC) 

Asialista

  1. Kokouksen avaus klo 9.15
  2. Esittäytymiset
    1. Projektiryhmä esittäytyi
  3. Arvioinnin kehittämishanke osana Digicampus-hanketta
    1. Hankkeen suuntaviivat
      1.  Kesto 15.6.2018–31.12.2020
      2. Osahankkeen kokonaisbudjetti 608 846€
        1. Omarahoitusosuudet
        2. Henkilötyön hinnan määrittely mietittävä
        3. Budjetoinnin kokonaisuunnitelma (Marjut), tätä varten työpakettien budjettisuunnitelmat
      3. Osanhankkeen työpaketit: WP1: Salitetti (JY), WP2: Autograding (OY), WP3: Yhteistentti ja hankehallinto (OY), WP4: koordinaatio, viestintä, työpakettien tuki, kehitystyö (CSC)
    2. Sopimukset
      1.  Sopimuksia laaditaan OY:n ja CSC:n, OY:n ja TY:n sekä OY:n ja JY:n välillä
      2. Marjut kokoaa vaihtoehdot vaihtoehtoisista toteutuksista sopimusten suhteen
      3. Titta selvittää mahdollisia toimintamalleja OY:n suunnalta.
  4. Työpakettien suunnitelmat
    1. WP1: Alkuvaiheessa, suunnittelu aloitettu. Teknistä puolta aloitettu katsomaan, muutostarpeita suhteessa EXAMiin ei vielä tarkemmin määritelty. Ei vielä varmaa hoidetaanko tekninen toteutus JY:llä vai CSC:n teknisten kehittäjien kautta, mietittävä allokoidaanko tekniset resurssit JY:lle vai mikä olisi paras ratkaisu. Odotetaan myös HY:n ja Aallon salitenttikokeiluiden raportteja.
    2. WP2: Kustannuksia kohdistetaan vasta vähän myöhemmin (ei lähiviikkoina), ensimmäisenä pitäisi perustaa projekti. Rakennetaan tiimiä, vielä ei ole tarkkaan määritelty kuka tekee ja kuinka paljon.
    3. WP3: Yhteistentin ensimmäisen version pilotointi syksyllä 2018, jatkokehitys (versio 2) 2019–2020.
      1.  1. Version rahoitus erikoislääkäritentin ja konsortion kautta
      2.  2. Version rahoitus mahdollisesti dc-hankkeen ja konsortion kautta
      3.  2. Version tavoitetila ja tarpeet määriteltävä vielä tarkemmin
      4. Ensi vuonna tarkoituksena siirtyä kokonaan EXAMilla tehdyillä tenteillä erikoislääkäreiden osalta
    4. WP4: CSC:n omarahoitusosuuden selvittäminen vielä epäselvää, Marjut selvittää OKM:n kanssa.
      1. Tehdään projektinhallinnan ja viestinnän osalta projektisuunnitelmat.
      2. Selvitetään myös muiden hankkeiden suhdetta osaamisen osoittamiseen/arviointiin/EXAMiin ja suunnitellaan viestintää kärkihankkeiden suuntaan. Myös työpajat/tapahtumat mahdollisia.
    5. Työpakettien aikatauluttaminen: ovatko kaikki 2020 asti vai voisiko olla niin, että osa työpaketeista aikataulutettu eri tahtiin (EXAMin kehitykseen suhteutettuna, jatkuvaa kehitystä). Liittyy myös raportointiin. Myös rahoituslähteitä on muita kuin DC-hanke.
    6. Raportointi: hankkeen rahoitus tulee 2 kertaa vuodessa (kaksi raportointikautta), aiheuttaako jotakin erityisiä tarpeita?
  5. Projektikäytännöt
    1. Työskentely-ympäristö
      1. Sovittiin, että työskentely tapahtuu pääsääntöisesti EXAMin wiki-sivulla, mutta päivitetään Teams-alustalle yleisiä asioita tarvittaessa hankkeen suuntaan ja linkitetään wiki-sivu.
    2. Tapaamiset/kokoukset
      1. Sovittiin, että osahankkeeseen liittyvät projektikokoukset voidaan pitää säännöllisesti tuoteomistajaryhmän yhteydessä ja kerran kuussa osahankkeen projektiryhmän tapaamisia pääsääntöisesti etänä (ehdotuksena kuukauden ensimmäinen torstai to-ryhmän yhteydessä/perään)
      2. Totti Tuhkanen ehdotti, että Hely Lahtinen ottaisi Turun yliopiston paikan kokouksissa hänen sijastaan
    3. Viestintä
      1.  Kuukausikatsaukset hankkeen suuntaan ja nettisivuille, voisi lähettää myös esim. kehittämishankkeiden listalle. Työpakettien kuulumiset kerätään kerran kuussa, CSC koostaa
      2. Idea: lyhyet videot kuulumisista
      3. Webinaarit
      4. Blogiin silloin tällöin hiukan tarkempi teksti työpakettien kuulumisista
    4. Kehitystyön tilaaminen
      1. Paketteihin varattu tiettymäärä palkkarahoitusta ja ostotyön osalta alun perin ajateltu, että tulee CSC:lle korvamerkittynä hankkeen käyttöön, kehittäjien ostoon (Arcusys). Ostotyö voitaisiin myös allokoida korkeakoulujen ja OY:n sopimuksiin?
      2. Marjut selvittää tilannetta tarkemmin ministeriön puolesta
    5. Hankehallinto:
      1.  Suunnitelmien ja raporttien kerääminen sekä seuranta
      2. Työpaketeilta tarvitaan projektisuunnitelmat, jossa määritelty budjetin tarpeita ja teknisen toteutuksen tarpeita/aikataulutusta
      3. Titta tarkistaa hankkeen ohjeet raportoinnista/raportointisyklistä ja tarkennetaan toimintapoja.
    6. Arvioinnin kehittäsen laajempi kattaminen: mitä ollaan luvattu hankehakemuksessa, viestintä ja yhteistyö muiden hankkeiden suuntaan ym.
  6. Muut asiat
    1. Konsortion linkittäminen hankkeeseen
    2. EXAM ohjausryhmän kokouksessa keskusteltava hankkeen taloushallinnosta
  7. Kokouksen päättäminen klo 11.15.

 

  • No labels