{"id":1314,"date":"2020-01-14T11:23:53","date_gmt":"2020-01-14T11:23:53","guid":{"rendered":"https:\/\/blogit.utu.fi\/researchfundingnow\/?p=1314"},"modified":"2020-01-14T11:23:55","modified_gmt":"2020-01-14T11:23:55","slug":"marie-sklodowska-curie-hakemusten-arvioinnista-opittua","status":"publish","type":"post","link":"https:\/\/blogit.utu.fi\/researchfundingnow\/2020\/01\/14\/marie-sklodowska-curie-hakemusten-arvioinnista-opittua\/","title":{"rendered":"Marie Sk\u0142odowska-Curie -hakemusten arvioinnista opittua"},"content":{"rendered":"\n<p>Olin roikkunut\nResearch Executive Agency:n (REA) eli k\u00e4yt\u00e4nn\u00f6ss\u00e4 <a href=\"https:\/\/ec.europa.eu\/info\/funding-tenders\/opportunities\/portal\/screen\/work-as-an-expert\">Euroopan Komission hakemusarvioijatietokannassa<\/a> vuodesta 2015 l\u00e4htien, p\u00e4ivitt\u00e4nyt\nkuuliaisesti profiiliani julkaisujen ja tieteellist\u00e4 asiantuntijuuttani\nkuvaavien asiasanojen osalta, mutta toimeksiantoja ei tippunut. Olisin halunnut\narvioida <a href=\"https:\/\/ec.europa.eu\/programmes\/horizon2020\/en\/h2020-section\/marie-sklodowska-curie-actions\">Marie Sk\u0142odowska-Curie&nbsp;Individual\nFellowship<\/a> -hakemuksia,\nkoska tunsin rahoitusinstrumentin hyvin ja olin sit\u00e4 itsekin kahteen kertaan\nhakenut \u2013 siin\u00e4 kuitenkaan onnistumatta. Lis\u00e4ksi halusin ensik\u00e4den kokemuksen\nsiit\u00e4, mit\u00e4 arvioinnissa vaihe vaiheelta tapahtuu. Lopulta kev\u00e4\u00e4ll\u00e4 2019\nminulta tiedusteltiin, olisinko k\u00e4ytett\u00e4viss\u00e4 syyskuussa p\u00e4\u00e4ttyv\u00e4ss\u00e4\nIF-arvioinnissa. Oletan t\u00e4m\u00e4n johtuneen kahdesta seikasta: ensinn\u00e4kin\nm\u00e4\u00e4rittelin tieteellisen asiantuntijuuteni aiempaa laajemmin, ja toiseksi\nIF-hakemusten m\u00e4\u00e4r\u00e4 on jatkuvasti kasvanut. Kyseiseen hakuun tulikin lopulta\nenn\u00e4tysm\u00e4\u00e4r\u00e4 eli miltei 10&nbsp;000 hakemusta, ja koska kullekin hakemukselle tarvitaan\nkolme arvioijaa, oli arvioijille ilmeisen kova kysynt\u00e4. <\/p>\n\n\n\n<!--more-->\n\n\n\n<p>Ty\u00f6ni arvioijana\nsijoittui p\u00e4\u00e4asiassa lokakuuhun ja marraskuun alkuun, ja se alkoi perehdytysmateriaaleihin\ntutustumisella ja lyhyen, IF-arviointia k\u00e4sittelev\u00e4n verkkokurssin\nl\u00e4pik\u00e4ymisell\u00e4. T\u00e4t\u00e4 ennen olin saanut seikkaper\u00e4isen ohjeistuksen paneelini\nvice-chair\u2019lta, johon saatoin olla yhteydess\u00e4 miss\u00e4 tahansa pulmatilanteessa.\nEnsimm\u00e4inen vaihe oli IER (Individual Evaluation Report) phase eli noin kolmen\nviikon ajanjakso, jonka aikana kukin arvioija kirjoittaa itsen\u00e4isesti arvion h\u00e4nelle\nm\u00e4\u00e4r\u00e4tyist\u00e4 hakemuksista. T\u00e4m\u00e4 oli ensikertalaiselle verrattain haastavaa;\nkunkin 27 alakriteerin osalta tulee m\u00e4\u00e4ritt\u00e4\u00e4, onko hakemus silt\u00e4 osin heikko,\nvahva vai riitt\u00e4v\u00e4. Kommenttien sanoittamisessakin saa olla kieli keskell\u00e4\nsuuta; ei saa esimerkiksi todeta jonkin asian puuttuvan, vaan pit\u00e4\u00e4 kirjoittaa,\nettei sit\u00e4 \u201dk\u00e4sitell\u00e4 riitt\u00e4v\u00e4ll\u00e4 tarkkuudella\u201d. Lis\u00e4ksi jokainen kommentti\ntulee avata mahdollisimman yksityiskohtaisesti, mutta ei saa kuitenkaan esitt\u00e4\u00e4\nkehitysehdotuksia. <\/p>\n\n\n\n<p>T\u00e4t\u00e4 seuraa\nkolmen viikon mittainen Consensus report -vaihe, jossa raport\u00f6\u00f6riksi valittu\narvioija kokoaa yhteen oman ja kahden muun arvioijan kommentit, vet\u00e4\u00e4\nkeskustelua niiden yhteensovittamisesta ja p\u00e4\u00e4llekk\u00e4isyyksien poistamisesta\nsek\u00e4 lopuksi ehdottaa hakemukselle pisteit\u00e4 asteikolla 0-5. Keskustelua, jota\nmy\u00f6s vice-chair p\u00e4\u00e4si seuraamaan ja kommentoimaan, k\u00e4ytiin s\u00e4hk\u00f6isell\u00e4\nalustalla, ja koska kaikista p\u00e4\u00e4t\u00f6ksist\u00e4 vaadittiin konsensus, saattoi prosessi\nhelposti keskeyty\u00e4 yhden arvioijan unohtaessa ottaa kantaa. T\u00e4ss\u00e4 vaiheessa\nmy\u00f6s k\u00e4vi selv\u00e4ksi, kuinka eri tavoin hakemuksia voi arvioida, ja toisaalta,\nkuinka paljon inhimilliset tekij\u00e4t vaikuttavat arvioinnissa. Inhimillisill\u00e4\ntekij\u00f6ill\u00e4 viittaan esimerkiksi tilanteeseen, jossa kaksi kolmesta arvioijasta\non yht\u00e4 mielt\u00e4, mink\u00e4 j\u00e4lkeen kolmatta pyydet\u00e4\u00e4n joko perustelemaan omaa\nkantaansa yksityiskohtaisemmin tai hyv\u00e4ksym\u00e4\u00e4n enemmist\u00f6p\u00e4\u00e4t\u00f6ksen. Laiskalle\narvioijalle enemmist\u00f6n tahtoon taipuminen on helpoin vaihtoehto, sill\u00e4 silloin\nasiat etenev\u00e4t jouhevasti \u2013 toisaalta ei ole kyse laiskuudesta, jos arvioija\naidosti muuttaa mielipidett\u00e4\u00e4n. Toisinaan taas oli tulkittavissa, ett\u00e4 v\u00e4hemmist\u00f6\u00f6n\njoutunut arvioija sisuuntui ja teki kaikkensa muuttaakseen kahden muun\narvioijan mielen. T\u00e4m\u00e4, yhdistettyn\u00e4 tiukkoihin aikarajoihin ja vice-chair\u2019n\nhoputteluun, oli omiaan johtamaan tilanteeseen, jossa p\u00e4\u00e4t\u00f6kset tehd\u00e4\u00e4n kovan\npaineen alla. Kaikki yhdeks\u00e4n hakemusta, joita itse olin arvioimassa, saivat\nkuitenkin konsensusraporttinsa ja pisteens\u00e4 m\u00e4\u00e4r\u00e4ajan puitteissa. <\/p>\n\n\n\n<p>Kolmannessa ja\nviimeisess\u00e4 vaiheessa, johon minun ei en\u00e4\u00e4 edellytetty osallistuvan,\nvice-chair\u2019t, chair\u2019t ja paneelin koordinaattorit viimeistelev\u00e4t arviot ja\ntarvittaessa l\u00e4hett\u00e4v\u00e4t ne takaisin konsensus-vaiheeseen. Lopulta hakijat\nsaavat pisteens\u00e4 seuraavan vuoden helmikuun aikana. &nbsp;&nbsp;&nbsp;<\/p>\n\n\n\n<p>Kaiken kaikkiaan kokemus oli arvokas ja tuki hyvin omaa ty\u00f6t\u00e4ni. Samalla vahvistui k\u00e4sitys siit\u00e4, ett\u00e4 monipolvisesta tarkastusmenettelyst\u00e4 huolimatta aina kun ihmiset tekev\u00e4t arvioita, on olemassa mahdollisuus arvioinnin vinoutumiseen. T\u00e4t\u00e4 korostettiin my\u00f6s perehdytysmateriaaleissa; kun arvioijat ovat asiasta tietoisia, voivat he huomioida sen paremmin ty\u00f6ss\u00e4\u00e4n ja n\u00e4in nostaa arvioittensa luotettavuutta. <\/p>\n\n\n\n<blockquote class=\"wp-block-quote is-layout-flow wp-block-quote-is-layout-flow\"><p> Photo by Headway <\/p><\/blockquote>\n","protected":false},"excerpt":{"rendered":"<p>Olin roikkunut Research Executive Agency:n (REA) eli k\u00e4yt\u00e4nn\u00f6ss\u00e4 Euroopan Komission hakemusarvioijatietokannassa vuodesta 2015 l\u00e4htien, p\u00e4ivitt\u00e4nyt kuuliaisesti profiiliani julkaisujen ja tieteellist\u00e4 asiantuntijuuttani kuvaavien asiasanojen osalta, mutta &hellip;<\/p>\n","protected":false},"author":1038,"featured_media":1320,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[1],"tags":[96,29,47],"class_list":["post-1314","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-uncategorized","tag-expert","tag-horizon-2020","tag-msca"],"featured_image_urls_v2":{"full":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",1080,720,false],"thumbnail":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway-150x150.jpg",150,150,true],"medium":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway-300x200.jpg",300,200,true],"medium_large":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway-768x512.jpg",760,507,true],"large":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway-1024x683.jpg",760,507,true],"1536x1536":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",1080,720,false],"2048x2048":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",1080,720,false],"post-thumbnail":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",359,239,false],"esotera-featured":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",359,239,false],"esotera-featured-lp":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",420,280,false],"esotera-featured-half":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",420,280,false],"esotera-featured-third":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",420,280,false],"esotera-lpbox-1":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",620,413,false],"esotera-lpbox-2":["https:\/\/blogit.utu.fi\/researchfundingnow\/wp-content\/uploads\/sites\/245\/2020\/01\/photo-by-Headway.jpg",480,320,false]},"post_excerpt_stackable_v2":"<p>Olin roikkunut Research Executive Agency:n (REA) eli k\u00e4yt\u00e4nn\u00f6ss\u00e4 Euroopan Komission hakemusarvioijatietokannassa vuodesta 2015 l\u00e4htien, p\u00e4ivitt\u00e4nyt kuuliaisesti profiiliani julkaisujen ja tieteellist\u00e4 asiantuntijuuttani kuvaavien asiasanojen osalta, mutta toimeksiantoja ei tippunut. Olisin halunnut arvioida Marie Sk\u0142odowska-Curie&nbsp;Individual Fellowship -hakemuksia, koska tunsin rahoitusinstrumentin hyvin ja olin sit\u00e4 itsekin kahteen kertaan hakenut \u2013 siin\u00e4 kuitenkaan onnistumatta. Lis\u00e4ksi halusin ensik\u00e4den kokemuksen siit\u00e4, mit\u00e4 arvioinnissa vaihe vaiheelta tapahtuu. Lopulta kev\u00e4\u00e4ll\u00e4 2019 minulta tiedusteltiin, olisinko k\u00e4ytett\u00e4viss\u00e4 syyskuussa p\u00e4\u00e4ttyv\u00e4ss\u00e4 IF-arvioinnissa. Oletan t\u00e4m\u00e4n johtuneen kahdesta seikasta: ensinn\u00e4kin m\u00e4\u00e4rittelin tieteellisen asiantuntijuuteni aiempaa laajemmin, ja toiseksi IF-hakemusten m\u00e4\u00e4r\u00e4 on jatkuvasti kasvanut. Kyseiseen hakuun tulikin lopulta enn\u00e4tysm\u00e4\u00e4r\u00e4 eli miltei 10&nbsp;000 hakemusta, ja koska kullekin&hellip;<\/p>\n","category_list_v2":"<a href=\"https:\/\/blogit.utu.fi\/researchfundingnow\/category\/uncategorized\/\" rel=\"category tag\">Research funding<\/a>","author_info_v2":{"name":"Lauri Keskinen","url":"https:\/\/blogit.utu.fi\/researchfundingnow\/author\/lokesk\/"},"comments_num_v2":"0 comments","_links":{"self":[{"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/posts\/1314","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/users\/1038"}],"replies":[{"embeddable":true,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/comments?post=1314"}],"version-history":[{"count":2,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/posts\/1314\/revisions"}],"predecessor-version":[{"id":1323,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/posts\/1314\/revisions\/1323"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/media\/1320"}],"wp:attachment":[{"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/media?parent=1314"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/categories?post=1314"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/blogit.utu.fi\/researchfundingnow\/wp-json\/wp\/v2\/tags?post=1314"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}