Monday, October 26, 2015

Mulig gjennombrudd for måling av kvalitet?

Ikke så nytt, men nok en grundig studie fra et de store (USA baserte National Institute of Health) bekrefter tidligere funn om at gjennombruddsforskning innen livsvitenskap skjer utenfor de store tidsskriftene. "What if I told you that nearly 90 percent of the publications which have profoundly influenced the life sciences did not appear in a high-impact factor journal?"

Det som er nytt er at de forslår en ny metode som er fundamentalt ny og akkurat det som man har tenkt på i flere år og som nå er i ferd med å bli en realitet:

Key to the RCR is the concept of co-citation network. In essence, this new metric compares the citations an article receives to a custom-built citation network which is relevant to that particular paper. The relevant network is defined by the entire collection of papers which are referenced in the papers that cite the reference paper.

Les mer http://www.ascb.org/nature-of-scientific-impact/

Kvifor brukar ikkje juristar Git-teknologien for å lage lovar?

Clay Shirky har ein flott video frå 2012 om kvifor vitskapsfolk, spesifikt juristar, ikkje brukar teknologiske mulegheiter som GIT når det er åpenbart at den både er effektiv og kompatibel med demokrati. Han fortel at det tok 164 år frå erotiske noveller kom, til vitskapsfolk fant ut at trykkjeteknologien kunne brukast for å effektivisere vitskap. Det går framover, men det er heilt klart mange som enno ikkje har høyrt om desse ideane. Lærebøkene innan forskningsjournalistikk og forskningsformidling som er nyleg utgitt tek utgangspunkt i einvegskommunikasjon fordi brukarane vert sett på som ute av stand til å bidra tovegs ser det ut til. http://prosa.no/essay/ingen-sporsmal-er-for-dumme/ Det er nok diverre denne holdninga som ligg til grunn for ordet "formidling" og det vil nok ta litt tid før forskninga ser på "hvermannsen" som noko anna enn "ankelbitarar".

Thursday, October 22, 2015

Fem spådommer for åpen vitenskap i 2016

Det ser ut til at USA, Storbritannia og EU i løpet av det neste året vil ha fortgang i datautvinning, kortere og mer fagtilpassede embargoer, teknisk interoperatibilitet og mer konkurranse i forfatterbetalinger i løpet av 2016. Åpning av flere deler enn sluttproduktet kommer nok til å bli mye mer utviklet:

9. Opening Up the Publishing Process

We can expect to see the principle of openness increasingly applied not only to articles, but to the publishing process itself. New initiatives will seek to open up the “black box” of peer review, through greater transparency in reviewer identities, and increased interactions between editors, reviewers and authors.

Jeg synes alle 10 spådommene treffer veldig godt, blant annet fordi dette er endringer som allerede er i gang slik som F1000 sin post-publikasjon-fagfellevurdering, så den kan jeg anbefale å lese dem her:

http://publishingperspectives.com/2015/10/the-next-wave-of-open-access-5-predictions-for-2016/

og her:

http://publishingperspectives.com/2015/10/the-next-wave-of-open-access-5-more-predictions-for-2016/

Elsevier og åpen vitenskap

Verdens største vitenskapelige forlag, Elsevier, prøver å tilpasse seg de økende kravene om åpen vitenskap. I dette intervjuet av Dr. Stephane Berghmans (@StefEurope), Elsevier’s VP of Global Academic & Research Relations, får ser man at Elsevier har skjønt at åpen vitenskap kommer og at de prøver å tilpasse seg. Jeg merker meg særlig at de begynner å bli klar over "borgervitenskap":

Q: Which other stakeholders are involved in this development, and how? And why is it important to have conferences or discussions like the Quadriga Debate on Science 2.0?
One comment I recently heard was that when moving from open access to open data and open science, the biggest challenge has been the drastic increase in the number of stakeholders. Beside researchers and the scientific community, one of the most interesting stakeholder groups is Citizens.

Wednesday, October 21, 2015

OrcID på Oxford

University of Oxford har nå en løsning for å få verifisert sin tilknytning til universitetet på OrcID til de ansatte. Les mer her.

Vitenskapen er nå i et fundamentalt irreversibelt paradigmeskifte

Denne videoen er verd å få med seg. "Jean-Claude Burgelman (European Commision) argues that transition in science is a matter of facts, not beliefs."

Fra denne siden: https://www.fosteropenscience.eu/content/we-need-demonstrate-empirical-basis-our-policy-has-effect-and-impact

EU Research Commissioner Carlos Moedas har gitt klar beskjed til forlagene: “There is a revolution happening in the way science works. Every part of the scientific method is nowadays becoming an open, collaborative and participative process,” Moedas said. “Can publishers afford to stay out of that trend? I believe that much effort [is] need[ed] ….. by the main publishers to adjust their business models to the realities of the 21st century.”

Foster open science har noen veldig gode opplæringsmoduler, og der fant jeg denne gode skissen under "View the taxonomy Three." https://www.fosteropenscience.eu/foster-taxonomy/open-science

Det er utrolig mange gode ressurser for åpen vitenskap, myntet særlig på unge forskere og studenter, på opplæringssiden:
https://www.fosteropenscience.eu/ som for eksempel denne 16 siders introduksjonen til åpen innovasjon og hvordan utdanningsinstitusjonene må bli grunnlagsleverandører til innovasjon. Forfatter er Henry Chesbrough fra Berkeley: https://www.fosteropenscience.eu/content/open-science-open-innovation





Tuesday, October 20, 2015

The San Francisco Declaration on Research Assessment (DORA)

Det har vært mye kritikk av impact-factor i mange år, og et Googlesøk på "impact factor criticism" viser at det er mye kritikk av dette målet på tidsskriftkvalitet. Så hva er alternativet? Det prøvde Independent Review of the Role of Metrics in Research Assessment and Management å besvare i sin rapport som kom ut i juli i år, og i følge artikkelen i The Guardian uttalte lederen av gruppen på hvor viktig det var å få innført OrcID og andre åpne og interoperative datastrukturer for at indikatorer kan støtte oppunder målet om å tilføre ressursene dit de gjør mest nytte for seg.

Indicators can only meet their potential if they are underpinned by an open and interoperable data infrastructure. How underlying data are collected is crucial. If we want agreed, standardised indicators, we need unique, unambiguous, persistent, verified, open, global identifiers; standard data formats; and standard data semantics. Without putting this holy trinity in place, we risk developing metrics that are not robust, trustworthy or properly understood.
The San Francisco Declaration on Research Assessment (DORA) har nå 12616 underskrifter fra individer og 592 organisasjoner så skepsisen mot impact factor øker jevnt og trutt i forskermiljøene. Denne etter mitt skjønn grundige vitenskapelige undersøkelsen av et stort forskerteam, hovedsakelig fra Universitetet i Edinburgh, med tittelen "Risk of Bias in Reports of In Vivo Research: A Focus for Improvement" prøver å besvare hvor unøyaktig Impact Factor er for forskningsadministrasjon og forskningsfinansiering og viser at bruk av Impact Factor er med på å allokere forskningspengene fra vitenskapelige gjennombrudd og over til forskning som viser seg å være blindspor. Av en eller annen grunn så var ikke "Research Excellence Framwork" i Storbritannia interessert i å bidra til deres undersøkelser. Jeg tipper "Research Excellence Framwork" foretrekker å gjøre sine egne analyser for å ikke avsløre hvor feilslått forskningsfinansieringen har vært de siste årene.
Of greater concern is that there still appears to be a lack of engagement with these issues amongst those charged with assessing the quality of published research. In the course of this work, we approached the UK Higher Education Funding Council (HEFC) seeking details of those publications submitted to them in the context of the 2014 REF; they declined a Freedom of Information request on the basis that disclosure would not, in their view, be in the public interest. The REF should of course have a role in championing good science, but it should also be a force for improvement, seeking to provide measures against which institutions and scientists can monitor improvements in the rigour of their Research.


 "The Metric Tide"-rapporten viser at de er klar over problemstillingen og planleggingen av OrcID i Storbritannia viser at de jobber med situasjonen. Åpen interoperatibel infrastruktur er en global bølge, blant annet så har Italia satt seg fore å få 80 prosent av forskerne sine over på OrcID innen 2016.

Hanne Skartveit fortalte denne vitsen på et seminar i Norges Bank 2012 som illustrerer godt problemet med impact factor også:
 
Let me conclude with a story. A shepherd in Hallingdal is out tending a huge flock. A man comes walking over the hill with self-assurance in his stride. He calls out to the shepherd, saying: “I’ll wager that I can tell you the exact number of sheep in your flock. If I’m wrong, I’ll give you ten thousand kroner, but if I’m right, I get a sheep. The shepherd thought this was a nifty idea; it was, after all, a large flock. The man says, “By my calculations, there are 354 sheep”. The shepherd stood aghast, because that indeed was the correct number! The man picked up an animal, placed it under his arm and started to leave. The shepherd then came to his senses and called out to the man, “I’ll double your bet. I’ll wager that I can tell you exactly what your line of work is!” “Oh? All right,” said the man, accepting the bet. “I am certain that you work in New Public Management!” said the shepherd. Now it was the man’s turn to be dumbfounded, for that was absolutely right. He asked, “How did you know that I work in the New Public Management?” And the Shepherd replied, “Put down my dog and I’ll tell you…”