Arkiv för kategori ‘pseudovetenskap’

Effekter som är enkla att mäta ger inte alltid besked om det som har verklig betydelse för patienter och brukare. Forskningsstudier som använder så kallade surrogatmått och kompositmått måste tolkas försiktigt, säger Sigurd Vitols på SBU.  

En av de grundläggande frågorna när insatser i vård och omsorg utvärderas är vilken effekt de har på människors liv och hälsa. När SBU sätter i gång ett utvärderingsprojekt är det därför en viktig fråga vilka effekter som åtgärderna ytterst syftar till. 

Studier som ska undersöka nyttan av en insats eller behandling ska helst inriktas på de slutmål som åtgärden syftar tillnågot som verkligen är viktigt för patienter och brukare.

Källa: SBU – Effektstudier inriktas inte alltid på det mest väsentliga

SBU handbok

Surrogatparametrar är vanligen lätta att mäta och antas ha en avgörande betydelse för t.ex. utveckling av hälsa eller sjukdom. För att ett sådant surrogatmått ska vara meningsfullt måste sambanden vara odiskutabla, något som ofta inte är fallet.

Skälet till att studierna bör inriktas på sluteffekter för personerna, och inte enbart på mellanled (surrogatmått) som tros vara involverade i en skadlig utveckling, är att kopplingen ofta är komplicerad och ofullständigt kartlagd mellan faktorer som betraktas som orsak och verkan. Det är till exempel inte givet att ett läkemedel som minskar skadligt kolesterol också skyddar mot hjärtinfarkt. Dessutom kan åtgärderna ha bieffekter som spelar roll för människors dagliga liv, hälsa och livskvalitet.

Ett mycket tydligt exempel är statiner, s.k. ”kolesterolsänkare”. Preparatindustrin har blomstrat grundat på tveksamma antaganden om ”ont kolesterol” och ”gott kolesterol”. Under de senaste åren har kritiska forskare gradvis punkterat de överdrivna löftena, den senaste är Lack of an association or an inverse association between low-density-lipoprotein cholesterol and mortality in the elderly: a systematic review där fyra svenskar tillhör författarna.

Exempelvis bör studier av ett kolesterolsänkande läkemedels förmåga att bromsa åderförkalkning inriktas på att undersöka effekten på människors överlevnad, hjärt-kärlhälsa och livskvalitet.

– Att enbart undersöka effekten på kolesterolnivåerna är alltså inte tillräckligt för att kunna bedöma nyttan med behandlingen, säger han. En kolesterolsänkning som sådan är ju egentligen ointressant för patienten om det inte samtidigt kan visas att patienten har någon nytta av den.

– För patienterna är det effekten på dödlighet, insjuknande i hjärtinfarkt och livskvalitet som är det riktigt intressanta.

Källa: SBU

Så finns kompositmått:

Ett annat problem vid effektmätning kan uppstå när man väljer sammansatta mått, så kallade kompositmått. Då väger forskarna samman flera olika utfall för att öka studiens statistiska styrka. Men om utfallen har väldigt olika dignitet är detta en tvivelaktig metod – till exempel att slå ihop dödlighet med behov av slutenvård.

Man kan, enligt SBU, helt förrycka sanningen genom att använda kompositmått:

– I värsta fall kan kompositmåttet maskera en negativ behandlingseffekt på verkligt viktiga utfall.

SBU utvärderar metoder framför allt inom hälso- och sjukvården genom att systematiskt och kritiskt granska den vetenskapliga litteraturen på olika områden.

Källa: Statens beredning för medicinsk och social utvärdering

SBU handbok

Som jag ser det är forskning inom kost och näraliggande områden oerhört banal och fokuserar på industrins intressen snarare än reella hälsoaspekter. Ur media väller påståenden om superfoods, fettförbrännare och förhoppningar om viktminskningsmediciner av diverse slag.

Riksmedia anlitar par préférence standardiserade böneutropare som t.ex. Mai-Lis Hellenius, Charlotte Erlanson-Albertson, Claude Marcus och andra som är djupt rotade i det hittillsvarande och vars status bland sina likar och finansiärer är hyfsat beroende av de åsikter man uttrycker. 

Lönsamhet inom matindustri bygger på samma grund som andra affärer, låga råvaru- och arbetskostnader samt återkommande kunder. Marknadsföringen sker gärna med ”vetenskap” som ofta(st) bekostas och utförs på industrins uppdrag och med förutsättning/förhoppning att förstärka konsumenternas tilltro till deras produkter.

När forskningsresultat blir missvisande beror det ofta på svagheter i studiernas upplägg och genomförande – det visar SBU:s systematiska översikter. Men det kan också handla om tankefel och bristande saklighet, både hos forskarna själva och hos andra som tolkar deras fynd.

Källa: SBU – Vinklad tolkning snedvrider fynden

Svagheter i studiernas upplägg och genomförande är ett ytterst vanligt systemfel, bristande precision i mätningar och skrämmande låga krav på det som kallas statistisk signifikans.* Observationsstudier av kostfaktorer kan omfatta tiotusentals deltagare och sträcka sig över tiotals år men data om vad deltagarna äter baseras ofta på enstaka eller ett fåtal ifyllda formulär under samma tid. Oprecision i ingångsdata kan aldrig uppvägas av vare sig antal deltagare eller tid, skit in ger skit ut, SISU.

Min åsikt är att det inte är de vassaste knivarna i lådan som driver koststudier. Beställarna vill dessutom ha hyfsat snabba resultat, båda omständigheterna har sänkt kraven på statistisk signifikans.

Lägg märke till ”…bristande saklighet…”! Det är en omskrivning för att ”forskarna” har ett bildningsunderskott, låter sig manipuleras alternativt inte vidareutbildar sig efter de senaste pålitliga rönen.

Långt ifrån all forskning är tillförlitlig. Direkt fusk och oredlighet kan få stor uppmärksamhet i medierna men är trots allt relativt ovanligt. Betydligt mer utbredda problem, som inte betraktas som fusk men som ändå förvränger resultaten, förbigås ofta med tystnad. Ändå kan de leda till fullständigt felaktiga slutsatser.

Paolo Macchiarini på Karolinska är ett exempel på en högprofilfuskare vars verksamhet med stor sannolikhet ledde till förtida död hos försökspersonerna.

I stället för att allsidigt undersöka ett ämne eller pröva en hypotes, kan det vara frestande för forskare att vinkla sina frågor och svar för att få stöd för den egna uppfattningen. Sakligheten kan hotas av politiska hänsynstaganden, personliga karriärintressen, professionella dispyter, avundsjuka, hybris** och ärelystnad.

”Personliga karriärintressen”! Det gäller att klättra på de stegpinnar som bjuds.

Vetenskapssamhället har fastlagt ett etiskt fundament som förväntas gälla. Här ingår bland annat att forskningsresultat inte får manipuleras för att gagna vinstintresse eller personlig övertygelse hos forskaren själv eller omgivningen. Vetenskapliga påståenden måste vara öppna för ifrågasättande och ska accepteras på grundval av observerade fakta – inte på grund av särintressen. Sakinnehållet i hypoteser, invändningar och kritik ska beaktas utan hänsyn till vem eller vilka som framför dem.

Till detta kommer ”nyttiga idioter” som lydigt förmedlar pressmeddelanden och annat material utan att kritiskt granska eller ställa följdfrågor.


*) Statistisk signifikans innebär, väldigt svepande uttryckt, hur stor risk det är att utfallet av en observation eller ett experiment beror på slumpen.

**) Hybris – ett uttryck för ett sinnestillstånd där en person har en starkt överdriven självuppfattning, se Storhetsvansinne

The Guardian logo

Min hypotes är att ju mer ett forskningsområde bygger på inbillning snarare än bildning desto mer kan inflytelserika personer snedvrida dess utveckling. Särskilt farligt är det när resultaten kan påverka stora delar av hälsan hos Jordens befolkning. De kostråd vi får idag baseras på illa underbyggd ”vetenskap” där observationsstudier spelar en fullständigt orimlig roll, till stor del genom att okritiska massmedia blåser upp deras slutsatser till orimliga proportioner.

En observationsstudie inom kostområdet kan inledas genom att man frågar ett antal människor om vad man ätit under en viss period. Det kan röra sig om så lite som en enda dag! Så kompletterar man med en hälsoundersökning för att dels fastställa utgångsvärden och i förekommande fall sortera bort de som av olika skäl är orimliga att inkludera i studien. Så vidtar observationsperioden som, om inte annat så av statistiska skäl, pågår avsevärd tid. Man noterar om och när deltagarna råkar ut för hälsorelaterade händelser inklusive insjuknanden och död. De två senare kallas hårda ändpunkter.

Av statistiska skäl måste sådana studier innefatta mängder av deltagare samt pågå under många år för att utfallet skall ha ens den minsta statistiskt trovärdiga betydelse genom att man kan observera ett samband mellan ett eller flera utgångsdata och hälsoutfall. Det kan röra sig om i storleksordningen 10000 – 100000 deltagare under 10 – 40 år. Ett sådant samband behöver inte innebära orsak och verkan utan kan vara slumpartat eller bero på en eller flera bakomliggande parametrar. Observationsstudier kan ha ett berättigande genom att generera relevanta frågeställningar som resulterar i hypoteser att ta ställning till.

Observationsstudier brukar ibland kallas epidemiologiska, detta då den använda taktiken att iaktta ursprungligen utvecklades för att studera snabbt spridda sjukdomar, epidemier. Där är observationsstudier logiska och de enda rimliga då man etiska skäl vanligen inte aktivt vill smitta försöksdeltagare med sjukdomar. Dessutom utvecklas epidemier mycket snabbt och dess hårda ändpunkt är lätt att identifiera, endera är man smittad/sjuk/död eller inte.

Att överföra den metoden till koststudier är orimligt, dessutom använder man sig ofta av pseudoparametrar som ”blodfetter” och liknande. Deras roll är omdiskuterade och trots att de studerats från 30-talet (intensivt från 50-talet) har slutsatserna varit minst sagt motsägelsefulla och till stor del beroende på vem som bekostat en viss studie.

In a 2015 paper titled Does Science Advance One Funeral at a Time?, a team of scholars at the National Bureau of Economic Research sought an empirical basis for a remark made by the physicist Max Planck: “A new scientific truth does not triumph by convincing its opponents and making them see the light, but rather because its opponents eventually die, and a new generation grows up that is familiar with it.”

Min tolkning: Fysikern Max Planck hävdade att nya vetenskapliga upptäckter inte slår igenom genom att dess motståndare övertygas utan genom att dessa dör och lämnar rum för nya forskare att utvecklas. Med den hypotesen som grund publicerades 2015 studien ”Does Science Advance One Funeral at a Time?” (Utvecklas vetenskap en begravning i taget?)

The researchers identified more than 12,000 “elite” scientists from different fields. The criteria for elite status included funding, number of publications, and whether they were members of the National Academies of Science or the Institute of Medicine. Searching obituaries, the team found 452 who had died before retirement. They then looked to see what happened to the fields from which these celebrated scientists had unexpectedly departed, by analysing publishing patterns.

Min tolkning: Man identifierade mer än 12000 vetenskapsmän med rykte att tillhöra eliten inom sina områden och bland dessa fann man 452 som avlidit före sin pensionering. Så fortsatte man att analysera utvecklingen inom deras forskningsområden genom att studera publiceringsmönster.

What they found confirmed the truth of Planck’s maxim. Junior researchers who had worked closely with the elite scientists, authoring papers with them, published less. At the same time, there was a marked increase in papers by newcomers to the field, who were less likely to cite the work of the deceased eminence. The articles by these newcomers were substantive and influential, attracting a high number of citations. They moved the whole field along.

Min tolkning: Yngre forskare som nära samarbetat med elitforskarna blev mindre produktiva. I kontrast ökade bidragen från nya som inte var lika benägna att citera den avsuttne eminensens arbeten. Artiklarna av dessa nya forskare blev inflytelserika och resulterade i många citeringar. De förde hela sitt forskningsområde framåt.

Källa: Kort avsnitt av Artikel i The Guardian

Min slutsats av studien är att ett antal vetenskapsmäns positiva bestående bidrag till sina respektive forskningsfält var att de avgick med döden.