Hyppää pääsisaltöön
Masterminds – Maisteriainesta

Metropolian blogit nostavat keskusteluun aiheita ammattikorkeakoulumme ja kumppaneidemme maailmasta: oppimisesta, työelämästä, yhteistyöstä, osaamisesta, uudistumisesta ja erilaisista kohtaamisista. Sisällöt edustavat kunkin kirjoittajan henkilökohtaisia näkemyksiä, Metropolian johtoryhmän Pelinavaajat-blogi ilmaisee Metropolian virallista kantaa. Tervetuloa vuoropuheluun kanssamme!

  • Uusimmat postaukset
  • Blogit
  • Metropolian bloggaajat
Masterminds - Maisteriainesta
Ylemmän ammattikorkeakoulutuksen ytimessä
0

The Dark Side of Statistics

Patrick Planing & Zinaida Grabovskaia · 2.5.2019
Prof. Dr. Patrick Planing talking to the Master’s students in Business Informatics (photo by Zinaida Grabovskaia).

“The dark side of statistics may become a trap, if the subject is not used professionally. Among the current wide use of data analytics and popularization of statistical tools, we need to know more about statistics and understand it deeper. It will help to avoid its dark side”, believes Prof. Dr. Patrick Planing from Stuttgart Hochschule für Technik, a partner University of Metropolia. He shared his views with the students of Master’s program in Business Informatics in a guest visit to Metropolia University of Applied Sciences.

Traps of Statistics Typical of Media: Miscalculations

Statistics has gained a lot of credibility is society over the years. Readers of newspapers and popular journals are used to reading unusual, sometimes shocking news, and get easily convinced as soon as statistics is mentioned. In practice, however, a sloppy use of statics can lead to even fake news, when the concussions are drawn superficially, but positioned as if based on careful statistical analysis.

Consider this claim:

“The proportion of suicides in all deaths is highest among the people under 20 years with 25%, compared with 10% among 30-40 year olds, and less that 2% among over 70 year olds”.

Conclusion (wrong):

“So, the decision to commit a suicide decreases more and more with the age”.

Can we agree with this claim? If we look at it closer, there are many flows in this claim. First, there are no absolute numbers, which makes it unknown how many actually died in every age group. As a result, the current proportion cannot be correct since the death numbers in each groups are different. Also, there are no reasons indicated for the other deaths (they may be due to traffic accidents, diseases, etc), which makes the picture distorted, as there may be a growing number of other reasons for death in older age groups.

If such news are published in press, they look scientific, but the public should not be deceived. If we read this claim slowly, think of the context, and consider if this is possible at all, we can see that it cannot be correct, and does not allow to judge reliably about the behaviors of different age groups.

More Traps for Media: Misinterpretations

There are many of such false news. One very famous example originated from a study conducted by Denmark, universities, that investigated which students complete and which drop their studies. The drop rate was up to 40% over the first year, so it was important to explore the reasons for this. The research group discovered a surprising and rather confusing result. They found a negative correlation between the drop rates and the drinking habits of students. But it was not the conclusions that comes immediately to mind (that drinking habits lead to drop outs), but the opposite. The surprise was that the regularly drinking students dropped less!

All world media shared these unbelievable news: the more you drink, the more successful you are in your studies! “Sober students are more likely to drop off” were the headings in many media. But could we really draw such a conclusion form this statistical study? No, we cannot.

First of all, this cannot be a conclusion but a hypothesis, as there may be other variables interfering into this correlation. In other words, it is not that “X correlates with Y”, but “X correlates with Z (a third variable), which correlates with Y”, and other variables may be missing from the analysis. For example, social occasions may contribute to completing the studies. Maybe, it is the active social life that helps success in the studies (the students, who did well, and did not drop, did not fear the exam, probably because they socialized with others). Since this statistical study did not look deeper into the habits, we just do not know. As statistics professionals know, correlation does not indicate any causality. In other words, the most likely explanation may not be the truth. True reasons may be many. A simple answer is to check carefully before making claims.

Traps of Statistics for Professional Science: In Significance Level and Data Openness

However, even the correct process of interpreting the data can lead to wrong results that are seemingly based on correct statistics. If we look beyond popular media, there are still many underlying reasons (not only the fake news) why statistics can be “lying with the numbers”. It may happens, for example, if someone is trying to make sense of statistics – in any science, in biology, chemistry, economy etc. – without awareness of specific flaws that may be awaiting.

One of the reasons of flawed results in science, especially in the past, is the way how we do science. It often dictates wrong conclusions.

The current statistical rates of measuring the acceptability of science results started in 1925, with the British statistician Ronald Fisher offered a cup of tea with milk to his colleague, Muriel Bristol. Muriel refused this cup saying that Fisher poured tea first and milk second into her cup, while she likes it the other way round. She also claimed that she can see it at a glance which liquid was poured first. Fisher arrange a special experiment for her, to check how many times she could correctly make such a prediction. Fisher concluded that ”Bristol divined correctly more than enough of those cups into which tea had been poured first to prove her case”.

But how many cups are enough? Since Fisher’s influential 125 books, the statistical significance was accepted at the rate of 5% for scientific results to prove “true”. In 1925, Fisher’s believed that 6-8 cups were “well enough” (starting from Fisher’s statistical book), and since then a significance rate of 5% has been accepted by science as “well enough” for many disciplines, and often continues till now.

In practice, however, statistical significance does is not equal to a real life significance. If we have a significantly large size of sample, even the smallest effect can be calculated as a significant result!

By now, enough evidence is collected by statistics that argue against a blind adoption of the 5% significance level (and this is still the rate to get published in medicine, for example!) reliable results cannot be obtained. In 1925 it was probably ok, but it cannot be accepted any more, although it still happens today. If someone tests a new drug against 5% significance level, it simply does not make sense, as the significance level alone does not tell us anything about the effect of the drug.. This is clear to all who know statistics and its behavior.

This is where “bad science” comes from that has come into light in recent years. The answer is to have a significant difference, and do not accept low levels with 5% of proof. This is not any more acceptable and there is a lot of discussion around it nowadays.

How to Avoid These Traps in Science and Business?

Therefore, good science needs to have, first of all, to pay attention to the significance levels and the size of the sample group. Next, good science will also absolutely necessary analyze the difference, measuring the true effect size. Good science should check all the factors carefully, by testing the same correlation in random groups, the bigger the groups, the better the ground! At the same time, professional scientists cannot rely only on correlation. The problem with correlation is that is does not say anything, it does not prove any causality. This is why there is a need to establish experiments. A good reading here is the book “Designing experiment” Fisher, 1943.

My message to students is do not be fooled by media or “poor” science who do not understand the dark side of statistics. Also, for professional scientists, it is important to stop use “null” hypothesis tests, or testing the opposite instead of testing the actual phenomena. Such “null” tests lead to a lot of confusion (like in patient statistics developed in 19th century, instead of using significance testing). But the main issue for science is the absolute necessity to publish the data (instead of a 5-page note about conclusions, which can be drawn incorrectly). Give the raw data, show it, tell how much and what was measured; or if not publish, demonstrate the data to experts, similar to the practice in referenced journals. This initiative is called “Open data initiative”, there still could be flawed data, but this openness about the simple will increase reliability of science results.

Management of organizations should also be aware of these effects. Management needs more educations in order to use the statistics produced by consultants and own staff more effectively. This is especially evident for Marketing research. There was a big discussion in “Spiegel” magazine recently, and some professionals even claim that all marketing research is flowed since consultants are not educated in statistical methods. This discussion shows that deeper knowledge of statistical methods is needed for professional in all fields, journalists, politicians, even scientists. A wide society also need to be more demanding and create pressure to prove the grounds for conclusions based on statistics. Without a careful check of the utilized data samples, the data analysis process and interpretation, no reliable conclusions are possible, even from such a precise discipline as statistics.

=================================================

Prof. Dr. Patrick Planing – a guest speaker from Stuttgart Hochschule für Technik teaching Statistics and Statistics Models for big data. His interested include business psychology, future thinking, predictions, strategy scenarios, and many other interesting topics related to data.

Zinaida Grabovskaia, PhL – a lecturer and Head of Business Informatics Master’s Program at Metropolia University of Applied Sciences. Zinaida is interested in inviting the latest and most important topics to professional discussion with Metropolia Master’s students.

 

Business Informatics Master’s ProgramDark Side of StatisticsMasterminds blogMetropolia University of Applied SciencesProf. Dr. Patrick PlaningStatistics Models for big dataStuttgart Hochschule für TechnikTraps of StatisticsZinaida Grabovskaia

Ei kommentteja

    Kommentoi Peru vastaus

    Sinua saattaisi kiinnostaa myös nämä:

    • Going for a semester abroad to Finland
      Going for a semester abroad to Finland
      29.9.2022
    • Designing for Sustainability in Berlin. A master´s study trip to “International Week on Sustainability 2022”
      Designing for Sustainability in Berlin. A master´s study…
      16.12.2022
    • Pros and Cons of Self-direction
      Pros and Cons of Self-direction
      17.11.2020

    Metropolia Master's bloggaajat

    Bloggaajat ovat Metropolian YAMK-tutkintojen opiskelijoita, opettajia ja yhteistyökumppaneita. Aihepiirit käsittelevät laajasti ylemmän AMK-koulutuksen ajankohtaisia teemoja, työelämäyhteistyötä ja opiskelijoiden kokemuksia. We also blog in English! Check metropolia.fi/yamk

    Masterminds – Maisteriainesta -blogin toimituskunta

    Toimituskunta toimittaa Masterminds - Maisteriainesta -blogin sisällöt ennen julkaisua.

    Toimituskunta on aloittanut työnsä 1.1.2022.

    • Raisa Varsta (päätoimittaja), tutkintovastaava, lehtori, p. 0400 171 517
    • Jukka Kesänen, yliopettaja, Jatkuvan oppimisen palvelut
    • Minna Kaihovirta, dialogipäällikkö
    • Iira Lankinen, yliopettaja
    • Riikka Wallin, julkaisuasiantuntija, TKI-palvelut
    • Zinaida Grabovskaia, tutkintovastaava, lehtori

    Sähköpostiosoitteet:

    Bloggaajan ohje (PDF)

    Instructions for bloggers (PDF)

    Master’s -tutkinnoista nettisivuillamme

    Lue lisää Metropolian ylemmistä AMK-tutkinnoista

    Uusimmat jutut

    • Sosiaaliala ja kestävä kehitys – Kestävää sosiaalialan työtä?

      9.1.2023
    • Designing for Sustainability in Berlin. A master´s study trip to “International Week on Sustainability 2022”

      16.12.2022
    • Creating a Roadmap to Digital Transformation: A strategic plan to overcome the barriers to digital acceleration

      12.12.2022

    Arkisto

    • ▼ 2023 (1)
      • ▼ tammikuu (1)
        • Sosiaaliala ja kestävä kehitys - Kestävää sosiaalialan työtä?
    • ► 2022 (13)
      • ► joulukuu (4)
        • Designing for Sustainability in Berlin. A master´s study trip to “International Week on Sustainability 2022”
        • Creating a Roadmap to Digital Transformation: A strategic plan to overcome the barriers to digital acceleration
        • My Remote Studies in Procurement MBA
        • Corporate Ride-Sharing: Yet another promising option in sharing economy
      • ► marraskuu (5)
        • Mistä pitovoimaa kulttuurialan pätkittäin rakentuviin töihin?
        • Electric car batteries are considered “dead” when they still have 70% capacity. How to make electric car batteries live a second life.
        • Miten johtaa luovasti? Oivalluksia Mahdollisuuksien maisemia -tapahtumasta, osa 2.
        • Mitä on luova johtaminen? Oivalluksia Mahdollisuuksien maisemia -tapahtumasta, osa 1.
        • “Looking people in the eye & recognizing myself in them”
      • ► syyskuu (2)
        • Going for a semester abroad to Finland
        • Sähköprojektin elinkaarimalli
      • ► toukokuu (2)
        • Julkisten hankintojen tutkinto-ohjelmasta potkua organisaation hankintatoiminnan kehittämiseen
        • Huurteen ja jään muodostuminen ilmanvaihtolaitteissa - piileekö vaara korkeuksissa?
    • ► 2021 (5)
      • ► syyskuu (1)
        • Seitsemän ydinosaamista - Musiikin YAMK-opiskelijat osaamista tunnistamassa
      • ► toukokuu (2)
        • Julkisen hankinnan peruskivet: hankinnan suunnittelu ja valmistelu
        • Todella upeeta – Absolutely FABULOS
      • ► huhtikuu (1)
        • Onko YAMK -tutkinto kuromassa kiinni maisterin tutkinnon etumatkaa?
      • ► tammikuu (1)
        • Will commercial drones occupy our urban sky?
    • ► 2020 (11)
      • ► joulukuu (1)
        • Älykäs liikkuminen – katsaus markkinatilanteeseen FABULOS-projektin näkökulmasta
      • ► marraskuu (1)
        • Pros and Cons of Self-direction
      • ► lokakuu (1)
        • Etävalintakokeet haastoivat henkilökunnan joukkuepeliin
      • ► syyskuu (1)
        • Työelämälähtöisyyttä, palvelumuotoilua ja itsensä ylittämistä koronakeväänä
      • ► elokuu (1)
        • Turning Public Services to Digital
      • ► kesäkuu (2)
        • Roadmap to the Market for a New Medical Device
        • Terveyserot uhka kuntien hyvinvoinnille
      • ► huhtikuu (1)
        • Kestävä kehitys - haaste terveydenhuollon organisaatioille
      • ► maaliskuu (1)
        • YAMK – Lisää osaamista, palkkaa ja uramahdollisuuksia
      • ► tammikuu (2)
        • Itseohjautuvuuskin tarvitsee johtajuutta!
        • Sosiaali- ja terveydenhuollon kehittämisessä tarvitaan tietoa palveluiden vaikuttavuudesta
    • ▼ 2019 (21)
      • ▼ joulukuu (2)
        • UPWORTHY STUDY TRIP to Stuttgart, the Manufacturing Hub
        • Older employees open up a new horizon in service work
      • ▼ marraskuu (1)
        • Toimintatutkimus opinnäytetöissä
      • ▼ lokakuu (1)
        • Mobile telecom internal processes can be improved by combining Lean and Agile
      • ▼ syyskuu (2)
        • Toimintatutkimus menetelmänä
        • Investoi organisaation osaamispääomaan – Kehitä sisäistä liikkuvuutta
      • ▼ kesäkuu (3)
        • Live like a local – autenttisten kokemusten ja onnellisuuden jäljillä
        • Innovation is my focus
        • Hyvää palvelua ei nyhjästä tyhjästä
      • ▼ toukokuu (1)
        • The Dark Side of Statistics
      • ▼ huhtikuu (2)
        • Customer Experience is a Critical Topic for Business
        • Lisää laatua itsearvioinnilla
      • ▼ maaliskuu (2)
        • Yhteiskehittelyllä tuloksellisuutta kuntoutukseen
        • How to start building data-driven business culture?
      • ▼ helmikuu (2)
        • Naisyhdistyksiä tarvitaan yhtä paljon kuin ennenkin!
        • Kiertotalous + palvelukehitys = ?
      • ▼ tammikuu (5)
        • Tieto on kriittinen voimavara myös julkisissa ohjelmistorobotiikkahankinnoissa
        • 3UAS + 25 students + big challenges = CERN BootCamp 2018
        • How Can Your Company Achieve Invincible Competitive Advantage Through Customer-centricity
        • Establishing Global Transportation and Logistics for a Leading Finnish Company
        • How Robotic Process Automation (RPA) Can Enhance Modern Services
    • ► 2018 (18)
      • ► joulukuu (3)
        • New publication: Metropolia Master´s - Discussions on the development of work life
        • Uusi julkaisu: Metropolia Master´s - Keskusteluja työelämän kehittämisestä
        • Helping Sustainability: Consumer’s Influence Can Reach till the End of Supply Chain
      • ► marraskuu (3)
        • Aurinkosähkö kiinnostaa kiinteistön omistajia
        • CERN Bootcamp - A Different Learning Experience
        • We are in sharing business for 35 years already
      • ► lokakuu (2)
        • Master’s tason palliatiivisen hoidon asiantuntijoita tarvitaan
        • Terveyden edistämisen osaamista tulee vahvistaa
      • ► syyskuu (1)
        • Tulevaisuudessa tutkija on somesta tuttu
      • ► elokuu (1)
        • Roadmap to Your Education – Where Are You Now? Where You Want to be Next?
      • ► kesäkuu (2)
        • From Top-Down to Bottom-Up Management for IT Industry – What does it Mean?
        • A Master´s Thesis Study Found How Construction Business Sales Will Improve Significantly
      • ► toukokuu (1)
        • Ryhmäohjauksella vertaistukea terveydenhuoltoon?
      • ► huhtikuu (2)
        • Master’s projects are implemented and contribute to open innovation
        • A Master’s degree by any other name is still a Master’s degree
      • ► maaliskuu (2)
        • Vuorovaikutteinen johtaminen onnistuneen ikäjohtamisen edellytyksenä
        • Osaamaton hankintatoimi on julkisen sektorin vitsaus
      • ► helmikuu (1)
        • Strateginen hankintatoimi vaatii kehittämistä, ymmärrystä ja muutosrohkeutta
    • ► 2017 (14)
      • ► joulukuu (4)
        • Hyvät mittarit luovat pohjaa hankintatoimen suorituskyvylle
        • Jokainen yrityksen esimies on asiakaskokemuksen johtaja
        • Henkilöstön osaaminen luo menestystä
        • Why Master’s studies at Metropolia are OK for adult students
      • ► elokuu (1)
        • Kansainvälistä keskustelua maailmankansalaisuudesta ja kasvatuksesta
      • ► heinäkuu (1)
        • New perspectives from a study trip
      • ► kesäkuu (2)
        • Poimintoja Metropolia Master’sin keväästä
        • Kohtaamisia kulttuurituotannon kehittämistöiden äärellä
      • ► toukokuu (3)
        • Esimiesosaaminen karttuu monialaisessa ryhmässä
        • Kestävän rakentamisen koulutusta konttorilla, kotona ja kampuksella
        • Mentoroinnista kilpailukykyä ja arvoa itsensä johtamiseen
      • ► huhtikuu (1)
        • Digimarkkinointia vai insinööritiedettä?
      • ► helmikuu (2)
        • Terveysteknologia tarvitsee tuotekehitysosaajia
        • YAMK-opit kantavat pitkälle
    • ► 2016 (1)
      • ► joulukuu (1)
        • Moniäänisesti juhlavuoteen - Metropoliassa on tuotettu yli 2000 maisteritason tutkintoa

    Avainsanat

    Älykäs liikkuminen Arja Liinamo asiantuntija yamk business informatics Business Informatics Master’s Program Construction Business customer-centricity Hankintaprosessi hankintastrategia hankintatoimi ICT development ilmastonmuutos Industrial Management Industrial Management Master’s program johtaminen koulutus kulttuurituotanto Marjatta Kelo master Master of Engineering Master's Thesis masterminds Masterminds blog Master’s degree Metropolia Metropolia AMK Metropolia Master's Metropolia UAS metropolia YAMK opinnäytetyö osaaminen Robotic Process Automation service design Sharing economy sosiaali-ja terveysala sosiaaliala study trip terveydenhuolto Toimintatutkimus yamk YAMK opinnäytetyö YAMK-tutkinto ylempi AMK ylempi ammattikorkeakoulututkinto Zinaida Grabovskaia

    © 2015 Metropolia Ammattikorkeakoulu


    Sisällöt edustavat kunkin kirjoittajan henkilökohtaisia näkemyksiä, Metropolian johtoryhmän Pelinavaajat-blogi ilmaisee Metropolian virallista kantaa.

    Saavutettavuusseloste Tietosuojaseloste

    Jotta sivuston käyttö olisi sujuvaa, käytämme evästeitä ja suosittelemme niiden käyttöä myös Sinulle.  Voit tutustua tarkemmin evästeisiin tai poistaa ne kokonaan käytöstä asetukset-sivulla.

    Metropolian blogit
    Powered by  GDPR Cookie Compliance
    Tietosuojaseloste / Privacy Overview

    Kävijän tietokoneelle voidaan ajoittain siirtää ns. evästeitä (“cookies”).
    Evästeillä voidaan kerätä tietoja esimerkiksi miltä sivulta olet siirtynyt osoitteeseen, mitä www-sivujamme olet selannut ja milloin, mitä selainta käytät, mikä on näyttösi resoluutio ja käyttöjärjestelmä, sekä mikä on tietokoneesi IP -osoite eli mistä Internet -osoitteesta lähettämäsi tiedot tulevat ja minne ne vastaanotetaan.

    Evästetietojen avulla Palvelun kävijämääriä voidaan seurata Metropolian ja sen yhteistyökumppaneiden toimesta sekä analysoida ja kehittää kävijöitä paremmin palvelevaksi. Lisäksi Metropolian yhteistyökumppanit saattavat käyttää mainonnan kohdentamiseksi evästeitä, joilla kerätään tietoa kävijän vierailuista tällä ja muilla sivustoilla. Evästeiden avulla kerättyä tietoa käytetään kävijän kiinnostusten kohteiden perusteella kohdennetun mainonnan tuottamiseen. Evästeiden avulla tehdyssä mainonnan kohdentamisessa kävijää ei yksilöidä eikä tietoja yhdistetä kävijältä mahdollisesti muussa yhteydessä saatuihin henkilötietoihin

    Kävijällä on mahdollisuus estää evästeiden käyttö muuttamalla selaimensa asetuksia siten, että selain ei salli evästeiden tallentamista.  Kävijä hyväksyy, että joidenkin palveluiden osalta evästeiden käytön estäminen saattaa kuitenkin vaikuttaa palvelun toiminnallisuuteen.

    This website uses cookies so that we can provide you with the best user experience possible. Cookie information is stored in your browser and performs functions such as recognising you when you return to our website and helping our team to understand which sections of the website you find most interesting and useful.

    You can adjust all of your cookie settings by navigating the tabs on the left hand side.

    Tarpeelliset evästeet / Strictly Necessary Cookies

    Tarpeelliset evästeet pitäisi olla aina käytössä jotta voimme tallentaa evästeet myöhempiä vierailujasi varten.

    Strictly Necessary Cookie should be enabled at all times so that we can save your preferences for cookie settings.

    Mikäli otat nämä evästeet pois käytöstä emme pysty tallentamaan niitä, ja joudut seuraavilla vierailuilla hyväksymään/kieltämään ne uudestaan.

    If you disable this cookie, we will not be able to save your preferences. This means that every time you visit this website you will need to enable or disable cookies again.

    Kolmannen osapuolen evästeet / 3rd Party Cookies

    Käytämme sivustolla Google Analytics ja Addtoany -lisäosia kerätäksemme tietoa mm. vierailijoiden kävijämääristä, suosituimmista sivuista jne.

    Pitämällä evästeet päällä autat parantamaan/kehittämään palveluamme.

    —--

    This website uses Google Analytics to collect anonymous information such as the number of visitors to the site, and the most popular pages.

    Keeping this cookie enabled helps us to improve our website.

    Please enable Strictly Necessary Cookies first so that we can save your preferences!