Data Misinterpretations

- Dr. Theo SteiningerCo-Founder & CEO von Erium
- Dr. Maksim GreinerCo-Founder & CTO von Erium
Überblick
In dieser Folge des Erium Podcasts sprechen Dr. Theo Steininger und Dr. Maksim Greiner über die fünf häufigsten Fehler beim Interpretieren von Daten. Anhand anschaulicher Beispiele – von scheinbar absurden Korrelationen bis hin zum Verschwinden aller Amerikaner im Jahr 2050 – werden typische Fallstricke in der Datenanalyse greifbar erklärt. Die Folge richtet sich an alle, die mit Daten arbeiten oder Analyseergebnisse kommunizieren.
Über den Gast
Dr. Maksim Greiner ist Co-Founder von Erium und dort unter anderem im Bereich Sales tätig. Als Mitgründer des Unternehmens bringt er tiefes Verständnis für maschinelles Lernen, Statistik und die praktische Anwendung von Data Science mit und erklärt in dieser Folge gemeinsam mit Theo die typischsten Interpretationsfehler bei der Datenanalyse.
Zusammenfassung
Scheinkorrelationen und Reporting Bias
Der erste besprochene Fehler sind sogenannte Spurious Correlations – also Scheinkorrelationen. Die Hosts illustrieren dies mit humorvollen Beispielen: So korreliert der Pro-Kopf-Käsekonsum zu 94 Prozent mit der Anzahl der Todesfälle durch Verheddern in Bettwäsche. Hinter solchen Kuriositäten steckt oft simples Datenmining: Wer Tausende von Datenkurven miteinander vergleicht, findet zwangsläufig zufällige Übereinstimmungen.
Hinzu kommt der sogenannte Reporting Bias – es wird nur das veröffentlicht, was interessant oder signifikant wirkt. Das Beispiel eines Professors mit 20 Doktoranden verdeutlicht dies: Wenn jeder eine Studie durchführt, wird statistisch gesehen mindestens eine zufällig ein signifikantes Ergebnis liefern – und nur dieses landet in der Veröffentlichung.
Ein weiterer Mechanismus ist das sogenannte Population Mixing: Werden verschiedene Gruppen unreflektiert zusammengeworfen, entstehen scheinbare Zusammenhänge. Das Beispiel mit Barthaaren und Körpergröße macht deutlich, dass erst durch die Vermischung von Männern und Frauen eine vermeintliche Korrelation entsteht, die in den Einzelgruppen gar nicht existiert.
Confirmation Bias: Die Welt sehen, wie man sie sehen will
Der zweite Fehler ist der Confirmation Bias – die Tendenz, gezielt nach Informationen zu suchen, die die eigene Vermutung bestätigen, während widersprechende Belege ignoriert werden. Als allgemeines Beispiel dient die verbreitete Wahrnehmung, die Welt werde immer schlechter, obwohl objektive Metriken wie Lebenserwartung oder Kindersterblichkeit global gesehen oft positive Trends zeigen. Schlechte Nachrichten verkaufen sich besser und verstärken diesen Bias.
Im wissenschaftlichen Kontext kann Confirmation Bias dazu führen, dass Studien, die einer Forschungsthese widersprechen, in der Schublade verschwinden, während zufällig positive Ergebnisse veröffentlicht werden. Dies verbindet sich unmittelbar mit dem zuvor genannten Reporting Bias und verstärkt dessen Wirkung.
Overfitting: Zu nah an den Daten
Als dritten Fehler erklären die beiden das Overfitting – das übermäßige Anpassen eines Modells an vorhandene Trainingsdaten. Reale Daten sind immer mit Rauschen behaftet, also von Zufallseinflüssen überlagert. Versucht man, jeden einzelnen Datenpunkt perfekt zu erklären, wird die resultierende Kurve mathematisch so komplex, dass sie an unbekannten Stellen völlig unplausible Vorhersagen liefert.
Das anschaulichste Beispiel der Folge: Legt man ein Polynom möglichst gut an historische US-Bevölkerungsdaten an, ergibt sich eine Kurve, die im Jahr 2050 die Null-Linie schneidet – die Bevölkerung wäre dann laut Modell ausgestorben. Dieser offensichtlich absurde Befund hat ausschließlich mathematische, keine inhaltlichen Ursachen. Die Herausforderung liegt darin, dass solche Overfitting-Probleme bei komplexen Datensätzen weit schwieriger zu erkennen sind.
Irrelevante Daten und der Fluch der Dimensionalität
Fehler Nummer vier behandelt das unreflektierte Hinzuziehen irrelevanter Daten. Der intuitive Gedanke 'mehr Daten können nicht schaden' ist trügerisch: Machine-Learning-Algorithmen basieren auf Distanzmaßen im mehrdimensionalen Raum. Je mehr (auch irrelevante) Features hinzukommen, desto höherdimensionaler wird das Problem – und desto schwieriger wird es, sinnvolle Abstände zu berechnen.
In sehr hohen Dimensionen sind Datenpunkte quasi immer weit voneinander entfernt, wodurch echte Strukturen im Rauschen der unnötigen Variablen untergehen können. Das Beispiel einer Spiralstruktur in Clustering-Daten verdeutlicht: Fügt man wenige Rausch-Dimensionen hinzu, werden ursprünglich klar getrennte Cluster ununterscheidbar.
Stille Post bei der Kommunikation von Analyseergebnissen
Der fünfte und letzte Fehler ist weniger technischer als menschlicher Natur: die fehlerhafte Übermittlung von Analyseergebnissen an Nicht-Experten. Data Scientists kommunizieren ihre Ergebnisse häufig an Kunden oder Stakeholder, die keine statistische Ausbildung haben. Dabei besteht die Gefahr, dass Nuancen verloren gehen oder Ergebnisse falsch interpretiert werden – etwa Korrelation mit Kausalität verwechselt wird.
Ein wirksames Gegenmittel: Man bittet das Gegenüber, das Gehörte in eigenen Worten wiederzugeben, ohne dabei eine Prüfungssituation zu erzeugen. So lässt sich der Dialog als 'Pingpong' gestalten, bis das Verständnis auf beiden Seiten übereinstimmt.
Als eingängiges Beispiel dient ein Bericht über eine Champagner-Studie, bei der Nachrichtensender verschwiegen, dass die Studie an Ratten durchgeführt wurde. Dieser 'stille Post'-Effekt – verstärkt durch den Anreiz, Inhalte möglichst interessant klingen zu lassen – ist besonders in Medizin und Medienberichterstattung gefährlich.
Kernaussagen
- Korrelation bedeutet nicht Kausalität: Scheinkorrelationen entstehen oft durch zufällige Übereinstimmungen beim Vergleich großer Datenmengen.
- Reporting Bias führt dazu, dass nur signifikant erscheinende Ergebnisse veröffentlicht werden, obwohl sie rein zufällig entstanden sein können.
- Confirmation Bias verleitet dazu, nur die Daten zu sammeln und zu gewichten, die die eigene These bestätigen.
- Overfitting entsteht, wenn ein Modell zu stark auf Trainingsdaten optimiert wird und dadurch außerhalb dieser Daten völlig falsche Vorhersagen trifft.
- Irrelevante Features erhöhen die Dimensionalität und können echte Muster im Datensatz vollständig überlagern.
- Kommunikation von Analyseergebnissen ist fehleranfällig: Durch den 'stillen Post'-Effekt und den Anreiz zur Vereinfachung gehen wichtige Nuancen oft verloren.
- Wer Daten analysiert, sollte stets die Herkunft, Erhebungsweise und mögliche Verzerrungen der Daten kennen.
Fazit
Die Folge zeigt eindrucksvoll, dass Fehler bei der Dateninterpretation nicht immer technischer Natur sind – menschliche Denkfehler wie Confirmation Bias oder Kommunikationsprobleme spielen eine ebenso große Rolle wie methodische Stolpersteine wie Overfitting oder irrelevante Features. Wer mit Daten arbeitet, sollte diese fünf Fehlerquellen kennen und regelmäßig kritisch hinterfragen, ob die eigenen Schlussfolgerungen wirklich dem entsprechen, was die Daten tatsächlich aussagen.
Fuer Data Scientists und Analysten
Die technischen Fallstricke – Spurious Correlations, Overfitting und der Fluch der Dimensionalität – sind zentrale Qualitaetskriterien jeder Analyse. Ein bewusster Umgang mit diesen Fehlerquellen trennt solide Modelle von irreführenden Ergebnissen.
Fuer Fuehrungskraefte und Entscheider
Wer Analyseergebnisse als Entscheidungsgrundlage nutzt, sollte aktiv nachfragen und Ergebnisse in eigenen Worten zusammenfassen lassen – so werden Missverstaendnisse fruehzeitig aufgedeckt und teure Fehlentscheidungen vermieden.
Fuer alle, die Statistiken konsumieren
Ob in Nachrichten, Studien oder Unternehmensberichten: Statistiken sollten stets mit einem kritischen Blick auf Datenherkunft, Stichprobenzusammensetzung und moegliche Bias gelesen werden.
Volltranskript anzeigen
Speaker0: Im Jahr neunzehnhundertfünfzig lag die US Bevölkerung bei circa einhundertfünfzig Millionen Menschen. 50 Jahre später ist diese Bevölkerungszahl auf 280000000 gestiegen. Und laut 1 Machine Learning Vorhersage sind im Jahr 2050 in den USA alle Menschen tot? Moment mal. Was, wieso eine Konklusion zustande kommen kann und auf was ihr beim Interpretieren von Daten achten müsst, erfahrt ihr jetzt. Herzlich willkommen zu 1 neuen auf Ausgabe von The Eriam Podcast. Bei mir ist heute der Maxim. Hallo. Und wir reden über die Top 5 gängigsten Fehler beim Interpretieren von Daten, die immer und immer wieder passieren Spiritius Correlations. Maxim, ich hab dir da so ein paar Statistiken rausgesucht und ich würd gern deine Meinung dazu wissen, weil für mich scheinen die sehr interessant und sehr erleuchtend auch. Also Punkt 1, der pro Kopf Käsekonsum korreliert zu 94 Prozent mit der Anzahl der Leute, die durch Verheddern in Bettwäsche sterben, ne. Das heißt, je mehr Käse ich esse, Wahnsinn. Ich bin quasi ein Mörder, wenn ich mehr Käse esse. Dann das Alter der Miss America korreliert zu 87 Prozent mit der Anzahl der Morde durch erhitzte Gegenstände, natürlich. Erhitzliches Gefecht bei den nächsten Monaten. Genau, exakt. Die prügeln sich da mit Heizungen. Und die Anzahl der Leute, die ertrinken, nachdem sie an einem aus einem Fischerboot gefallen sind, korreliert zu 95 Prozent mit der Heiratsrate in Kentucky. Die glaube ich. Ja, die wird Definitiv, ja. Wahrscheinlich wird erst geheiratet und dann kommt irgendwas raus und die Leute werden Nein, die heiraten wahrscheinlich auf 'nem Fischerboot und machen da drauf. Ach so, ja. Erklärung ist ziemlich klar, oder? Genau, also da läuft doch sicherlich irgendwas schief. Kannst Du uns erklären, wie so was zustande kommen kann? Oder was so die die, sag ich mal, der Grundfehler hinter Spirit Recallations ist. Also ist in manchen Einzelfällen vielleicht schwierig, aber so grundsätzlich,
Speaker2: was man häufig hat, ist, das ist so das Suchen nach dem Zufall, ja? Also wenn Du jetzt solche Sachen nimmst wie irgendwie das Alter der Misswahlen und da kannst Du ja da irgendwie sone Kurve auftragen für jedes Jahr, hast Du dann das Alter. Mhm. Also das Alter der Miss America und dann kannst Du und Du kannst eine Kurve machen für Anzahl der Morde in jedem Jahr oder Anzahl der gegessenen Steaks in jedem Jahr und so was. Und Du kannst dir einfach mal alle diese Kurven vergleichen und oder erst mal überhaupt sammeln. Und wenn Du da jetzt, sagen wir mal, Du hast 100000 Kurven, ja, von irgendwie Statistischem Bundesamt oder so was über verschiedenste Zahlen, kannst dir einfach mal ausrechnen, welche Kurven liegen denn am nächsten beieinander? Und das ist dann bei son bei soner großen Menge an an Kurven, die Du zur Verfügung hast, ja erst mal reiner Zufall. Ja. Und da kommen dann halt so geile Sachen raus. Das heißt, das ist einfach nur, Du hast wahrscheinlich 1000 oder 10000 Vergleiche gemacht und Du berichtest halt von den einem lustigen Komischen. Ja. Da gibt's also einfach 'n Namen für, das ist Reporting Bias. Und das ist tatsächlich 'n Problem, weil das zum Beispiel bei auch durchaus medizinischen Studien, ja? Also stell dir vor, Du bist 'n Professor und Du hast irgendwie 20 Doktoranden und jeder davon untersucht irgend einen Effekt. Und was gerne bei Medizinstudien als Signifikanz rangenommen wird, ist der sogenannte und wenn der dann unter 0.05 liegt, was heißt, der das, was Du beobachtest hast, hat eine geringere Wahrscheinlichkeit als 5 Prozent quasi ein Zufallsergebnis zu sein, dann kannst Du's reporten. Ja, ja? Wenn Du jetzt 20 Doktoranden machst und jeder macht eine Studie, die mit Münzwürfen vergleichbar ist, da wird schon 1 dabei sein, der diese Signifikanz erreicht hat. Nur der kriegt 'n Paper, ja? Die anderen nicht. Und dann hast Du schon diesen Reporting Bias, ja? Es wird nur das berichtet, was halt irgendwie interessant klingt. Mhm. Und dadurch kann's einfach sein, dass Du aus 'nem Riesensieb an Zufällen, also eine Riesenmengen an Zufällen, nur das raussiebst, was signifikant erscheint.
Speaker0: Definitiv, also so lächerlich diese Sachen jetzt auch scheinen, die wir da grade vorgelesen haben, kann es dennoch sein, dass einem das einfach entgeht, ja? Ja, klar. Dass einem diese, dass man sich denkt, okay gut, Spiriticulations, man bringt da immer gerne witzige Beispiele, weil sich's auch anbietet, aber es gibt tatsächliche problematische Sachen, wo man wo man Korrelation verwechselt mit Kausalität. Mhm. Und die Ja. Die Korrelationen können auch noch durch andere Sachen zustande kommen. Also Beispiel ist auch.
Speaker2: Das ist häufig zum Beispiel, wenn irgend eine Studie gemacht wird, wo sich die Leute freiwillig für melden, ja? Mhm. Du, keine Ahnung, Du suchst nach irgendwas, wo, sagen wir mal, die den Gesundheitseffekt von Leuten, die Lebensgewohnheit x y haben. Und dann machst Du dann 'n Public Outreach, bitte Leute, die Lebensgewohnheit x y haben, meldet euch, wir möchten gern eure Gesundheit untersuchen. Mhm. Ja, dann kannst Du dir vorstellen, dass wenn die Leute da vielleicht auch eine Gesinnung dahinter haben, dass dann halt die Leute, die besonders gesund sind, halt gerne sich zur für die Studie zur Verfügung stellen. Und dann vergleichst Du's mit den allgemeinen Statistik der Bevölkerung und sagst plötzlich, hey, die Lebensweise macht gesund. True, ja. Genau. Und das eine Sache, die ich noch kurz erwähnen möchte auch bei Spirits Korrelations, häufig tritt es einfach auf, wenn man Populationen mischt. Also Population Mixing nennt man das auch im im Statistik- oder Machine Learning Kontext. Machen wir 'n einfaches Beispiel, die Korrelation zwischen der Menge der Barthaare, der Du hast, und der Körpergröße, der Du hast, ja? Wenn Du das bei Männern machst, dann wirst Du wahrscheinlich, also nur Männer machst, wirst Du wahrscheinlich keine besondere Korrelation finden und wenn Du's nur bei Frauen machst, auch nicht. Wenn Du jetzt aber alle Menschen nimmst, dann wirst Du plötzlich sehen, je mehr Barthaare jemand hat, desto größer ist der. Und das einfach nur mehr
Speaker0: Barthaare jemand hat, desto größer ist der. Und das einfach nur, weil Du Männer und Frauen gemischt hast. Das heißt, man sollte sich auf jeden Fall bewusst sein, woher die Daten kommen, die man benutzt und vor allem auch, wie die erhoben wurden. Weil wenn ich jetzt quasi weiß, okay gut, diese meine ganzen Daten, die ich da hab, das sind alles nur Männer oder nur Frauen, dann also jetzt speziell bei dem Beispiel mit den mit den Barthaaren,
Speaker2: dann sollt ich mir das auf jeden Fall im Hinterkopf behalten. Genau oder umgekehrt, wenn Du halt glaubst, da gibt's einfach verschiedene, wir hatten ja auch schon mal Thema Cluster. Wenn's da einfach verschiedene Cluster gibt und Du wirfst die in einen Topf, Ja. Dann kann das halt Konsequenzen haben. Man muss sich halt immer dann Gedanken machen darüber, was erwarte ich denn für Effekte da oder was kann's denn da geben?
Speaker0: Das ist eigentlich eine schöne Überleitung zum direkt nächsten Fehler, der oft gemacht wird und der vermutlich bei unserer Liste jetzt hier der Menschlichste ist. Mhm. Und das ist der. Ja. Kurz zur Definition, was das sein soll. Oft hat man als Mensch vielleicht so den den Irrglauben, dass man strikt rational denkt. Und das ist oft nicht so. Man man hat eine Vermutung oder man hat eine Tendenz, in die man geht und die will man oft auch einfach bewiesen haben. Und Ja. Unterbewusst agiert man dann dementsprechend oft, genau seine Vermutung zu beweisen. Und das kann dementsprechend auch zu falschen Ergebnissen führen, weil man einfach komplett geblendet ist von seiner eigenen Idee.
Speaker2: Mhm. Also was was ja jeder von euch wahrscheinlich kennt, ist, die Welt wird immer schlechter. Ja. Ja, also wenn man sich den Nachrichten schaut, dann denkt man, es wird ja echt alles nur immer schlimmer. Ja. Ja, in Wahrheit, wenn man so die typischen Metriken sich anschaut, Lebenserwartung, durchschnittliche Gesundheit et cetera pp, relative Gebotensterblichkeit und so was, das wird eigentlich alles besser. Aber es sieht so aus, als würde es schlechter, ja? Ja? Das ist halt, da ist der Bias darin, dass halt sich schlechte News besser verkaufen und die Verfügbarkeit auf der der Nachrichten, die die wird halt höher. Mhm. Und da da hat man das Gefühl, es passieren mehr schlimme Dinge als als letztes Jahr oder vorletztes Jahr. Und das ist einfach auch Sinne, der ist, ich glaube, die Welt wird schlechter, also suche ich mir auch die Nachrichten raus, die die Welt für schlechter erklären. Plus diese Nachrichten verkaufen sich auch noch besser und verbreiten sich besser. Ja, ich hab auch das Gefühl, dass man quasi als als, dass die Menschheit schon lange da so konditioniert wird über die Nachrichten.
Speaker0: Ja. Da kann man jetzt ohne groß darüber zu Nachricht reden wollen. Vielleicht doch son Ayhoo Die Nachricht. Aber dass dass es schon oft lächerlich wirkt, wenn jetzt an einem Tag ausschließlich gute Nachrichten kommen würden und man sich denkt so, hä, was ist denn jetzt hier los? Genau. Aber ja, wie ist es denn im Bereich Data Science, ne? Also da kann so was ja dann genauso gut vorkommen. Also angenommen, ich kann mir gut vorstellen, ich arbeite jetzt für jemanden, ja, und diese Person möchte ein gewisses Ergebnis geben. Absolut. Die möchte seine Prozesse irgendwie optimieren. Da können wir auch wieder so das Beispiel von vorhin, wenn wir uns den Medizinprofessor vorstellen, ja. Der Professor, der hat halt
Speaker2: der hat ja sein Forschungs seine Forschungsannahme, ein Gebiet, an dem er forscht, sondern er forscht darüber über den positiven Effekt von, denk ich mir mal was aus, von Vitamin C auf Alzheimer oder so was. Ja. Ja, und seine Studenten, die wollen ja auch happy machen, ja? Die wollen ja zu dem gehen und nicht angeschrien werden oder? Exact, ja. Das heißt, die die probieren halt Sachen raus und die Ergebnisse, die dagegensprechen, ja, die
Speaker1: versinken dann in deren Schublade. Ja. Und das eine, was dann vielleicht zufällig, und das war dann immer dann die Frage, ja, also zufällig positiv in Richtung der These entstanden ist,
Speaker2: das wird dann weitergereicht. Also das ist dann halt auch wieder wie bei diesem Reporting Bise. Denn der ist natürlich in Verbindung mit dem
Speaker0: besonders mächtig. Ja. Also auf jeden Fall aufpassen und sich ständig hinterfragen, ob das, was man da macht, auch wirklich so Sinn macht. Dann gehen wir weiter zu Nummer 3, auch sehr gängiges Ding. Das ist das sogenannte Overfitting. Wir haben's schon in vergangenen Folgen ein-, zweimal angesprochen. Dort hatten wir das immer betitelt als, glaub auch in der Folge zur Regression, als wenn man sich zu sehr an den Daten der Vergangenheit orientiert. Kannst Du kurz da erklären, was damit gemeint
Speaker2: ist? Ja. Ich erklär's mal grundsätzlich, aber dann bin ich auch neugierig. Ich glaub nämlich, Du kannst mir erklären, was da genau bei dieser US Bevölkerungsansprinzip ist. Genau, exakt, ja. Aber erst mal grundsätzlich, es ist, Also Daten sind ja immer auch irgendwie rauschbehaftet. Was heißt das? Was heißt rauschen? Rauschen heißt das, sind irgendwelche Effekte drin, die ich mir jetzt noch, die halt dann Einfluss hatten und die ich nicht aufm Schirm hab, ums mal total zu sagen, ja. Wenn wir so was also nehmen wie irgendwie Körpergröße von Männern und Barthaaren oder so was, Ja. Haben wir ja, da sind ja lauter Effekte drin, die wir jetzt nicht in Betracht ziehen. Das heißt, die diese die die Anzahl der Barthaare und ja und die Größe der der Männer, die wird ja einfach aus der Sicht von mir jetzt als Data Scientist stark mit Zufallseinflüssen unterliegen. Mhm. Und wenn ich jetzt versuche, diese Zufallseinflüsse alle zu erklären, ja? Also ich versuch quasi eine 1 Kurve durch etwas zu legen, was verrauscht ist, ja? Dann könnt ihr euch ja vorstellen, diese Kurve macht die wildesten Zickzackbewegungen. Ja. Und die Konsequenz daraus ist, dass, dieses Zickzack überhaupt abbilden zu können, muss diese Kurve wahnsinnig mathematisch komplex sein. Ja. Und macht dann vielleicht in den Bereichen, wo die Daten eine Lücke haben, die wildesten Sachen. Genau. Und das ist dann das klassische Overfitting Problem, ja. Ich ich ich orientier mich zu sehr an jedem Datenpunkt
Speaker0: und dafür zahl ich einfach einen hohen Preis an den Stellen, wo ich grad zufällig keine Daten hab. Ja. Und das passiert irgendwie aus 'ner recht logischen Motivation. So, ich will das meiste aus den Daten rausholen, aber das kann dann eben, wenn man sich zu sehr daran orientiert, auch schiefgehen. Und wie man es eben das auch in dem Beispiel aus dem Intro gesehen hat, was es da ging, werdet ihr auch noch im Jupiter Notebook sehen, der dazu dann später mehr. Man kann quasi die Daten nehmen, also der der die statistischen Erhebungen der Bevölkerung in den USA zum Beispiel. Und die waren eben im Jahr neunzehnhundertfuffzig bei hundertfuffzig Millionen, fuffzig Jahre später bei 280000000 und dazwischen gab's eben immer mal, ist es immer so stetig gestiegen. Und wenn ich jetzt da quasi eine möglichst gute Kurve durchlegen möchte, die weiteren Bevölkerungszahlen in den nächsten Jahren vorherzubestimmen, land ich eben bei 1 Kurve, die halt plötzlich abbricht, ja. Das hat jetzt keine kausalen Gründe, dass keine Ahnung, die Gesundheit der Gesundheitsstatus der Amerikaner so schlecht ist, sondern das hat rein mathematische Gründe, dass halt einfach die Kurve, die da optimal dran liegt, die stürzt halt dann ab direkt danach. War's 'n Polynom dann oder? Genau, das ist 'n Polynom richtig, ich glaub von grad irgendwie x hoch 4 oder so, keine Ahnung. Und es stürzt dann eben ab und ist dann und erwischt dann eben die x-Achse im Jahr 2050. Sprich, die Bevölkerung ist dann da 0, ne. Okay. Und das kann ja irgendwie nicht sein. Es sei denn, es kommt jetzt der Super GAU und irgendwelche politischen Aber den haben wir dann bestimmt nicht vorhergesehen aus den Zahlen in der Bevölkerung bis heute. Definitiv werden wird da keine politische Vorhersage draus zu ziehen sein. Aber ja, so was kann eben passieren und so absurd dieses Beispiel auch sein mag, wenn jetzt eben mal etwas zu tun hat oder einen Datensatz hat, der komplizierter ist und generell der Prozess, den man hat, komplizierter ist, dann kann einem so was auch entgehen, ja. Und es kann nicht so offensichtlich sein, warum da jetzt overfüttert wurde, ne. Ja, es ist nicht leicht zu erkennen
Speaker2: oder es gibt da auch kein so perfektes Allgemeinrezept. Ja. Wann bin ich im Underfitting und wann bin ich im Overfitting? Und das ist immer die Krux des Ganzen.
Speaker0: Dann gehen wir weiter zu Nummer 4. Da ist auch ein kleiner Callback zur letzten Folge dabei. Und zwar geht's hier irrelevante Daten, ja. Ah ja. Was geht schief, wenn man irrelevante Daten in Betracht zieht, ja? Wie gesagt, kurz letzte Folge hatten wir über Features Selection gesprochen.
Speaker2: Maxim, kannst Du dazu vielleicht was sagen? Was geht da schief? Was passiert da? Ja, also wenn ich meinen Daten Also man hat ja manchmal so diesen Impuls, ach, ich nehm doch alle Daten rein, ja? In da steckt doch immer Information drin. Oder schlimmstenfalls hat's halt keinen Wert, keinen zusätzlichen Wert. Wie 'n natürlicher Gedanke. Ja, ey. Genau, aber es kann doch nicht schlechter werden, wenn ich mehr Daten nehme. Ja, jein. Also die Sache ist halt die, Machine Learning Algorithmen basieren eigentlich immer irgendwie auf Distanzen, also im im mathematischen Sinn halt, eine Metrik, ja? Das heißt, ich ich ich beurteile irgend eine Interpolation oder sonst was danach, wie wie stark liegt die interpolierte Kurve entfernt vom Datenpunkt zum Beispiel, ja? Das ist eine Distanz, eine geometrische Distanz. Mhm. Und wenn ich jetzt meine wenn ich jetzt viele, viele Daten reinnehme, also ich mein viele viele viele verschiedene Parameter, ja? Also zusätzliche Parameter. Ich nehm zum Beispiel statt der Anzahl der Barthaare und der Körpergröße nehm ich jetzt noch irgendwie die Augenfarbe mit rein oder so was. Mhm. Und dann nehm ich noch, keine Ahnung, Musikgeschmack mit rein und und Pipapo, also immer mehr Parameter. Dann mache ich mein Problem höherdimensional im mathematischen Sinn. Ich hab mehr Dimensionen. Mehr Features sozusagen. Ja, genau. Mehr Features heißt mehr Dimensionen. Und für Distanzen in hoch in hohen Dimensionen ist irgendwie alles weit voneinander entfernt. Das wird dann immer binärer. Mhm. Und es wird dann immer schwieriger, mathematisch quasi sauber zu trennen, was ist jetzt Oder ein Kriterium zu finden, was ist jetzt noch nah und was ist fern? Und dadurch passiert's mir dann nachher sehr schnell, dass Strukturen komplett untergehen im im Rauschen der vermeintlich oder der Rauschen der eigentlich irrelevanten Daten, wo man sich dachte, der hat Schaden können die ja nicht, ja, doch sie können den Rest quasi, ja, in ihrem Rauschen untergehen lassen. Und deswegen ist es nicht immer das richtige Rezept, einfach mehr hilft mehr.
Speaker0: Ganz genau, also passt auf ihn überhaupt. Wir hatten auch schon in den Folgen mit dir, Maxim zu Clustering und Regression drüber geredet. Was passieren kann speziell bei Clustering, wenn einfach wenn ich einfach zu viele Dimensionen in Betracht ziehe, die Also Du hattest, glaub ich, damals das Beispiel mit der Spirale gebracht. Ja, genau. Ja. Und da, wenn ich wenn Du da 3, 4 Rauschdimensionen dazu packst, dann haut's dir halt komplett, machst packt's alles in ein Cluster, was eigentlich sich so ziemlich gehört. Dann ist sone filigrane Spiralstruktur
Speaker2: einfach nicht mehr an den Distanzen zu erkennen.
Speaker0: Dann kommen wir zu Nummer 5. Last, but not least ist eher ein zwischenmenschliches Problem als ein Problem des Computers tatsächlich. Und zwar haben wir das jetzt mal getauft, Explplaination Ads Mhm. Genau, ich ich setz dich jetzt mal in die Situation, Du bist supersmart und Du hast jetzt einen Kunden. Nee. Und jetzt musst Du wirklich gefallen lassen, jetzt kommt die Welt. Du hast jetzt einen Kunden und der kommt jetzt nicht direkt aus dem MINT Bereich, ja. Vielleicht Beispiel von dem von von dem aus der Folge Optimal Choice, ein Bäcker, sagen wir jetzt mal. Der hat hier ein Handwerk gelernt Und Du möchtest dir jetzt unterbreiten, was Du für eine tolle Analyse gemacht hast mit seinen Daten und wie er denn jetzt auf jeden Fall am Ende handeln soll. Jetzt fällt es dir vielleicht etwas schwer, das in Worte zu fassen, was da tatsächlich passiert, weil ihr eben aus verschiedenen Bereichen kommt. Ja, ich könnt's jetzt mathematisch erklären und dann sagt er ja Dankeschön und Exakt. Genau. Was soll ich jetzt machen? Ja, also wie kann man da quasi aufpassen, wenn man jetzt einen Kunden hat und man möchte dem sagen, nicht nur sagen, mach das und das, sondern er soll ja auch irgendwie verstehen, woher das kommt und was da für Prozesse ablaufen, die dazu führen, dass er jetzt eigentlich so handeln sollte und nicht wie zuvor? Also Ist das ein Problem oder ist Ja. Ja. Also
Speaker2: das ist immer 'n Problem. Also als Data Scientist hast Du ja vermutlich als Kunden keinen anderen Data Scientist, weil Genau. Warum hättest Du dich sonst engagiert? Also Du hast jemanden, der nicht diese Sprache spricht und dem musst Du das jetzt irgendwie näherbringen. Und es kann total passieren, dass da eben, ja, etwas ganz anderes ankommt. Und das ist gefährlich, einfach zu erklären und immer zu fragen, verstanden? Na, dann sagt der andere, ja. Der sagt, ja. Ja. Der sagt einfach, ja. Was dann aber wirklich angekommen ist, ist So lächelnd und winken so. Ja, also was dann angekommen ist, ist häufig nicht unbedingt das Differenzierte, was man versucht, da zu vermitteln und dann wird halt irgendwie eine eben genau sone Korrelation mit 'ner Kausalität verwechselt oder sonstige Sachen, was da helfen kann. Na ja, man man erklärt's jetzt erst mal nach besten besten Wissen und Gewissen und dann bittet man dem Gegenüber, das in den eigenen Worten wiederzugeben.
Speaker0: Mhm. Und
Speaker2: Also knallhart zu testen, ob das jetzt so angekommen ist. Ja, das das muss man natürlich dann so verkaufen, dass man sich selbst damit testet und nicht dieses Verständnis des Gegenübers. Das soll ja dem nicht in eine unangenehme Prüfungssituation bringen, Ja. Sondern muss man vielleicht irgendwie so verpacken, dass man den irgendwie dazu hinleitet, das noch mal selber wiederzugeben. Also Leute, die also gute Manager oder so was, die würden das wahrscheinlich sowieso versuchen, erst mal selber noch mal wiederzugeben. Und dann hat man die dann hat man die Gelegenheit, das so bisschen zu pingpong und zu schauen, bis bis sozusagen das, was man erklärt und das, was zurückkommt, dass man das beides für für einen selbst, der ja die Arbeit gemacht hat, noch akzeptabel ist.
Speaker0: Das ist ja auch einfach 'n grundsätzliches Problem, was nicht nur 'n Data Science auftritt, ne. Natürlich ist immer, wenn Du was Spezialisiertes und Genau. Also sobald zwischen, sobald's zwischen mehreren Stationen irgendwie kommuniziert wird und dann einfach immer nur die halbe Wahrheit mitgegeben wird, dann wird's schwierig. Mir fällt dir das Beispiel ein, und zwar John Oliver, sehr bekannter Late Night Show Host mit seiner Show last Week Tonight. Da gab's mal ein Beispiel, dass eine Studie scheinbar herausgefunden hat, dass, wenn man einmal Champagner pro Woche trinkt, dass es dann wirklich hervorragende Vorteile für die Gesundheit gibt und man sollte es auf jeden Fall tun, wenn man dazu in der Lage ist. Und das hat quasi die Nachrichtencrew so wiedergegeben und stellt sich heraus, John Oliver hat dann eben aufgedeckt, dass diese Studie an Ratten gemacht wurde, ja. Und das ist etwas, was halt diese Nachrichtensender unterschlagen hat. Und jetzt nicht jetzt vielleicht bewusst, vielleicht unbewusst, damit sie recht heraus, also damit's besser ankommt, weil sobald man sagt, ja, Ratten, also wenn ich Ratten einmal die Woche mit Champagner fütter, dann dann haben die auf jeden Fall eine gesundheitliche gesundheitliche Vorteile. Vielleicht. Vielleicht.
Speaker2: Wir haben ja noch die Effekte von vorher, ne? Genau, wie gesagt, ja. Das ist alles schön kumuliert.
Speaker0: Und genau, also das passiert auf jeden Fall überall und natürlich auch im Bereich Data Science. Mhm. Ja, bei Medizinstudien
Speaker2: und und Nachrichten, da ist das natürlich immer wahnsinnig schlimm, diese Ja. Das ist eine, es ist wie stille Post. Aber nicht nicht random stille Post, sondern stille Post mit dem, Du möchtest, dass dass es sich, dass es möglichst interessant klingt. Ja. Da könnt ihr euch mir mal vorstellen, ihr spielt stille stille Post und jeder hat den Anspruch, dass der andere das besonders erstaunlich findet, was der sagt und dann spielt mal eine Runde. Was dann rauskommt, also will ich gar nicht wissen, ja nicht gesagt. Und das ist natürlich bei Nachrichten dann immer noch mal ganz gefährlich.
Speaker0: Gut, Maxim. Dann jetzt zum Schluss, damit wir's noch mal kondensiert zusammen haben, kannst Du noch mal die 5 Dinge noch mal zusammenfassen,
Speaker2: die wir jetzt Okay, schau mal, ob ich's noch zusammen Wir hatten angefangen mit Spirous Correlations. Ja, also gut. Kurz gesagt, nur weil etwas korreliert, hängt das noch lange nicht zusammen, ja. Kann kann verschiedene Gründe haben, warum man den Korrelationskoeffizienten sieht. Mhm. Glaub, da hatten wir, ja. Also grundsätzlich, wir suchen nach dem, was wir glauben Mhm. Und legen das, was dem widerspricht vielleicht mal ad acta, wenn's nicht unumstößlich ist. Und bei Statistik ist ja selten was unumstößlich und deswegen kommen wir schnell in die Versuchung Ja. Nur die Dinge zu sammeln, die für unsere These sprechen. Und und wenn wir dann nur die gruppieren, dann ist es plötzlich unumstößlicher Beweis. Mhm. Und unumstößlicher
Speaker1: Beweis. Mhm.
Speaker2: Overfitting hatten wir. In Overfitting, ja, wenn ich versuche, jeden Datenpunkt zu erklären, dann mache ich damit die Allgemeinheit meines Modells in der Regel kaputt. Das heißt, ich muss 'n bisschen, ich darf nicht zu gierig sein. Ja. Dann hat mir die irrelevanten Daten, genau, also mit den, wenn ich was hochdimensionaler mache durch zu Hinzufügen von Features und oder Parametern, dann mache ich mir mein Leben schwerer und vielleicht geht genau das der interessante Effekt dann unter. Genau, und am Schluss hatten wir ja die stille Post, ja, bei Statistik leider sehr extrem ausgeprägt, weil also statistische Sachen korrekt zu interpretieren und korrekt bietet zu geben, ist auch für die Leute, die sich damit beschäftigen, nicht immer selbstverständlich. So funktionieren leider unsere Hirne nicht. Und dann muss man dann einfach wahnsinnig aufpassen, was aus der ursprünglich differenzierten Aussage nach 2, 3 Schritten geworden ist.
Speaker0: Super. Vielen Dank. Also Du hast auf jeden Fall Licht ins Dunkel gebracht, da bin ich davon bin ich überzeugt. Hoff ich. Und wenn ihr das nächste Mal also was an einem Datensatz machen wollt oder ihr eine Analyse machen wollt, dann behaltet das auf jeden Fall im Kopf. In den Shownotes findet ihr wieder eine Jupiter Notebook Datei, diesmal mit ein paar falschen Interpretationen oder zumindest ein paar Ergebnissen, die auf jeden Fall falsch anmuten. Und eure Aufgabe ist es dann quasi herauszufinden, was ist schief gegangen beziehungsweise wo ist etwas schief gegangen? Das dürft ihr uns dann auf jeden Fall schreiben. Wir freuen uns auf eure Korrekturen sozusagen. Und genau, dann bleibt noch zu sagen. Vielen Dank Maxim, dass Du wieder dabei warst. Sehr gerne. Und bis zum nächsten Mal.
Speaker1: Damit wir weiterhin für euch
Speaker0: hochwertigen Content produzieren und erstklassige Gäste einladen können, brauchen wir eure Unterstützung.
Speaker1: Lasst uns auf Apple Podcasts eine 5 Sterne Bewertung da und drückt am besten direkt den Follow Button, uns zu supporten und keine Folge mehr zu verpassen.
Speaker0: Bis zum nächsten Mal.