Prinzipielles Vorgehen der Mathematischen Statistik

Wäre die Altersverteilung in der Grundgesamtheit bekannt, könnten mit Formeln der Wahrscheinlichkeitstheorie Wahrscheinlichkeiten für die innerhalb von Stichproben beobachtbaren Altersverteilungen berechnet werden, die aufgrund der Zufallsauswahl der Stichproben zufälligen Schwankungen unterworfen sind. In der mathematischen Statistik nutzt man solche Berechnungen, um umgekehrt vom Stichprobenergebnis auf die Grundgesamtheit schlussfolgern zu können: Dabei werden auf Basis der konkret für eine Stichprobe beobachteten Merkmalswerte jene Häufigkeitsverteilungen innerhalb der Grundgesamtheit charakterisiert, mit denen das gemachte Beobachtungsergebnis in plausibler Weise erklärbar wird. Im Blickpunkt theoretischer Untersuchungen steht dabei nicht nur, welche Schlussfolgerung mit einem gemachten Beobachtungsergebnis legitimiert werden kann, sondern auch Abschätzungen darüber, wie numerisch genau und wie sicher die Richtigkeit der Schlussfolgerung, auch Inferenz genannt, ist. Man spricht daher auch von statistischer Inferenz.

Die einen Anwender interessierenden Häufigkeitsverteilungen sind nur indirekt Gegenstand der Methoden der mathematischen Statistik. Stattdessen beziehen sich diese Methoden auf Zufallsvariablen. Dabei werden insbesondere solche Zufallsvariablen betrachtet, deren Wahrscheinlichkeitsverteilung den relativen Häufigkeiten der Merkmalswerte entspricht. Speziell für das angeführte Beispiel der Altersverteilung ist ein realisierter Wert der Zufallsvariablen gleich dem Alter eines zufällig ausgewählten Deutschen. Auf diese Weise können die einer Stichprobe ermittelten Beobachtungswerte als sogenannte Realisierungen unabhängig und identisch verteilter Zufallsvariablen aufgefasst werden. Das Vorwissen wird in diesem Fall repräsentiert durch eine Familie von Wahrscheinlichkeitsverteilungen beziehungsweise durch eine entsprechende Familie von Wahrscheinlichkeitsmaßen oder sie charakterisierende Parameter. Man spricht von einer Verteilungsannahme. Diese kann sowohl Aussagen über mögliche Merkmalswerte, etwa in Bezug auf deren Ganzzahligkeit, als auch über den Typ der Verteilung, zum Beispiel „die Werte sind normalverteilt“, beinhalten. In dieser Interpretation liefert eine statistische Methode eine Aussage über diejenigen Parameter der Verteilungsannahme, die eine plausible Erklärung für das gemachte Beobachtungsergebnis darstellen.

Werden im Rahmen der Untersuchung einer „verbundenen“ Stichprobe mehrere numerische Merkmalswerte der Stichprobenmitglieder erhoben, können diese durch eine Zufallsvariable mit vektoriellen Werten, also mit Werten in einem ${\displaystyle n}$-dimensionalen reellen Vektorraum ${\displaystyle \mathbb {R} ^{n}}$, repräsentiert werden. Auch in solchen Fällen lässt sich die Verteilungsannahme oft, wie zum Beispiel im Fall einer mehrdimensionalen Normalverteilung, durch wenige Parameter vollständig charakterisieren.

Schätztheorie

Das zentrale Gebiet der mathematischen Statistik ist die Schätztheorie. In ihr werden Schätzverfahren für unbekannte Parameter der Grundgesamtheit entwickelt. Mathematisch entsprechen solche Schätzformeln Funktionen, deren Werte aus den Beobachtungsergebnissen der Stichprobe berechnet werden. Man spricht daher allgemein von einer Stichprobenfunktion, die im speziellen Fall einer bezweckten Parameterschätzung Schätzfunktion genannt wird.

Gegenstand der Schätztheorie ist es, ausgehend von der Verteilungsannahme bestimmte Klassen von Schätzfunktionen zu untersuchen und hinsichtlich Plausibilität (Maximum-Likelihood-Methode) oder verschiedener Qualitätskriterien (wie Suffizienz oder Effizienz) zu vergleichen.

Soll zum Beispiel die durchschnittliche Körpergröße erwachsener Frauen in Deutschland mittels einer Stichprobe geschätzt werden, ist die Annahme einer Normalverteilung mit den beiden unbekannten Parametern Erwartungswert und Varianz plausibel. Auf dieser Grundlage können für eine beliebige Schätzfunktion, abhängig von den beiden unbekannten Parametern, die möglichen Fehlerwerte samt der zugehörigen Wahrscheinlichkeiten auf ihre Eigenschaften hin untersucht werden. Eine wichtige Eigenschaft ist dabei die Erwartungstreue der Schätzfunktion. Sie ist erfüllt, wenn der Erwartungswert der Schätzfunktion gleich dem gesuchten Wert ist. Für das Beispiel des gesuchten Erwartungswertes liefert der Mittelwert der Stichprobenergebnisse eine erwartungstreue Schätzfunktion.

Außer Schätzfunktionen in Form einer einwertigen Näherung eines gesuchten Parameters haben sich auch Bereichsschätzungen in Form eines sogenannten Konfidenzintervalls bewährt. Dabei liefert die Schätzfunktion mit hoher Wahrscheinlichkeit ein Intervall, das den gesuchten, aber unbekannten Parameter einschließt.

Hypothesentest

Konkrete Vermutungen über die Grundgesamtheit können durch geeignete statistische Tests überprüft werden. Dabei wird ausgehend von einer Hypothese auf Basis des Stichprobenergebnisses eine 0-1-Entscheidung über die Verwerfung beziehungsweise Beibehaltung der Hypothese herbeigeführt.

Qualitätskriterien eines Hypothesentests sind niedrige Wahrscheinlichkeiten für falsche Test-Entscheidungen, primär für die Verwerfung einer in Wirklichkeit richtigen Hypothese (Fehler 1. Art) und in zweiter Linie für die Nicht-Verwerfung einer in Wirklichkeit falschen Hypothese (Fehler 2. Art).

Eine zentrale Rolle beim Design eines Hypothesentests spielen sogenannte Prüfgrößen, auch Testgrößen oder Teststatistiken genannt. Auch bei ihnen handelt es sich um Stichprobenfunktionen, d. h. ihre Werte werden aus den innerhalb der Stichprobe ermittelten Beobachtungsergebnissen berechnet. Die Interpretation der Prüfgrößenwerte erfolgt mittels eines Verwerfungsbereichs, der abhängig von der Vorgabe einer tolerierten Höchstwahrscheinlichkeit für einen Fehler 1. Art, Signifikanzniveau genannt, gewählt werden muss. Dabei wird die Hypothese genau dann verworfen, wenn der aus der Stichprobe berechnete Prüfgrößenwert im Verwerfungsbereich liegt.

In bestimmten Situationen benötigen Hypothesentests keine Verteilungsannahme. Möglich ist dies insbesondere in Fällen, in denen nicht Parameter einer Verteilung, sondern nur Ränge von Daten Gegenstand der Hypothese sind, zum Beispiel wenn getestet werden soll, ob der Median einer in der untersuchten Grundgesamtheit beobachtbaren Größe einen bestimmten Wert überschreitet. Solche Hypothesentests und die ihnen zugrundeliegenden Modelle werden in der nichtparametrischen Statistik untersucht.

Methoden zur Kausalergründung

Für die Analyse von kausalen Einflüssen zwischen den Merkmalswerten einer verbundenen Stichprobe gibt es verschiedene Modelle und darauf aufbauende Methoden wie die Regressionsanalyse und die Varianzanalyse.

Bei der Untersuchung verschiedener Stichproben ist die Prüfung auf übereinstimmende Verteilungen im Rahmen eines Homogenitätstests möglich.

Statistische Auswahlverfahren

Zur mathematischen Statistik gehören auch die Theorien statistischer Auswahlverfahren sowie der optimalen Versuchs- und Erhebungsplanung.

Bayessche Statistik

Eine Sonderrolle kommt der Bayesschen Statistik zu, weil ihre Verfahren auf einer anderen Interpretation des mathematisch-formalen Wahrscheinlichkeitsbegriffs beruhen. Dabei werden Wahrscheinlichkeiten nicht frequentistisch, sondern im Sinne der Sicherheit in der persönlichen Einschätzung eines Sachverhaltes interpretiert (siehe Bayesscher Wahrscheinlichkeitsbegriff).

Statistisches Modell

Eine gänzliche Formalisierung von statistischen Fragestellungen auf Basis mathematischer Objekte wird mit dem Begriff des statistischen Modells erzielt, oft auch als statistischer Raum bezeichnet. Abweichend vom bisher beschriebenen, eher anwendungsorientierten Szenario kann dabei auf die Festlegung einer Grundgesamtheit verzichtet werden:

Die möglichen Stichprobenergebnisse ${\displaystyle x}$ werden zu einer Menge ${\displaystyle {\mathcal {X}}}$, dem Stichprobenraum, zusammengefasst. Die darin beobachtbaren Ereignisse werden formal durch eine zum Stichprobenraum ${\displaystyle {\mathcal {X}}}$ definierte σ-Algebra ${\displaystyle {\mathcal {F}}}$ charakterisiert. Die Verteilungsannahme, das heißt die in Frage kommenden Wahrscheinlichkeitsverteilungen, entsprechen einer Familie ${\displaystyle (P_{\vartheta })_{\vartheta \in \Theta }}$ von Wahrscheinlichkeitsmaßen auf ${\displaystyle ({\mathcal {X}},{\mathcal {F}})}$. Ein statistisches Modell ist damit formal ein Tripel ${\displaystyle ({\mathcal {X}},{\mathcal {F}},P_{\vartheta }\colon \vartheta \in \Theta )}$. Ist ${\displaystyle \vartheta }$ ein reeller Parametervektor, also ${\displaystyle \Theta \subseteq \mathbb {R} ^{d}}$, so spricht man von einem parametrischen Modell mit Parameterraum ${\displaystyle \Theta }$. Den Fall ${\displaystyle d=1}$ eines reellen Parameters nennt man einparametriges Modell.

Eine messbare Funktion ${\displaystyle S}$ von ${\displaystyle ({\mathcal {X}},{\mathcal {F}})}$ in einem weiteren Messraum ${\displaystyle ({\mathcal {S}},\Sigma )}$ heißt Stichprobenfunktion oder Statistik. Eine Schätzfunktion oder kurz ein Schätzer für eine Kenngröße ${\displaystyle \tau (\vartheta )\in {\mathcal {S}}}$ des Parameters ist eine Stichprobenfunktion ${\displaystyle T\colon {\mathcal {X}}\to {\mathcal {S}}}$.

Mathematische Grundlagen

Die Grundlage der Mathematischen Statistik ist die Wahrscheinlichkeitsrechnung. Allerdings wurden einige Inhalte und Begriffe der Wahrscheinlichkeitsrechnung historisch erst durch statistische Anwendungen motiviert. Dazu gehören insbesondere die sogenannten Testverteilungen, d. h. die Wahrscheinlichkeitsverteilungen zu Prüfgrößen bei Hypothesentests. Neben den Wahrscheinlichkeitsverteilungen zu nicht parametrischen Tests zu nennen sind

• die Studentsche t-Verteilung,
• die Chi-Quadrat-Verteilung und
• die F-Verteilung,

wobei die ersten beiden Verteilungen jeweils mit einer Anzahl von Freiheitsgraden und die F-Verteilung durch zwei Anzahlen von Freiheitsgraden parametrisiert sind.