Startseite > Lexikon > Tracking & Analytics > Difference-in-Differences

Bleistiftskizze: Zwei Leitern an einer Wand, links ein Kletterer weiter oben, rechts einer tiefer, orange: der Höhenabstand dazwischen, als Bild für DiD
Tracking & Analytics

Difference-in-Differences

DiD

Nach der Kampagne stiegen die Verkäufe um 30 %. Nur: Beim Nachbarn ohne Kampagne stiegen sie um 25 %. Difference-in-Differences rechnet genau das heraus.

Auch bekannt alsDifferenz-von-DifferenzenDifferenz-in-DifferenzenDifference in Differences

5 Min

Lesezeit

22.11.2026

Letzte Aktualisierung

Was ist Difference-in-Differences?

Im Oktober startet deine Kampagne, im November verkaufst du mehr. War das die Kampagne oder das Weihnachtsgeschäft? Ein Vorher-nachher-Vergleich kann dir das nicht sagen. Difference-in-Differences nimmt deshalb eine zweite Gruppe dazu, die keine Kampagne hatte.

Der Name beschreibt die Rechnung. Du bildest zwei Differenzen: Wie stark hat sich die Testgruppe verändert? Wie stark die Vergleichsgruppe? Und dann die Differenz aus beiden. Was übrig bleibt, gilt als Wirkung. Auf Deutsch heißt das Differenz-von-Differenzen.

Das Praktische daran: Beide Gruppen dürfen auf verschiedenem Niveau starten. Hamburg verkauft mehr als Flensburg? Kein Problem. Die Vergleichsgruppe muss nur die Veränderung zeigen, die es auch ohne Kampagne gegeben hätte.

So rechnest du

Vier Zahlen genügen

DiD = (Test nachher − Test vorher) − (Vergleich nachher − Vergleich vorher)

Beispiel: Test von 200 auf 260 Bestellungen, Vergleich von 120 auf 150 → DiD = 60 − 30 = 30 Bestellungen

Ohne Vergleich hättest du dir 60 Bestellungen gutgeschrieben. Die Hälfte davon wäre vermutlich auch so gekommen. Sind die Gruppen sehr verschieden groß, rechne lieber mit prozentualen Veränderungen: hier 30 % gegen 25 %, bleiben nur 5 Prozentpunkte.

In Statistik-Programmen steckt dieselbe Rechnung in einer Regression. Der Koeffizient, der „Zeit“ mit „Maßnahme“ multipliziert, ist der Effekt. Der Vorteil: Du bekommst gleich die Unsicherheit dazu.

Die wichtigste Annahme: parallele Trends

Alles hängt an einem Satz: Ohne die Maßnahme hätten sich beide Gruppen gleich entwickelt. Beweisen lässt sich das nie, denn diese Welt gab es nicht. Plausibel machen kannst du es. Die Weltbank nennt in ihrem Handbuch vier Prüfungen:

  • Verläufe vorher: Liefen beide Kurven vor dem Start parallel? Dafür brauchst du mindestens zwei Messpunkte davor.
  • Falsche Testgruppe: Rechne mit einer Gruppe, die nie etwas bekam. Es sollte null herauskommen.
  • Falsche Zielgröße: Nimm eine Zahl, die die Kampagne nicht beeinflussen kann.
  • Zweite Vergleichsgruppe: Kommt ungefähr dasselbe heraus?

Beispiele aus der Praxis

Fall A · Suchanzeigen

eBay schaltet Markenanzeigen ab

−5,6 %

Klicks, vorher-nachher

−0,5 %

Klicks, DiD

99,5 % der Klicks kamen trotzdem

Test auf MSN ab März 2012. Google, wo die Anzeigen weiterliefen, und Yahoo dienten als Vergleich.

Fall B · Mindestlohn

New Jersey gegen Pennsylvania

+0,59

Stellen je Lokal, New Jersey

−2,16

Stellen je Lokal, Pennsylvania

DiD = +2,76 Vollzeitstellen

Card und Krueger 1994, 410 Fast-Food-Lokale. New Jersey hob den Mindestlohn von 4,25 auf 5,05 $.

Fall A ist das schönste Argument für die Methode. Der reine Vorher-nachher-Vergleich hätte zehnmal so viel Wirkung gezeigt. Der größte Teil war schlicht Saison. Fall B ist berühmt und umstritten: Eine Gegenstudie mit Lohnlisten fand 1995 einen Rückgang um 4,6 %. Die Rechnung war dieselbe, die Daten nicht.

Und noch ein Befund von eBay: Als die Firma ihre allgemeinen Suchanzeigen in rund 30 % der Regionen abschaltete, fiel der den Klicks zugeordnete Umsatz dort um über 72 %. Der Gesamtumsatz änderte sich kaum. Was ein Attributionsbericht zuordnet, ist eben noch keine Wirkung. Übertrag das aber nicht auf dich: eBay kannte 2012 in den USA jeder.

Häufige Fehler

Fehler 1 · Die Testregion nach Problem aussuchen

Du wirbst dort, wo es gerade schlecht lief? Dann erholen sich die Zahlen oft von selbst. Das sieht aus wie Wirkung.

Fehler 2 · Sonderereignisse übersehen

Neue Filiale, Streik, Stadtfest: Passiert etwas nur in einer Gruppe, landet es im Ergebnis. Führ ein kleines Tagebuch.

Fehler 3 · Nachbarn vergleichen

In Philadelphia sank nach einer Limosteuer der Absatz um 46 %. Doch mehr als die Hälfte davon holten die Leute im Umland nach, netto blieben 22 %. Wer das Umland als Vergleich nimmt, zählt die Wanderung doppelt.

Fehler 4 · Tageswerte für unabhängig halten

Montag hängt mit Dienstag zusammen. Ignorierst du das, wirkt fast alles signifikant. Forscher fanden bei frei erfundenen Gesetzen in bis zu 45 % der Fälle einen „Effekt“. Fass die Tage zu Vorher und Nachher zusammen.

So setzt du es um

  • Zielgröße festlegen: Umsatz, Anfragen oder Besuche je Region, vor dem Start.
  • Vergleich suchen: eine Region oder Produktgruppe, deren Kurve bisher parallel lief.
  • Lang genug messen: mehrere Wochen vorher, mindestens einen Kaufzyklus nachher.
  • Rechnen: Für vier Zahlen reicht eine Tabelle. Für mehr gibt es R und Python.

Häufige Fragen

Was bedeutet die Annahme paralleler Trends?

Beide Gruppen hätten sich ohne die Maßnahme gleich entwickelt. Sie müssen nicht gleich hoch liegen, nur gleich verlaufen. Ist das nicht plausibel, taugt das Ergebnis nichts.

Kann man parallele Trends testen?

Nicht beweisen, nur prüfen. Du schaust dir die Verläufe vor dem Start an und rechnest Placebo-Vergleiche. Ein bestandener Vortest ist ein gutes Zeichen, aber keine Garantie.

Was unterscheidet Difference-in-Differences vom A/B-Test?

Beim A/B-Test teilt der Zufall die Gruppen auf, deshalb sind sie vergleichbar. Difference-in-Differences kommt ohne Zufall aus und braucht dafür die Annahme paralleler Trends.

Wie viele Messpunkte brauche ich?

Für die Rechnung zwei: einen vorher, einen nachher. Willst du prüfen, ob die Trends parallel liefen, brauchst du mindestens drei, zwei davon vor dem Start. Mehr ist besser.

Was ist der Unterschied zu Synthetic Control?

Difference-in-Differences vergleicht mit einer echten Gruppe. Synthetic Control baut sich aus mehreren Gruppen einen künstlichen Zwilling. Das hilft, wenn keine einzelne Region passt.

Begriff teilenHat dir die Definition geholfen? Schick sie weiter.