U ovom blog postu ispitujemo pouzdanost i ograničenja metode razlike u razlikama, koja se široko koristi za procjenu učinaka politika u situacijama u kojima je teško provesti eksperimente.
U ekonomiji postoje mnogi slučajevi u kojima se učinci politike moraju procijeniti kako bi se olakšale rasprave o politici temeljene na dokazima. Taj je proces ključan za rješavanje društvenih i ekonomskih pitanja i dokazivanje valjanosti politika. Posebno je bitno jasno utvrditi je li uvođenje ekonomske politike ili socijalnog programa zapravo dalo pozitivne učinke ili je uzrokovalo neželjene nuspojave. Procjena učinka politike uključuje usporedbu ishoda nakon što je politika provedena s ishodima koji bi se dogodili da politika nije provedena. Ova usporedba služi kao bitna informacija kreatorima politika, informirajući buduće oblikovanje politika i u konačnici doprinoseći poboljšanju ukupne društvene dobrobiti.
Međutim, budući da se hipotetski ishodi ne mogu promatrati, učinak događaja procjenjuje se usporedbom ishoda tretirane skupine - sastavljene od uzoraka koji su doživjeli događaj - s ishodima kontrolne skupine - sastavljene od uzoraka koji nisu doživjeli događaj. Sastav kontrolne i tretirane skupine ključni je čimbenik koji određuje točnost procjene. Ako se dvije skupine razlikuju u čimbenicima osim samog događaja, te razlike mogu iskriviti rezultate procjene. Stoga je ključ ovog procesa formiranje dviju skupina za koje ne postoji razlog da se rezultati razlikuju osim samog događaja. Na primjer, prilikom procjene učinka događaja na plaće, skupine bi trebale biti formirane tako da bi, u odsutnosti događaja, prosječne plaće tretirane skupine i usporedne skupine nužno bile iste. Da bi se to postiglo, idealan je eksperimentalni dizajn u kojem se uzorci nasumično dodjeljuju dvjema skupinama. Međutim, ova metoda često nije primjenjiva kada se radi o ljudskim subjektima ili društvenim pitanjima.
Zbog tih poteškoća, kvazi-eksperimentalne metode se često koriste u situacijama gdje se eksperimentalne metode ne mogu primijeniti. Metoda razlike u razlikama (DID) je široko korištena tehnika među ovim kvazi-eksperimentalnim metodama. Metoda razlike u razlikama (DID) procjenjuje učinak događaja oduzimanjem promjene uočene u usporednoj skupini od promjene uočene u skupini za tretman. Ova evaluacija temelji se na pretpostavci paralelnih trendova, koja pretpostavlja da bi se čak i u odsutnosti događaja dogodila promjena iste veličine u skupini za tretman kao i u usporednoj skupini. Ako ova pretpostavka vrijedi, nije potrebno osigurati da su uvjeti prije događaja u dvjema skupinama, u prosjeku, isti.
Korisnost metode razlike u razlikama prepoznata je ne samo u ekonomiji već i u raznim društvenim znanostima. Promatrajući njezino povijesno podrijetlo, poznato je da je John Snow prvi put upotrijebio ovu metodu 1854. godine. Usredotočio se na stanovnike istog područja Londona koji su dobivali vodu od dvije različite tvrtke za vodoopskrbu. Od dvije tvrtke koje su koristile isti izvor vode, samo je jedna promijenila izvor, no stanovnici nisu znali koja im tvrtka opskrbljuje vodom. 'John Snow' usporedio je promjene u stopama smrtnosti od kolere prije i nakon promjene izvora vode među stanovnicima čiji se izvor promijenio i onima čiji se nije, te je zaključio da se kolera prenosi vodom, a ne zrakom. To pokazuje da metoda razlike u razlikama može poslužiti kao moćan alat ne samo u ekonomskoj analizi već i u drugim područjima poput javnog zdravstva. U ekonomiji je ova metoda prvi put korištena 1910-ih za procjenu učinaka uvođenja zakona o minimalnoj plaći.
Međutim, pri korištenju metode razlike u razlikama bitno je provjeriti je li zadovoljena temeljna pretpostavka o paralelnim trendovima. Ako pretpostavka o paralelnim trendovima nije ispunjena, primjena metode razlike u razlikama dovest će do netočne procjene učinka tretmana. Na primjer, pri procjeni učinka programa osposobljavanja radnika na povećanje zaposlenosti, pretpostavka o paralelnim trendovima neće vrijediti ako je udio radnika u industrijama koje doživljavaju brze gubitke radnih mjesta veći u skupini za tretman nego u kontrolnoj skupini. Međutim, jednostavno određivanje intervencijske skupine iz razdoblja prije događaja kao usporedne skupine radi povećanja statističke sličnosti uzoraka između skupina ne jamči da je pretpostavka o paralelnim trendovima ispunjena. To je zato što za promjene osjetljive na ekonomske fluktuacije - poput zaposlenosti - istovremenost promjena može biti važnija za zadovoljavanje ove pretpostavke od statističke sličnosti uzoraka između skupina.
Kako bi primjena metode razlike u razlikama bila pouzdanija, važno je da istraživači konstruiraju više usporednih skupina i provjere jesu li rezultati evaluacije dobiveni primjenom metode na svaku skupinu konzistentni. Ove metode mogu poboljšati pouzdanost evaluacija korištenjem metode razlike u razlikama. Nadalje, konstruiranje usporednih skupina koje pokazuju visoku statističku sličnost s tretiranom skupinom u različitim karakteristikama može smanjiti vjerojatnost kršenja pretpostavke o paralelnim trendovima. Važnost ovih metoda posebno je istaknuta u istraživanjima u društvenim znanostima, gdje je eksperimentalne metode teško primijeniti.
Metoda razlike u razlikama snažan je analitički alat koji se može koristiti u raznim područjima, uključujući procjenu utjecaja politika, procjenu strategije korporativnog upravljanja i analizu učinkovitosti obrazovnih programa. Međutim, prije primjene važno je pažljivo ispitati valjanost pretpostavke o paralelnim trendovima i, ako je potrebno, koristiti je zajedno s drugim komplementarnim metodama.
