Evidens utan teori?

Det är i ropet att förespråka evidensbaserad politik. Det är förstås utmärkt att vilja utgå från fakta, inte minst om konsekvenserna av olika åtgärder, innan viktiga beslut fattas. Men det finns måhända en något naiv tilltro till empirisk evidens, och på senare tid har ett par intressanta varningar framförts.

Den första – ”Purely Evidence-Based Policy Doesn’t Exist” – ges av Lars Peter Hansen, känd för att ha utvecklat ekonometrins verktyg, som förvisso är användbara för framtagandet av evidens. Men Hansen varnar för att det ofta inte går att ta fram säker evidens med de data och metoder som finns och att det det krävs teoretiska modeller (även om de också är imperfekta) för att vägleda och tolka empiriska resultat. Bl.a. skriver han:

While experimental evidence of various guises is available, unlike many of our colleagues in the physical and biological sciences, macroeconomists are limited in terms of the types of experiments we can run. Other sources of evidence can be helpful, including those captured in aggregate time series and in microeconomic cross sections. But for important policy-relevant questions, to use this evidence in meaningful ways requires conceptual frameworks or models. We are often interested in assessing alternative policies for which the information in the existing data may be quite limited. The evidence, economic data, tells us to some degree what happened in the economy as a result of a set of conditions; models are what allow us to compare what happened with what would have happened under a different set of conditions, including, of course, different policies. Without the framework to enable that comparison, the data are descriptive, perhaps, but not nearly as useful. Thus, the models are in essence tools that allow us to explore better hypothetical changes in the underlying economic environment. The choice of model is a vital input into the analysis and can have a big impact on the policy implications.

Han citerar också en annan Ekonomipristagare, F. A. Hayek, om vår begränsade kunskap.

Den andra varningen – ”A Problem in Theory” – ges av Michael Muthukrishna och Joseph Henrich och knyter an till replikationskrisen i experimentella vetenskaper:

The replication crisis facing the psychological sciences is widely regarded as rooted in methodological or statistical shortcomings. We argue that a large part of the problem is the lack of a cumulative theoretical framework or frameworks. Without an overarching theoretical framework that generates hypotheses across diverse domains, empirical programs spawn and grow from personal intuitions and culturally biased folk theories. By providing ways to develop clear predictions, including through the use of formal modelling, theoretical frameworks set expectations that determine whether a new finding is confirmatory, nicely integrating with existing lines of research, or surprising, and therefore requiring further replication and scrutiny. Such frameworks also prioritize certain research foci, motivate the use diverse empirical approaches and, often, provide a natural means to integrate across the sciences. Thus, overarching theoretical frameworks pave the way toward a more general theory of human behaviour.

Under mina doktorandstudier i nationalekonomi stod teorin i centrum – den ansågs vara riktig vetenskap. Sedan kom beteendeekonomin och den experimentella ekonomin, liksom starka datorer och stora datamängder, och empirin kom att stå i centrum. Nu tycks en syntes vara på gång – som förvisso har omfattats av många hela tiden men som inte har dominerat det vetenskapsmetodologiska synsättet – nämligen att båda delarna behövs. Men som Hayek varnade för sin prisföreläsning, ”The Pretence of Knowledge”, behövs alltid, även med goda teorier och goda empiriska metoder och data, epistemisk ödmjukhet:

If man is not to do more harm than good in his efforts to improve the social order, he will have to learn that in this, as in all other fields where essential complexity of an organized kind prevails, he cannot acquire the full knowledge which would make mastery of the events possible.