Dass #OpenScience einmal im Koalitionsvertrag einer deutschen Bundesregierung stehen würde, hätte ich nicht gedacht.
Ein Vorschlag zur Umsetzung: Wir WissenschaftlerInnen evaluieren den Erfolg all der neuen Ampel-Gesetze mit pre-registered adversarial collaborations. Das heißt...
die Vielfalt und Gegensätzlichkeit an Grundüberzeugungen, die es auch Wissenschaft gibt, produktiv zu nutzen.
Jetzt ist es doch oft so, dass wirtschaftsnahe, gewerkschaftsnahe, verbrauchernahe Institute in ihren Studien oft das herausfinden, was sie schon immer richtig hielten.
Führen 12€ Mindestlohn zu höherer Arbeitslosigkeit?
Diese und andere Fragen können wir untersuchen ohne dass die Ergebnisse von den Interessen und Ansichten der Beteiligten gefärbt sind.
WissenschaftlerInnen von @boeckler_de, @insm oä könnten sich zusammentun und *vor* Inkrafttreten des Gesetzes einigen wie diese Frage untersucht wird und nach welchen Kriterien mögliche Ergebnisse beurteilt werden.
Bevor diese Ergebnisse vorliegen.
Wir wissen, dass auch kleine Details der Analysestrategie die resultierenden Befunde beeinflussen. Im besten Fall legen alle Beteiligten also bereits vor Zugriff auf Daten so weit wie möglich auch kleinste Details bis zum Statistikcode fest.
Genau ein solches Vorhaben führen wir gerade zur Frage durch, ob die Meinungsfreiheit an deutschen Universitäten bedroht ist.
ForscherInnen unterschiedlicher ideologischer, methodischer Hintergründe arbeiten am einem gemeinsam Forschungsdesign. osf.io/preprints/meta…
Und am Ende soll eine Einigung stehen:
Wir wissen nicht, was die Daten uns sagen werden, aber wir haben ein Prozess gefunden mit dem neue Daten unsere ursprünglichen, gegensätzlichen Ansichten überprüfen - entweder widerlegen oder unterstützen.
Ein solches Modell könnte und sollte Schule machen gerade in der Politikevaluation.
Denn gerade hier wollen wir uns darauf verlassen können, dass wir von wissenschaftlicher Evidenz wirklich lernen können.
• • •
Missing some Tweet in this thread? You can try to
force a refresh
Is freedom of speech under threat on university campuses?
Excited to announce this project:
➡️Preregistered adversarial collaboration
➡️Skeptics & proponents with diverging perspectives come together to devise a joint research design
Please participate&RT. doi.org/10.31219/osf.i…
This project takes up a study by Revers / Traunmüller based on a survey among students at a German university.
The study claims to have found evidence for widespread support for restricting free speech on campus link.springer.com/article/10.100…
Twitterverse and printed media discussed the study quite a bit.
Criticism concerned issues of study design and item wording as well as the normative framing of the results. taz.de/Studie-zu-Canc…
What can you do when an experiment yields null results?
I developed a theory to explain why (some) people derive pleasure from political engagement
14 out of 15 predictions failed
▶️A step-wise process to maximize the informational value of null results doi.org/10.1017/pls.20…
The need-based theory of political motivation in a nutshell:
Building on the ‘Pleasure Principle’, I suspect that people will seek behaviors that made them feel good in the past.
Citizens will therefore seek political engagement when it previously made them feel good.
To understand what actions provide pleasure, I built on the concept of basic psychological needs.
Differences in intrinsic political motivation are theorized to reflect whether political engagement was previously experienced as satisfying basic psychological needs.
After Hansen&Treul reported evidence for a substantive finding in a JOP article, Saraceno reproduced the analysis and found inconsistent evidence for different model specifications.
The journal then invited all three authors to team up and work together to check the robustness.
The newly minted team decided that multiple analytical choices are reasonable for six variables, leading in combination to 288 possible models with reasonable analytical specifications.
WOW 😍
Boba appears a huge leap towards transparent sensitivity analyses in empirical research
▶️easy multiverse analyses
▶️generates code for all reasonable analytical paths
▶️software-independent (R, Python...)
▶️amazing #dataviz arxiv.org/abs/2007.05551
You will write your syntax and specify where two or more analytical choices are reasonable.
Boba will generate the code for all combinations of reasonable choices for you.
Boba is a domain-specific language (and a visual analysis system) so it works software-independent for #Rstats, #Python etc...
Regression analysis with observational data remains the primary analytical method in political science.
However, we will never know whether we controlled for all unobserved confounders.
New sensitivity tools help to assess how likely results are robust to missing controls.
The robustness value (@analisereal,@chadhazlett) applies to multivar. regressions: It is the minimum strength of association that unobserved confounding would need to have, both with the treatment and with the outcome, to change the research conclusions.
V-DEM, potentially the most comprehensive measure on the state of democracy, has published a new report, and the results are staggering.
▶️Hungary is no longer considered a democracy
▶️India is close, too
▶️Now, the majority of people worldwide live in autocracies
(thread)
It is a prime example of how to communicate complex data on important questions:
Accessible language combined with intuitive graphs that help to convey clear messages.
I'll copy key graphs and phrases while reading along.
Assessing "the state of democracy" is hard because the concept is complex and controversial.
But even if conceptual questions were settled, collecting all necessary measures to assess how democratic a country is is a huge undertaking.