Publikation: Reproducibility in Management Science
Stammdaten
Titel: | Reproducibility in Management Science |
Untertitel: | |
Kurzfassung: | With the help of more than 700 reviewers, we assess the reproducibility of nearly 500 articles published in the journal Management Science before and after the introduction of a new Data and Code Disclosure policy in 2019. When considering only articles for which data accessibility and hardware and software requirements were not an obstacle for reviewers, the results of more than 95% of articles under the new disclosure policy could be fully or largely computationally reproduced. However, for 29% of articles, at least part of the data set was not accessible to the reviewer. Considering all articles in our sample reduces the share of reproduced articles to 68%. These figures represent a significant increase compared with the period before the introduction of the disclosure policy, where only 12% of articles voluntarily provided replication materials, of which 55% could be (largely) reproduced. Substantial heterogeneity in reproducibility rates across different fields is mainly driven by differences in data set accessibility. Other reasons for unsuccessful reproduction attempts include missing code, unresolvable code errors, weak or missing documentation, and software and hardware requirements and code complexity. Our findings highlight the importance of journal code and data disclosure policies and suggest potential avenues for enhancing their effectiveness. |
Schlagworte: | reproducibility, replication, crowd science |
Publikationstyp: | Beitrag in Zeitschrift (Autorenschaft) |
Erscheinungsdatum: | 22.12.2023 (Online) |
Erschienen in: |
Management Science
Management Science
(
Institute for Operations Research and the Management Science (INFORMS);
)
zur Publikation |
Titel der Serie: | - |
Bandnummer: | - |
Heftnummer: | - |
Erstveröffentlichung: | Ja |
Version: | - |
Seite: | S. 1 - 14 |
Versionen
Keine Version vorhanden |
Erscheinungsdatum: | 22.12.2023 |
ISBN (e-book): | - |
eISSN: | 1526-5501 |
DOI: | http://dx.doi.org/10.1287/mnsc.2023.03556 |
Homepage: | - |
Open Access |
|
AutorInnen
Miloš Fišar (extern) |
Ben Greiner (extern) |
Christopher Huber (extern) |
Elena Katok (extern) |
Ali I. Ozkes (extern) |
Management Science Reproducibility Collaboration (extern) |
Stephan Leitner (intern) |
Zuordnung
Organisation | Adresse | ||||
---|---|---|---|---|---|
Fakultät für Wirtschafts- und Rechtswissenschaften
Institut für Unternehmensführung Abteilung für Controlling und Strategische Unternehmensführung
|
AT - 9020 Klagenfurt |
Kategorisierung
Sachgebiete | |
Forschungscluster | Kein Forschungscluster ausgewählt |
Zitationsindex |
Informationen zum Zitationsindex: Master Journal List
|
Peer Reviewed |
|
Publikationsfokus |
Klassifikationsraster der zugeordneten Organisationseinheiten:
|
Arbeitsgruppen | Keine Arbeitsgruppe ausgewählt |
Kooperationen
Organisation | Adresse | ||
---|---|---|---|
Masarykova Univerzita
|
CZ - 60177 Brno |
||
Wirtschaftsuniversität Wien
|
AT - 1020 Wien |
||
University of New South Wales
|
AU
Sydney |
||
University of Texas at Dallas
|
US - 75080-3021 Texas |
||
SKEMA Business Schoool, GREDEG, Université Côte D'Azur
|
FR
|
Forschungsaktivitäten
(Achtung: Externe Aktivitäten werden im Suchergebnis nicht mitangezeigt)
Projekte: | Keine verknüpften Projekte vorhanden |
Publikationen: | Keine verknüpften Publikationen vorhanden |
Veranstaltungen: | Keine verknüpften Veranstaltung vorhanden |
Vorträge: | Keine verknüpften Vorträge vorhanden |