Zur Formulierung von eindeutig formulierten und beantwortbaren Forschungsfragen haben Briner & Denyer (2009, S. 347ff) für den Bereich der Wirtschaftswissenschaften das CIMO-Schema entwickelt:

C – Context: Welche Individuen, Beziehungen, institutionelle Rahmenbedingungen und Systeme werden untersucht?

I –  Intervention: Die Effekte welchen Ereignisses, welcher Aktion oder Aktivität werden untersucht?

M – Mechanisms: Welche Mechanismen können die Beziehung zwischen Interventionen und Ergebnissen erklären? Unter welchen Bedingungen kommen diese Mechanismen zum Tragen?

O – Outcomes: Welche Effekte der Intervention gibt es? Wie werden die Ergebnisse gemessen? Was sind beabsichtigte und unbeabsichtigte Effekte?

Die Zielsetzung des Systematic Literature Reviews wird zur Formulierung der Forschungsfragen herangezogen zum Beispiel „Wie leitet man ein Projektteam effektiv?". Da es zahlreiche Interpretationen und Konstrukte für „effektiv", „Führung“ und „Projektteam" gibt, müssen diese Begriffe spezifiziert werden.

Anhand des Schemas lassen sich für dieses Beispiel folgende konkrete Forschungsfragen ableiten:

Unter welchen Bedingungen (C) beeinflusst der Führungsstil (I) die Leistung von Projektteams (O)?

Welche Konstrukte beeinflussen den Einfluss des Führungsstils (I) auf die Projekteamleistung (O)?       

Forschungsfragen müssen dem CIMO-Schema nicht unbedingt folgen, sie sollten aber:

• ...klar, fokussiert, verständlich formuliert und beantwortbar
• … vor Durchführung des SLRs festgelegt worden sein
• …aus allgemeinen und spezifischen Fragen bestehen.

Bereits in diesem Schritt werden auch die Ein- und Ausschlusskriterien festgelegt. Die Auswahl der Kriterien ist gut zu begründen. Dies können u.a. konzeptionelle Faktoren sein wie eine geographische oder zeitliche Einschränkung, übereinstimmende Definitionen von Konstrukten, ebenso wie Qualitätskriterien (Journal Impact Factor > x).

Die Quellenauswahl wird ausführlich beschrieben und begründet. Ziel ist es, eine Balance zwischen Relevanz der Quellen (inhaltlicher Fit) und Umfang der Quellen zu finden.

Im Bereich Wirtschaftswissenschaften gibt es zahlreiche Literaturdatenbanken, die für einen SLR durchsucht werden können und von der Bibliothek Wirtschaft & Management lizenziert sind. Einige Beispiele sind:

• Business Source Complete
• ProQuest One Business
• Scopus
• Web of Science
• Econbiz           

Unser Video "Richtige Datenbank finden" erklärt wie Sie mit Hilfe des Datenbank-Informationssystems der Technischen Universität Berlin relevante Datenbanken für Ihr Thema finden können.

Literaturdatenbanken sind eine wichtige Recherchequelle für SLRs, da sie Verzerrungen durch eine individuelle Literaturauswahl minimieren können (Selection Bias) und aufgrund der Datenstruktur Vorteile für eine systematische Suche bieten. Ziel ist es, alle Datenbankeinträge zu einem Thema zu finden und damit den Retrieval Bias gering zu halten (DBWM-Video zum Retrieval Bias).

Die Recherche in Literaturdatenbanken zeigen wir Ihnen gern in einer persönlichen Beratung oder Sie führen unseren Online-Selbstlernkurs "Searching economic databases"  (Schritt 2 und 3) durch.

Grundsätzlich lassen sich große Mengen an Daten gut mit Datenverarbeitungssprogrammen wie Excel sammeln, strukturieren und sortieren. Eine weitere Möglichkeit sind Literaturverwaltungsprogramme wie Endnote, Citavi oder Zotero. Einen Überblick gängiger Literaturverwaltungsprogramme bietet die Sächsische Landesbibliothek – Staats- und Universitätsbibliothek in Dresden an. Aber auch Software für qualitative Datenauswertungen wie NVivo eignen sich für die Datenverarbeitung. Eine umfangreiche Übersicht verschiedener Tools, die den SLR-Prozess unterstützen findet sich bei Bandara et al. (2015).

Unser Online-Selbstlernkurs "Managing literature with Citavi" zeigt Ihnen die Anwendung von Literaturverwaltungsprogrammen am Beispiel von Citavi.

Bei einem SLR sollte man bei jedem Treffer angeben aus welcher Datenbank er stammt und an welchem Tag die Abfrage erfolgte. Zudem gibt man stets an wie viele Treffer man in den verschiedenen Datenbanken oder beispielsweise durch Handsuche identifiziert hat.

Datenexport aus Literaturdatenbanken

Der Export aus den Literaturdatenbanken ist sehr leicht. Bei der Business Source Complete klickt man in der Trefferliste den Button „Share“ und ganz unten dann „E-Mail a link to download exported results“ und wählt das passende Format für das jeweilige Literaturprogramm aus.

Bei der Web of Science Datenbank wählen Sie auf der Trefferliste "Export aus, und wählen das passende Format. Es können nur 1000 Treffer auf einmal exportiert werden. Tipp: Bestimmen Sie die zu exportierenden Datenfelder individuell und wählen Sie beispielsweise Abstract und Dokumenttyp aus.

Bei der Literaturdatenbank Econbiz funktioniert der Export über Merklisten. Setzen Sie für den Export der gesamten Terfferliste die Anzahl angezeigter Treffer auf das Maximun und fügen jeweils die Treffer einer Seite zu einer Merkliste hinzu. Am Ende können die Titel auf der Merkliste exportiert werden.

Nach dem Zusammenführen aller Treffer aus den verschiedenen Datenbanken in ein Literaturverwaltungsprogramm werden doppelte Einträge (Dubletten) gelöscht.

Alle Publikationen werden anhand der zuvor definierten Ein- und Ausschlusskriterien im Literaturverwaltungsprogramm bewertet. Nur die Quellen, die diesen Auswahlprozess überstehen, werden im Weiteren analysiert. Der Auswahlprozess soll von mindestens zwei Personen unabhängig voneinander durchgeführt werden, um die Qualität und Reliabilität des Auswahlprozesses zu gewährleisten. Wie mit Unstimmigkeiten umgegangen wird, wird festgelegt und im SLR- Protokoll vermerkt.

Zur Überprüfung der Ein- und Ausschlusskriterien werden in einem ersten Schritt vor allem der Titel, der Abstract, die Schlagwörter der Datenbanken sowie von Autor*innen bereitgestellte Stichwörter einer Publikation herangezogen. In einem zweiten Schritt werden die verbleibenden Artikel vorständig gelesen.

Im Literaturverwaltungsprogramm Citavi lassen sich Titeldaten um eigene Felder ergänzen. Hier können die Einschlusskriterien einzeln aufgeführt werden und im Freitextfeld 0 für „nicht erfüllt“ und 1 für „erfüllt“ reingeschrieben werden. In der Tabellenansicht aller Titel lässt sich über die Spaltenfunktion auswählen, welche Spalten angezeigt werden sollen. Hier kann man die Einschlusskriterien aufnehmen. Durch den Export der Titelliste nach Excel lässt sich leicht errechnen, wie viele Titel durch die Anwendung der Ein- und Ausschlusskriterien übrig bleiben.

Alternativ zu den gängigen Literaturverwaltungsprogrammen gibt es aber auch kostenlose und zahlungspflichtige Software, die ganz speziell zur Durchführung eines SLRs entwickelt wurde. Die Bibliothek der Universität Zürich hat ein Zusammenstellung und Bewertung diverser Tools veröffentlich, die auch die Bewertung der Tools durch eine Umfrage unter Forschenden beinhaltet. Zur Toolübersicht

Die Quellenauswahl muss dabei transparent erfolgen. Eine gute Visualisierung der auf jeder Stufe ausgeschlossenen Artikel ist mit dem PRISMA Flußdiagramm-Chart möglich.

Vorwärts- und Rückwärtssuche

Sollte sich zeigen, dass die Anzahl der gefundenen Quellen relativ gering ist, oder besonders gründlich vorgehen möchte, empfiehlt sich eine Vorwärts- und Rückwärtssuche basierend auf den gefundenen Quellen (Webster & Watson 2002, S. xvi). Bei der Rückwärtssuche geht man die Literaturverzeichnisse der gefundenen Quellen durch. Bei der Vorwärtssuche prüft man, von welchen Artikeln die relevanten Publikationen zitiert worden sind. Hierbei unterstützt die Datenbank Web of Science oder Scopus.

Im nächsten Schritt werden die übrig gebliebenen Titel inhaltlich analysiert und dazu mehrfach vollständig gelesen. Informationen werden anhand definierter Kriterien extrahiert und die Qualität der Publikationen bewertet.

Wird die Analyse von mehr als einer Person durchgeführt, sollte ein Training vorangehen, um Unterschiede bei Kodieren und der Datenabstraktion zu vermeiden.

Die Datenabstraktion kann mit Hilfe verschiedener Methoden durchgeführt werden (Inhaltsanalyse, Konzeptmatrix, etc.). Eine sogenannte Konzeptmatrix hilft, Informationen inhaltlich zu strukturieren (Webster & Watson 2002, S. xvii). Die Tabelle unten zeigt ein Beispiel einer Konzeptmatrix nach Becker (2014).

Die Bewertung der Studienqualität ist insbesondere im Bereich der Wirtschaftswissenschaften nach keinem allgemein gültigen Schema einschätzbar wie es sie beispielsweise in der Medizin gibt. Die Qualitätsbewertung hängt daher maßgeblich von den Forschungsfragen ab.

Aus den Erkenntnissen der einzelnen Studien wird dann auf einer Meta-Ebene versucht zu verstehen, welche Gemeinsamkeiten und Unterschiede zwischen den Publikationen bestehen, welche Forschungslücken es gibt etc. Das Ergebnis kann auch die Entwicklung eines theoretischen Modells oder Bezugsrahmens sein.

Nach der Durchführung des Reviews gilt, die Ergebnisse zusammenzustellen und darauf Schlussfolgerungen für die Forschungsfrage abzuleiten (Fink 2014, S. 199ff). Dazu gehören beispielsweise folgende Aspekte:

• Historische Entwicklung von Themen (Histogramm, Zeitreihen: Wann wurde zu den Forschungsthemen wie häufig publiziert?)
• Übersicht der Journals, Autoren oder Fachdisziplinen, die sich mit dem Thema beschäftigen
• Vergleich angewandter statistischer Methoden
• Themen, die durch die Forschung abgedeckt werden
• Forschungslücken aufzeigen
• Bezugsrahmen entwickeln
• Konstrukte entwickeln
• Durchführung einer Meta-Analyse: Vergleich der Korrelationen der Ergebnisse verschiedener empirischer Studien (siehe z.B. Fink 2014, S. 203 zur Durchführung von Meta-Analysen)

Für die Publikation eines SLRs ist es wichtig, die Vorgehensweise in einem ausreichenden Detaillierungsgrad zu beschreiben. Ferner muss neben der Beschreibung des Forschungsstandes zu einem Thema etwas wirklich Neues zur Forschung beigetragen werden und die der Mehrwert des Artikels für die Forschung eindeutig herausgestellt werden.