International Computer and Information Literacy Study

aus Wikipedia, der freien Enzyklopädie
Zur Navigation springen Zur Suche springen

Die International Computer and Information Literacy Study (ICILS) ist eine international vergleichende Schulleistungsuntersuchung, die seit 2013 im fünfjährigen Turnus durchgeführt wird. Die Leitung des internationalen Forschungszentrums der Studie lag in den Studienzyklen ICILS 2013 und ICILS 2018 beim Australian Council for Educational Research (ACER) und nunmehr für ICILS 2023 bei der International Association for the Evaluation of Educational Achievement (IEA). Die Studie ICILS wird im Digital Education Action Plan als Bildungsmonitoring-Studie gelistet.[1]

Die Studie befasst sich mit den höchstrelevanten computer- und informationsbezogenen Kompetenzen von Achtklässlerinnen und Achtklässlern. Darüber hinaus werden in ICILS schulische und außerschulische Rahmenbedingungen hinsichtlich des Erwerbes von Kompetenzen im Umgang mit digitalen Medien erfasst. Mit ICILS 2018 realisierte die IEA zudem erstmals ein Zusatzmodul für den Kompetenzbereich ‚Computational Thinking‘.

Deutschland ist an den Zyklen ICILS 2013, ICILS 2018 und ICILS 2023 beteiligt. Das nationale Forschungszentrum für Deutschland liegt aktuell an der Universität Paderborn unter der Leitung von Birgit Eickelmann. Das Bundesland Nordrhein-Westfalen nimmt als Benchmark-Teilnehmer an ICILS 2018 und ICILS 2023 teil.[2]

Allgemeine Informationen zur Studie ICILS[Bearbeiten | Quelltext bearbeiten]

Untersuchungsgegenstand und Testinstrumente[Bearbeiten | Quelltext bearbeiten]

Computer- und informationsbezogene Kompetenzen[Bearbeiten | Quelltext bearbeiten]

Mit ICILS 2013 wurden erstmals computerbasiert, mithilfe eines international elaborierten Instrumentariums, computer- und informationsbezogene Kompetenzen von Jugendlichen der 8. Klasse empirisch abgesichert getestet. Computer- und informationsbezogene Kompetenzen werden im Rahmen der ICILS-Studien als „individuelle Fähigkeiten einer Person definiert, die es ihr erlauben, Computer und neue Technologien zum Recherchieren, Gestalten und Kommunizieren von Informationen zu nutzen und diese zu bewerten, um am Leben im häuslichen Umfeld, in der Schule, am Arbeitsplatz und in der Gesellschaft erfolgreich teilzuhaben“.[3]

Computational Thinking[Bearbeiten | Quelltext bearbeiten]

Seit ICILS 2018 realisiert die IEA zudem ein Zusatzmodul für den Kompetenzbereich ‚Computational Thinking‘. Anknüpfend an den vorliegenden Forschungsstand wird Computational Thinking im Rahmen der Studie wie folgt definiert: „Computational Thinking bezieht sich auf die Fähigkeit einer Person, Aspekte realweltlicher Probleme zu identifizieren, die für eine [informatische] Modellierung geeignet sind, algorithmische Lösungen für diese (Teil-)Probleme zu bewerten und selbst so zu entwickeln, dass diese Lösungen mit einem Computer operationalisiert werden können (Fraillon et al., 2019, eigene Übersetzung). Die Modellierungs- und Problemlösungsprozesse sind dabei von einer Programmiersprache unabhängig“.[4]

Rahmenbedingungen des Lehrens und Lernens mit digitalen Medien[Bearbeiten | Quelltext bearbeiten]

Darüber hinaus werden in ICILS schulische und außerschulische Rahmenbedingungen hinsichtlich des Erwerbes von Kompetenzen im Umgang mit digitalen Medien entlang eines theoretischen Rahmenmodells erfasst. Hierzu gehören u. a. Aspekte der Professionalisierung der Lehrkräfte, die technische Ausstattungen an den Schulen und die Nutzung digitaler Medien in und außerhalb der Schule. Die Rahmenbedingungen werden aus der Perspektive der Lehrkräfte, der IT-Koordinatorinnen und IT-Koordinatoren, der Schulleitungen und der Schülerinnen und Schüler erhoben.[2]

Informationen zu den Studienzyklen[Bearbeiten | Quelltext bearbeiten]

ICILS 2013[Bearbeiten | Quelltext bearbeiten]

Mit der IEA-Studie ICILS 2013 wurden erstmals im internationalen Vergleich computer- und informationsbezogene Kompetenzen von Jugendlichen gemessen, sowie die schulischen und außerschulischen Rahmenbedingungen ihres Erwerbs, empirisch elaboriert, erfasst. In diesem Kontext wurde zudem erstmals auf der Grundlage theoretischer Vorarbeiten und schließlich unter Einbezug der empirischen Ergebnisse ein Kompetenzstufenmodell für den Bereich der computer- und informationsbezogenen Kompetenzen entwickelt.[4] An ICILS 2013 beteiligten sich international 20 Bildungssysteme, darunter Australien, Dänemark, Chile und Deutschland.

Das nationale Forschungszentrum für Deutschland für ICILS 2013 lag am Institut für Schulentwicklungsforschung in Dortmund in Kooperation mit der Universität Paderborn. Die Leitung der Studie unterlag dem National Research Coordinator (NRC) Wilfried Bos, sowie der NRC Birgit Eickelmann.[2]

ICILS 2013 in Deutschland wurde durch das Bundesministerium für Bildung und Forschung (BMBF) sowie mit Unterstützung aus Mitteln der Europäischen Kommission finanziert. Die Deutsche Telekom Stiftung finanzierte zudem ein Vertiefungsmodul, mit welchem untersucht wurde, inwieweit die schulische und außerschulische computer- und informationsbezogene Medienbildung von Jugendlichen verknüpft sind.[5] Die Ständige Konferenz der Kultusminister der Länder (KMK) hat den Feldzugang für ICILS 2013 in Deutschland gewährt und unterstützt die Durchführung der Studie.[2]

Der gewonnene Datensatz wurde von der IEA[6] und dem Forschungsdatenzentrum[7] (FDZ) für weitere Analysen bereitgestellt.

ICILS 2018[Bearbeiten | Quelltext bearbeiten]

Mit der Studie ICILS 2018 (International Computer and Information Literacy Study 2018) realisierte die IEA, nach ICILS 2013, zum zweiten Mal die Durchführung einer international vergleichenden Schulleistungsstudie, die mithilfe eines international entwickelten und elaborierten Instrumentariums, empirisch abgesichert, Schülerkompetenzen, im Bereich der höchstrelevanten computer- und informationsbezogenen Kompetenzen in den an der Studie teilnehmenden Staaten, erfasste.[8][9] An ICILS 2018 nahmen 14 Bildungssysteme teil, darunter Chile, Dänemark, Kasachstan, Uruguay, die Vereinigten Staaten und Deutschland. Zudem nahm Nordrhein-Westfalen als sogenannter Benchmark-Teilnehmer an ICILS 2018 teil. Erstmals realisierte die IEA, im Rahmen von ICILS 2018 als Zusatzoption (international option), für die an ICILS 2018 teilnehmenden Länder, ein Zusatzmodul für den Kompetenzbereich ‚Computational Thinking‘, an dem auch Deutschland teilnahm. Für die Realisierung des Zusatzmoduls wurden computerbasierte Schülertests entwickelt und eingesetzt. Über eine Erweiterung der ICILS 2018-Hintergrundfragebögen wurden gezielt Informationen zum Erwerb der Kompetenzen erhoben.[10][11] Das nationale Forschungszentrum Deutschland lag für ICILS 2018 an der Universität Paderborn unter der Leitung von Birgit Eickelmann. Die Studie wurde vom Bundesministerium für Bildung und Forschung (BMBF) gefördert. Die Ständige Konferenz der Kultusminister der Länder (KMK) hat den Feldzugang für ICILS 2018 in Deutschland gewährt und unterstützt die Durchführung der Studie.

Mittels einer Stichprobenerweiterung (Oversampling) von 80 zusätzlichen Schulen in Nordrhein-Westfalen, die ergänzend zur Stichprobe von ICILS 2018 in Deutschland gezogen wurden, konnten mit der Berichtlegung der Studie erstmals Ergebnisse für NRW erzielt werden. Neben den computer- und informationsbezogenen Kompetenzen der Achtklässlerinnen und Achtklässler sowie den Rahmenbedingungen des Kompetenzerwerbs, wurden auch in NRW die Kompetenzen im Bereich ‚Computational Thinking‘ erfasst.[2]

Die wissenschaftliche Leitung für ICILS 2018-NRW hatte Birgit Eickelmann (NRC) Universität Paderborn, inne. Das Ministerium für Schule und Bildung des Landes Nordrhein-Westfalen (MSB) finanzierte ein Oversampling (Stichprobenerweiterung) für ICILS-2018-NRW.

Die Daten der deutschen Erhebungen stehen auch anderen Forschenden auf den Seiten der IEA[12] und auf Antrag am Forschungsdatenzentrum[13] am Institut zur Qualitätsentwicklung im Bildungswesen für Re- und Sekundäranalysen zur Verfügung. Auf diese Weise kann die Studie auch über den ursprünglich geplanten Rahmen hinaus für die Forschung von Nutzen sein. Im Rahmen des Projektes ICILS 2018-Transfer wurden ausgehend von den Ergebnissen und Daten der ICILS-2018-Studie für Deutschland (upb.de/icils2018) Materialien für die Schulentwicklungsarbeit erstellt (z. B. Selbstevaluationsbögen). Die Ergebnisse richten sich an Schulen sowie an die Bildungsadministration und pädagogischen Landesinstitute als Unterstützung bei der Gestaltung von Schulentwicklungsprozessen sowie der Gestaltung der Lehrkräfteaus- und -fortbildung und der Qualifizierung von Schulleitungen und Schulaufsicht.

ICILS 2023[Bearbeiten | Quelltext bearbeiten]

Mit der Studie ICILS 2023 realisiert die IEA den dritten Zyklus der Studie. Erneut werden im internationalen Vergleich, die Schülerkompetenzen im Bereich der computer- und informationsbezogenen Kompetenzen erfasst.[14] An ICILS 2023 werden über 30 Bildungssysteme teilnehmen, darunter z. B. Österreich, Dänemark, Deutschland, Griechenland, die Republik Korea, und der sogenannte Benchmark-Teilnehmer Nordrhein-Westfalen.

Wie bereits im Rahmen der Studie ICILS 2018, wird die Studie durch ein Zusatzmodul zum Kompetenzbereich ‚Computational Thinking‘ ergänzt, an dem Deutschland und Nordrhein-Westfalen erneut teilnehmen. Die Datenerhebung ist für Frühjahr bzw. Frühsommer 2023 geplant. Die Ergebnisse der Studie ICILS 2023 werden im November 2024 veröffentlicht. Im Anschluss sind weitere Transferprodukte für die Schulentwicklungsarbeit geplant.[2]

Die Studie ICILS 2023 wird in Deutschland vom Bundesministerium für Bildung und Forschung (BMBF) im Förderzeitraum vom 1. Januar 2021 bis 30. Juni 2026 gefördert. Die internationalen Teilnahmegebühren der Studie werden von der Europäischen Kommission in EU-Mitgliedsstaaten kofinanziert.

Mit der vom Ministerium für Schule und Bildung des Landes Nordrhein-Westfalen geförderten Studie ICILS 2023-NRW beteiligt sich NRW zum zweiten Mal als Benchmark-Teilnehmer an der International Computer and Information Literacy Study (ICILS 2023). Die Studie wird im Förderzeitraum (vom 1. November 2021 bis 31. Dezember 2025) gefördert. Die wissenschaftliche Leitung für ICILS 2023-NRW obliegt Kerstin Drossel, Universität Paderborn.

Ergebnisse von ICILS in Deutschland und Nordrhein-Westfalen[Bearbeiten | Quelltext bearbeiten]

ICILS 2023[Bearbeiten | Quelltext bearbeiten]

Die internationale und nationale Berichtlegung von ICILS 2023 ist für November 2024 geplant.

ICILS 2018[Bearbeiten | Quelltext bearbeiten]

Die internationale und nationale[15] Berichtlegung für ICILS 2018 erfolgte am 5. November 2019.

Die Ergebnisse wurden in Form eines internationalen[16] und eines nationalen[17] Berichtsbandes veröffentlicht. Für NRW wurden zeitgleich ebenfalls erste Ergebnisse vorgelegt.[18]

Im Anschluss an die Berichtlegung wurden die Ergebnisse in Form einer Transferbroschüre[19] und darin enthaltenen editierbaren Selbsteinschätzungsbögen für Schulen und die beteiligten Akteure aufbereitet.

Computer- und Informationsbezogene Kompetenzen[Bearbeiten | Quelltext bearbeiten]

Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern in Deutschland[Bearbeiten | Quelltext bearbeiten]

Hinsichtlich der ermittelten computer- und informationsbezogenen Kompetenzen konnte mit der Studie ICILS 2018, als ein zentrales Ergebnis, Folgendes ermittelt werden:

„Im Ergebnis zeigt sich, dass sich die mittleren Kompetenzen der Achtklässlerinnen und Achtklässler in Deutschland mit 518 Punkten nicht signifikant von den mittleren Kompetenzen in ICILS 2013 (523 Punkte) unterscheiden. Die mittleren Kompetenzen in Deutschland liegen – wie schon in 2013 – signifikant über dem internationalen Mittelwert (496 Punkte) und im mittleren Bereich der Länderrangreihe. Der Mittelwert der Vergleichsgruppe EU (509 Punkte) liegt signifikant unter dem mittleren Kompetenzwert von Deutschland.“[20][21]

Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern in Nordrhein-Westfalen[Bearbeiten | Quelltext bearbeiten]

Hinsichtlich der ermittelten computer- und informationsbezogenen Kompetenzen konnte mit der Studie ICILS 2018 NRW, als ein zentrales Ergebnis, Folgendes ermittelt werden:

„Achtklässlerinnen und Achtklässler in Nordrhein-Westfalen erreichen im Bereich der computer- und informationsbezogenen Kompetenzen ein mittleres Leistungsniveau von 515 Punkten. Damit liegt Nordrhein-Westfalen im mittleren Bereich des Länderrankings der Studie ICILS 2018.“[22]

Kompetenzen im Bereich ‚Computational Thinking‘[Bearbeiten | Quelltext bearbeiten]

Kompetenzen im Bereich ‚Computational Thinking‘ von Schülerinnen und Schülern in Deutschland[Bearbeiten | Quelltext bearbeiten]

Hinsichtlich der ermittelten Kompetenzen im Bereich ‚Computational Thinking‘ konnte mit der Studie ICILS 2018, als ein zentrales Ergebnis, Folgendes ermittelt werden:

„Achtklässlerinnen und Achtklässler in Deutschland erreichen im Mittel 486 Punkte im Kompetenzbereich ‚Computational Thinking‘. Die mittleren Kompetenzen der Schülerinnen und Schüler in Deutschland liegen damit signifikant unter dem internationalen Mittelwert (500 Punkte).“[20][21]

Kompetenzen im Bereich ‚Computational Thinking‘ von Schülerinnen und Schülern in Nordrhein-Westfalen[Bearbeiten | Quelltext bearbeiten]

Hinsichtlich der ermittelten Kompetenzen im Bereich ‚Computational Thinking‘ konnte mit der Studie ICILS 2018 für das Bundesland Nordrhein-Westfalen Folgendes ermittelt werden:

„In Nordrhein-Westfalen erreichen Achtklässlerinnen und Achtklässler im Kompetenzbereich ‚Computational Thinking‘ im Mittel 485 Leistungspunkte, mit einer Leistungsstreuung von 95 Leistungspunkten für die Standardabweichung. Dieser Kompetenzmittelwert für Nordrhein-Westfalen unterscheidet sich nicht signifikant vom entsprechenden mittleren Leistungsniveau der Achtklässlerinnen und Achtklässler in Deutschland (486 Punkte), liegt aber signifikant unter dem internationalen Mittelwert (500 Leistungspunkte).“[22]

ICILS 2013[Bearbeiten | Quelltext bearbeiten]

Die internationale und nationale[15] Berichtlegung für ICILS 2013 erfolgte am 20. November 2014.

Die Ergebnisse wurden in Form eines internationalen[23] Berichtsbandes und eines nationalen[24] Berichtsbandes veröffentlicht.

Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern in Deutschland[Bearbeiten | Quelltext bearbeiten]

Hinsichtlich der ermittelten computer- und informationsbezogenen Kompetenzen, konnte mit der Studie ICILS 2013, als ein zentrales Ergebnis, Folgendes ermittelt werden:

„Achtklässlerinnen und Achtklässler in Deutschland erreichen mit einem Mittelwert von 523 Leistungspunkten ein Kompetenzniveau, das sich im internationalen Vergleich im Mittelfeld der Länderrangreihe einordnet. Dieser Mittelwert ist vergleichbar mit dem Mittelwert der Vergleichsgruppe EU (525 Punkte), liegt aber signifikant über dem internationalen Mittelwert (500 Punkte), sowie signifikant über dem Mittelwert der Vergleichsgruppe OECD (516 Punkte). Die durchschnittliche Leistungsstreuung in Deutschland beträgt 78 Punkte.“[25][3]

Die Ergebnisse der International Computer and Information Literacy Study (ICILS 2013) für Deutschland im internationalen Vergleich[26] wurden am 20. November 2014 vorgestellt. Zeitgleich dazu präsentierte die IEA die internationalen Ergebnisse von ICILS 2013.[27]

Rezeption und Datennutzung[Bearbeiten | Quelltext bearbeiten]

Die Studie bildet national und international einen Meilenstein, da sie den gesellschaftlichen und technischen Veränderungen im 21. Jahrhundert Rechnung trägt und diese mit zeitgemäßen Methoden der empirischen Bildungs- und Schulforschung bearbeitet.[4] Aus diesem Grund und sind die erhobenen Daten auch für die Nachnutzung in Re- und Sekundäranalysen über den ursprünglich geplanten Rahmen hinaus von Wert und Interesse. Die Daten der deutschen Erhebungen wurden und werden daher jeweils an das Forschungsdatenzentrum am Institut zur Qualitätsentwicklung im Bildungswesen übergeben, wo sie anderen Forschenden auf Antrag zur Verfügung stehen.

Einzelnachweise[Bearbeiten | Quelltext bearbeiten]

  1. European Commission (2020). Digital Education Action Plan 2021-2027. Resetting Education and training for the digital age. https://education.ec.europa.eu/sites/default/files/document-library-docs/deap-communication-sept2020_en.pdf
  2. a b c d e f Kulturwissenschaften - ICILS 2013 (Universität Paderborn). Abgerufen am 6. April 2022.
  3. a b Bos, Wilfried, Eickelmann, Birgit, Gerick, Julia, Goldhammer, Frank, Schaumburg, Heike: ICILS 2013 Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern in der 8. Jahrgangsstufe im internationalen Vergleich. Waxmann, Münster, Westf 2014, ISBN 978-3-8309-3131-7.
  4. a b c Projekthomepage: ICILS 2013. (uni-paderborn.de).
  5. Kulturwissenschaften - Vertiefungsmodul ICILS 2013 (Universität Paderborn). Abgerufen am 6. April 2022.
  6. ICILS | IEA.nl. Abgerufen am 6. April 2022.
  7. Forschungsdatenzentrum. Abgerufen am 6. April 2022.
  8. Projekthomepage: ICILS 2018 – NRW. (uni-paderborn.de).
  9. Eickelmann, B.: Digitale Kompetenzen im internationalen Vergleich. Welche Impulse geben die Studien ICILS 2013 und ICILS 2018? In: Zeitschrift Schul-Management. Band 48, Nr. 5, 2017.
  10. Projekthomepage: ICILS 2018 – Computational Thinking (internationale Zusatzoption zu IEA-ICILS 2018). (uni-paderborn.de).
  11. Eickelmann, B.: Computational Thinking als internationales Zusatzmodul zu ICILS 2018 – Konzeptionierung und Perspektiven für die empirische Bildungsforschung. In: Tertium Comparationis. Journal für International und Interkulturell Vergleichende Erziehungswissenschaft. Band 23, Nr. 1, 2017, S. 47–61.
  12. ICILS | IEA.nl. Abgerufen am 6. April 2022.
  13. Forschungsdatenzentrum. Abgerufen am 6. April 2022.
  14. Projektbeschreibung von ICILS 2023: ICILS 2023. Abgerufen am 15. März 2021.
  15. a b https://kw.uni-paderborn.de/fileadmin/fakultaet/Institute/erziehungswissenschaft/Schulpaedagogik/ICILS_2018__Deutschland_Berichtsband.pdf. (PDF) Abgerufen am 28. November 2019.
  16. Fraillon, Julian Ainley, John Schulz, Wolfram Friedman, Tim Duckworth, Daniel IEA Preparing for life in a digital world (2019). https://www.iea.nl/sites/default/files/2020-04/IEA%20International%20Computer%20and%20Information%20Literacy%20Study%202018%20International%20Report.pdf
  17. Eickelmann, B., Bos, W., Gerick, J., Goldhammer, F., Schaumburg, H., Schwippert, K., Senkbeil, M. & Vahrenhold, J. (Hrsg.) (2019). ICILS 2018 #Deutschland – Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern im zweiten internationalen Vergleich und Kompetenzen im Bereich Computational Thinking. Münster: Waxmann. https://www.waxmann.com/?eID=texte&pdf=4000Volltext.pdf&typ=zusatztext
  18. https://kw.uni-paderborn.de/fileadmin/fakultaet/Institute/erziehungswissenschaft/Schulpaedagogik/2019_Eickelmann_Massek_Labusch_ICILS_2018__NRW_Erste_Ergebnisse_Buchbroschuere.pdf
  19. Labusch, A., Eickelmann, B. & Conze, D. (2020). ICILS 2018 #Transfer. Gestaltung digitaler Schulentwicklung in Deutschland. Münster: Waxmann. https://kw.uni-paderborn.de/fileadmin/fakultaet/Institute/erziehungswissenschaft/Schulpaedagogik/2020_Labusch_Eickelmann_Conze_ICILS_2018__Transfer.pdf
  20. a b Eickelmann, B., Bos, W. & Labusch, A.: Die Studie ICILS 2018 im Überblick – Zentrale Ergebnisse und Entwicklungsperspektiven. In: B. Eickelmann, W. Bos, J. Gerick, F. Goldhammer, H. Schaumburg, K. Schwippert, M. Senkbeil & J. Vahrenhold (Hrsg.): ICILS 2018 #Deutschland – Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern im zweiten internationalen Vergleich und Kompetenzen im Bereich Computational Thinking. Waxmann, Münster 2018, ISBN 978-3-8309-9000-0, S. 7–31.
  21. a b Eickelmann, B., Bos, W., Gerick, J., Goldhammer, F., Schaumburg, H., Schwippert, K., Senkbeil, M. & Vahrenhold, J.: . Waxmann, Münster 2019, ISBN 978-3-8309-9000-0.
  22. a b Eickelmann, B., Massek, C. & Labusch, A.: ICILS 2018 #Nordrhein-Westfalen. Erste Ergebnisse der Studie ICILS 2018 für Nordrhein-Westfalen im internationalen Vergleich. Waxmann, Münster 2019, ISBN 978-3-8309-9117-5.
  23. Fraillon, J., Ainley, J. Schulz, W., Friedman, T., Gebhardt, E. (2014). Preparing for Life in a Digital Age. https://link.springer.com/book/10.1007/978-3-319-14222-7
  24. Bos, W., Eickelmann, B., Gerick, J., Goldhammer, F., Schaumburg, H., Schwippert, K., Senkbeil, M., Schulz-Zander, R. & Wendt, H. (Hrsg.) (2014). ICILS 2013 – Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern in der 8. Jahrgangsstufe im internationalen Vergleich. Münster: Waxmann.
  25. Eickelmann, B., Gerick, J. & Bos, W.: Die Studie ICILS 2013 im Überblick –Zentrale Ergebnisse und Entwicklungsperspektiven. In: W. Bos, B. Eickelmann, J. Gerick, F. Goldhammer, H. Schaumburg, K. Schwippert, M. Senkbeil, R. Schulz-Zander & H. Wendt (Hrsg.): ICILS 2013 – Computer- und informationsbezogene Kompetenzen von Schülerinnen und Schülern in der 8. Jahrgangsstufe im internationalen Vergleich. Waxmann, Münster 2014, ISBN 978-3-8309-3131-7, S. 9–31 (waxmann.com [PDF]).
  26. https://www.waxmann.com/fileadmin/media/zusatztexte/ICILS_2013_Berichtsband.pdf
  27. https://www.iea.nl/fileadmin/user_upload/Publications/Electronic_versions/ICILS_2013_International_Report.pdf