Ein Beitrag von Dipl.-Bibl. Christian Woll, Bundesinstitut für Berufsbildung in Bonn
Mit Hilfe von Evaluationen lassen sich Erkenntnisse gewinnen, die zur Qualitätssicherung und Weiterentwicklung eines Internetangebots sehr wertvoll sein können. Gerade im Kontext von Virtuellen Fachbibliotheken und Fachportalen, die in hohem Maße von Projektfördermitteln abhängig sind, spielen Evaluationen eine wichtige Rolle. Um Projektverantwortliche sowie Portal- und Datenbankanbieter bei ihren Evaluationsvorhaben zu unterstützen, hat das Informationszentrum (IZ) Bildung des Deutschen Instituts für Internationale Pädagogische Forschung (DIPF) das Wiki zur Evaluation von Informationssystemen (Evalinfo) entwickelt. Es ist seit März 2008 unter http://evalinfo.dipf.de online zugänglich.
In dem Wiki werden einerseits Informationen zur Evaluationsplanung, zur Datenerhebung und -analyse und zu methodischen Ansätzen und andererseits konkrete Materialien (z. B. Fragebögen, Checklisten) angeboten. Im Gegenzug soll das Informationsangebot laufend durch die Fach-Community erweitert werden (z. B. durch zusätzliche Beiträge und Materialien). Bislang sind die Nutzung und vor allem die Mitwirkung am Wiki sehr gering. Dies wurde zum Anlass für ein Projekt im Rahmen des berufsbegleitenden Masterstudiums „Bibliotheks- und Informationswissenschaft (Master in Library and Information Science – MALIS)“ der Fachhochschule Köln genommen. Es sollte in Abstimmung mit dem DIPF ein Marketingkonzept für Evalinfo erarbeitet werden. Die Informationsbasis hierfür bildete eine Situationsanalyse. Einen wesentlichen Bestandteil der Situationsanalyse stellte eine Bedarfsanalyse dar, die zum Ziel hatte, die Erwartungen und Anforderungen der Zielgruppe an das Wiki zu eruieren. Zu diesem Zweck wurden telefonische Kurzinterviews mit insgesamt acht Personen aus der Hauptzielgruppe der Betreiber von Virtuellen Fachbibliotheken und Fachportalen durchgeführt. Um die Vollständigkeit und Vergleichbarkeit der Interviews sicherzustellen, wurde als Erhebungsinstrument ein Interviewleitfaden eingesetzt.
Ein zentrales Ergebnis der Kurzinterviews ist, dass ein hoher Bedarf an beispielhaften Darstellungen bereits durchgeführter Evaluationsvorhaben besteht. Dieser Bereich (Kategorie „Projekte“, http://evalinfo.dipf.de/evalinfo/index.php/Kategorie:Projekte) ist im Wiki bislang stark unterrepräsentiert. Um die Sammlung von Evaluationsstudien in nennenswertem Umfang erweitern zu können, bedarf es der Unterstützung durch die Community. Alle, die entsprechende Studien durchgeführt oder daran beteiligt waren, sind herzlich eingeladen, diese im Wiki bereit zu stellen. Im Bereich „Projekte“ steht eine Vorlage für kurze Projekt-Artikel zur Verfügung, anhand derer die Evaluationsvorhaben von den Wiki-Nutzerinnen und Nutzern selbst beschrieben werden können. Evaluationsergebnisse in Form von Dateien oder Hinweise auf bereits online zugängliche Evaluationen können gerne auch per E-Mail an Herrn Schindler vom DIPF übermittelt werden (schindler@dipf.de).
Ebenso wurde von den Interviewten Interesse am Ausbau der „Materialsammlung“ (http://evalinfo.dipf.de/evalinfo/index.php/Materialsammlung) geäußert. Diese liefert konkrete Materialien (Fragebögen, Leitfäden etc.), die an die eigenen Bedürfnisse angepasst werden können. Wiki-Nutzerinnen und -Nutzer können entsprechende Materialien selber als Datei hochladen. Voraussetzung hierfür ist eine vorherige Anmeldung bzw. Registrierung (http://evalinfo.dipf.de/evalinfo/index.php/Spezial:Anmelden).
Der Projektbericht ist in einer modifizierten Version hier abrufbar:
http://evalinfo.dipf.de/evalinfo/upload/Projektbericht_Evalinfo_Woll.pdf.
Scheint mir ein sehr guter Ansatz zu sein. Das Thema Forschungsmethoden und Evaluation ist sehr komplex und die Wahl eines passenden Ansatzes wirkt oft überfordernd. Wir sollten in der Tat als Fachcommunity daran mitarbeiten, uns über funktionierende Methoden auszutauschen und aus dem Vergleich von Ergebnissen Erkenntnisse über Verbesserungsmöglichkeiten an den Portalen ziehen.
Schade dass es ausschließlich ein internes Wiki ist und auch die Registrierungfunktion nicht mehr zur Verfügung steht. Woran liegt das? Sind die Daten sensibel? Oder gibt es Urheberrechtsfragen, die berücksichtigt werden müssen?