<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<!DOCTYPE GmsArticle SYSTEM "http://www.egms.de/dtd/2.0.34/GmsArticle.dtd">
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001531</Identifier>
    <IdentifierDoi>10.3205/zma001531</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0015310</IdentifierUrn>
    <IdentifierVgWort>http://vg02.met.vgwort.de/na/c5161750d12a4511861c7985b5722d5d</IdentifierVgWort>
    <ArticleType language="en">article</ArticleType>
    <ArticleType language="de">Artikel</ArticleType>
    <TitleGroup>
      <Title language="en">Quality assurance and curricular development of medical faculties using graduate surveys: Challenges &#8211; proposal of a core questionnaire &#8211; implementation guide</Title>
      <TitleTranslated language="de">Qualit&#228;tssicherung und curriculare Weiterentwicklung von medizinischen Studieng&#228;ngen mit Hilfe der Befragung von Absolventinnen und Absolventen: Herausforderungen &#8211; Vorschlag eines Kernfragebogens &#8211; Durchf&#252;hrungshinweise</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>Giesler</Lastname>
          <LastnameHeading>Giesler</LastnameHeading>
          <Firstname>Marianne</Firstname>
          <Initials>M</Initials>
          <AcademicTitle>Dr. phil.</AcademicTitle>
        </PersonNames>
        <Address language="en">Freiburg, Germany<Affiliation>Freiburg, Germany</Affiliation></Address>
        <Address language="de">Freiburg, Deutschland<Affiliation>Freiburg, Deutschland</Affiliation></Address>
        <Email>Dr&#95;M&#95;Giesler&#64;t-online.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Huber</Lastname>
          <LastnameHeading>Huber</LastnameHeading>
          <Firstname>Johanna</Firstname>
          <Initials>J</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>LMU M&#252;nchen, Klinikum der Universit&#228;t M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>LMU M&#252;nchen, Klinikum der Universit&#228;t M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Paulmann</Lastname>
          <LastnameHeading>Paulmann</LastnameHeading>
          <Firstname>Volker</Firstname>
          <Initials>V</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medizinische Hochschule Hannover, Studiendekanat - Bereich Evaluation &#38; Kapazit&#228;t, Hannover, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Hochschule Hannover, Studiendekanat - Bereich Evaluation &#38; Kapazit&#228;t, Hannover, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">graduate surveys</Keyword>
      <Keyword language="en">quality assurance</Keyword>
      <Keyword language="en">curriculum development</Keyword>
      <Keyword language="de">Absolventenbefragungen</Keyword>
      <Keyword language="de">Qualit&#228;tssicherung</Keyword>
      <Keyword language="de">Curriculumentwicklung</Keyword>
      <SectionHeading language="en">curriculum reform</SectionHeading>
      <SectionHeading language="de">Curriculare Weiterentwicklung</SectionHeading>
    </SubjectGroup>
    <DateReceived>20210315</DateReceived>
    <DateRevised>20210920</DateRevised>
    <DateAccepted>20211129</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20220215</DatePublished><DateRepublished>20230209</DateRepublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>39</Volume>
        <Issue>1</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
      </Journal>
    </SourceGroup>
    <ArticleNo>10</ArticleNo>
    <Correction><DateLastCorrection>00010101</DateLastCorrection>A VG WORT counting pixel was added.&#47;Ein VG-WORT-Z&#228;hlpixel wurde erg&#228;nzt. </Correction>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph>Befragungen von Hochschulabsolventinnen und -absolventen liefern wertvolle Hinweise zur Verbesserung und Weiterentwicklung eines Studiengangs. Ziel des vorliegenden Projektberichts ist es, die Relevanz dieser Befragungen f&#252;r medizinische Fakult&#228;ten aufzuzeigen und gleichzeitig Hilfestellung bei der Planung und Durchf&#252;hrung dieser Befragungen zu bieten, um so eine vergleichende Evaluierung von medizinischen Studieng&#228;ngen zu erm&#246;glichen.</Pgraph><Pgraph>Die Autorinnen und der Autor dieses Projektberichts wurden von der MFT-<Mark2>Unterarbeitsgruppe</Mark2> (UAG) <Mark2>Qualit&#228;tssicherung Lehre</Mark2> beauftragt, Qualit&#228;tsempfehlungen f&#252;r die Befragung von Medizin-Absolventinnen und -Absolventen zu erarbeiten. Hierzu wurden die an medizinischen Fakult&#228;ten eingesetzten Frageb&#246;gen gesichtet und bewertet, mit denen Hochschulabsolventinnen und -absolventen befragt werden. Im Rahmen dieses Projekts entstand ein Fragebogen mit Kern- und optionalen Fragen. Zudem wurde eine Matrix entwickelt, die Verfahrenselemente von Befragungen von Absolventinnen und Absolventen enth&#228;lt, beginnend mit &#8222;A wie Adressrecherche&#8220; bis &#8222;Z wie Zeitraum der Befragung&#8220;.</Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph>Graduate surveys provide valuable information to further improve and develop an academic study program. The aim of this project report is to point out the relevance of these surveys for medical schools and to offer guidance on planning and implementing such surveys so that comparable evaluations of medical degree programs are possible.</Pgraph><Pgraph>The authors of this project report were asked by the MFT working subgroup on <Mark2>Quality Assurance in Education</Mark2> to generate quality recommendations for surveying medical graduates. To accomplish this, the questionnaires used by the medical schools to survey graduates were closely inspected and analyzed. A questionnaire containing core and optional questions was created as part of this project. A comprehensive matrix was also developed listing all of the procedural elements of graduate surveys.</Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="Introduction">
      <MainHeadline>Introduction</MainHeadline><Pgraph>Graduate surveys have been used more or less regularly by German-speaking universities since the 1970s <TextLink reference="1"></TextLink>. The results of these surveys can provide information about the professional success and current whereabouts of program graduates, as well as give feedback on their experiences of the study program and the skills required in their professional life. These surveys are a source of valuable information to further develop an academic study program.</Pgraph><Pgraph>Since the end of the 1980s there has been an increase in the number of graduate surveys. On the one hand, this is a consequence of the recommendation given at that time by the West German conference of university rectors (Westdeutschen Rektorenkonferenz) which advised the universities to include graduate surveys alongside other course and teacher evaluations <TextLink reference="2"></TextLink>; on the other, this increase was forced at the end of the 1990s with the general changes to universities that came with the Bologna Process and the associated compulsory quality assurance procedures <TextLink reference="3"></TextLink>. Against this background, different projects have established themselves over the years, such as the studies on graduates since 1989, which have been done by the <Mark2>Deutsches Zentrum f&#252;r Wissenschaft und Forschung</Mark2> (DZHW, formerly HIS) &#91;<Hyperlink href="https:&#47;&#47;www.dzhw.eu&#47;forschung&#47;projekt&#63;pr&#95;id&#61;467">https:&#47;&#47;www.dzhw.eu&#47;forschung&#47;projekt&#63;pr&#95;id&#61;467</Hyperlink>&#93;. Another is the <Mark2>Kooperationsprojekt Absolventenstudien</Mark2> (KOAB) initiated in 2007 by the <Mark2>International Center of Higher Education and Research Kassel</Mark2> (INCHER Kassel) and the <Mark2>Netzwerk Absolventenforschung</Mark2>. This collaborative project has been continued since 2016 by the <Mark2>Institut f&#252;r angewandte Statistik</Mark2> (ISTAT) as independent spin-off from INCHER &#91;<Hyperlink href="https:&#47;&#47;istat.de&#47;de&#47;koab&#95;a.html">https:&#47;&#47;istat.de&#47;de&#47;koab&#95;a.html</Hyperlink>&#93;. In addition to these nation-wide projects, there are associations at the state level, such as the <Mark2>S&#228;chsische Absolventenstudie</Mark2> <TextLink reference="4"></TextLink>, the collaborative project <Mark2>Baden-W&#252;rttembergische Absolventenstudie</Mark2> <TextLink reference="5"></TextLink>, and the <Mark2>Bayerische Absolventenstudie</Mark2> conducted by the <Mark2>Bayerischen Staatsinstituts f&#252;r Hochschulforschung und Hochschulplanung</Mark2> (IHF) &#91;<Hyperlink href="https:&#47;&#47;www.bap.ihf.bayern.de&#47;bas&#47;aktuelles">https:&#47;&#47;www.bap.ihf.bayern.de&#47;bas&#47;aktuelles</Hyperlink>&#93;. Since 2008 graduates have been regularly surveyed by the Freiburg Medical Faculty as part of the <Mark2>Kompetenznetz Lehre in der Medizin Baden-W&#252;rttemberg</Mark2> &#91;<Hyperlink href="http:&#47;&#47;www.medizin-bw.de&#47;">http:&#47;&#47;www.medizin-bw.de&#47;</Hyperlink>&#93;. Surveys regarding the university degree programs in medicine, veterinary medicine, and dental medicine have been conducted in Bavaria since 2015 as part of the <Mark2>Bayerische Medizinabsolventenstudie</Mark2> (MediBAS) &#91;<Hyperlink href="https:&#47;&#47;www.bap.ihf.bayern.de&#47;medibas">https:&#47;&#47;www.bap.ihf.bayern.de&#47;medibas</Hyperlink>&#93;.</Pgraph><SubHeadline2>Area of application for the surveys</SubHeadline2><Pgraph>The first graduate surveys were primarily conducted to receive differentiated information about the transitions between higher education and professional life, for instance, on employment situations and unemployment rates. As time progressed, however, there was increasing focus placed on questions asking about the quality of university study <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. A study done at Bavarian universities showed that 77&#37; of the universities view graduate surveys as an important tool for quality assurance <TextLink reference="8"></TextLink>. For 55&#37; of the surveyed universities this type of survey is relevant for strategic university development. Forty-one percent use the results for the career center and&#47;or university marketing, and 32&#37; for academic advising.</Pgraph><Pgraph>Table 1 <ImgLink imgNo="1" imgType="table"/> shows the diversity of survey use, the focus and purpose of which can differ depending on the university.</Pgraph><Pgraph>In addition to the internal interests of the universities connected with gathering such data comes the need for information on the part of external institutions. This reflects the complex constellation in which medical education and political, academic, and professional associations, as well as healthcare bodies, work together. This expressly involves ensuring healthcare with the best-trained physicians possible as an overall societal goal (see figure 1 <ImgLink imgNo="1" imgType="figure"/>). Graduate surveys are in part laid down in cooperative agreements between ministries and universities &#8211; as is the case in Nordrhein-Westfalen &#91;<Hyperlink href="https:&#47;&#47;www.mkw.nrw&#47;sites&#47;default&#47;files&#47;documents&#47;2018-10&#47;hochschulvereinbarung&#95;nrw&#95;2021&#95;ohne&#95;unterschrift.pdf">https:&#47;&#47;www.mkw.nrw&#47;sites&#47;default&#47;files&#47;documents&#47;2018-10&#47;hochschulvereinbarung&#95;nrw&#95;2021&#95;ohne&#95;unterschrift.pdf</Hyperlink>&#93;. Other interest groups are active in giving direct support, for example, as a partner in collaborative research (healthcare system research), as the instigator for independent research projects (statutory health insurance providers), or as the recipient of quality assurance measures in the area of healthcare (patients, clinics, hospitals).</Pgraph><Pgraph>The heterogeneity of the areas of application and purposes of the data collected through graduate surveys is reflected in the questionnaires that have been used to date. Each university distinguishes itself in a variety of ways based on regional factors, program-specific curricula, or historical background, all of which sensibly call for tailoring the questionnaires. On the other hand, the different questionnaires and survey time points make it difficult to compare medical schools with each other. When evaluating different teaching strategies &#8211; and the resulting academic outcomes &#8211; the ability to make such comparisons would be necessary. In regard to this, the Wissenschaftsrat (German Council of Science and Humanities) had already stated in 2014 that objectifiable evaluation criteria and evaluation methods for a comparable evaluation of medical education nationally and internationally have not yet been sufficiently established <TextLink reference="9"></TextLink>.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Einleitung">
      <MainHeadline>Einleitung</MainHeadline><Pgraph>Befragungen von Absolventinnen und Absolventen werden seit den 70er-Jahren an deutschsprachigen Hochschulen mehr oder weniger regelm&#228;&#223;ig durchgef&#252;hrt <TextLink reference="1"></TextLink>. Die Ergebnisse dieser Befragungen k&#246;nnen Hinweise &#252;ber den beruflichen Erfolg und Verbleib von Absolventinnen und Absolventen geben und Feedback &#252;ber die erlebten Studienbedingungen sowie die im Beruf geforderten Kompetenzauspr&#228;gungen bieten. Sie liefern somit wertvolle Anhaltspunkte f&#252;r die Weiterentwicklung eines Studiengangs.</Pgraph><Pgraph>Seit Ende der 80er-Jahre ist eine Zunahme der Befragungen von Absolventinnen und Absolventen zu verzeichnen. Dies ist einerseits bedingt durch eine in dieser Zeit erfolgte Empfehlung der Westdeutschen Rektorenkonferenz, die den Hochschulen neben der Evaluation von Studium und Lehre auch Befragungen von Absolventinnen und Absolventen nahelegte <TextLink reference="2"></TextLink>. Zum anderen wurde die Entwicklung Ende der 90er-Jahre forciert durch die mit dem Bologna-Prozess einhergehenden ver&#228;nderten Rahmenbedingungen an den Hochschulen und die damit verkn&#252;pften erforderlichen Qualit&#228;tssicherungsprozesse <TextLink reference="3"></TextLink>. In diesem Zusammenhang haben sich im Laufe der Jahre verschiedene Projekte etabliert wie die seit 1989 durchgef&#252;hrten Absolventenstudien des <Mark2>Deutschen Zentrums f&#252;r Wissenschaft und Forschung</Mark2> (DZHW, ehemals HIS) &#91;<Hyperlink href="https:&#47;&#47;www.dzhw.eu&#47;forschung&#47;projekt&#63;pr&#95;id&#61;467">https:&#47;&#47;www.dzhw.eu&#47;forschung&#47;projekt&#63;pr&#95;id&#61;467</Hyperlink>&#93; oder das im Jahr 2007 von dem <Mark2>International Center of Higher Education and Research Kassel</Mark2> (INCHER Kassel) und dem <Mark2>Netzwerk Absolventenforschung initiierte Kooperationsprojekt Absolventenstudien</Mark2> (KOAB). Dieses Kooperationsprojekt wird seit 2016 durch das <Mark2>Institut f&#252;r angewandte Statistik</Mark2> (ISTAT) als eigenst&#228;ndige Ausgr&#252;ndung aus dem INCHER weitergef&#252;hrt &#91;<Hyperlink href="https:&#47;&#47;istat.de&#47;de&#47;koab&#95;a.html">https:&#47;&#47;istat.de&#47;de&#47;koab&#95;a.html</Hyperlink>&#93;. Neben diesen bundesweit operierenden Projekten gibt es Verb&#252;nde, die auf L&#228;nderebene angesiedelt sind, wie beispielsweise die <Mark2>S&#228;chsische Absolventenstudie</Mark2> <TextLink reference="4"></TextLink>, das Kooperationsprojekt <Mark2>Baden-W&#252;rttembergische Absolventenstudie</Mark2> <TextLink reference="5"></TextLink> und die <Mark2>Bayerische Absolventenstudie</Mark2> des <Mark2>Bayerischen Staatsinstituts f&#252;r Hochschulforschung und Hochschulplanung</Mark2> (IHF) &#91;<Hyperlink href="https:&#47;&#47;www.bap.ihf.bayern.de&#47;bas&#47;aktuelles">https:&#47;&#47;www.bap.ihf.bayern.de&#47;bas&#47;aktuelles</Hyperlink>. F&#252;r die medizinischen Fakult&#228;ten in Baden-W&#252;rttemberg werden seit 2008 von der medizinischen Fakult&#228;t Freiburg im Rahmen des <Mark2>Kompetenznetzes Lehre in der Medizin Baden-W&#252;rttemberg</Mark2> regelm&#228;&#223;ig Absolventinnen und Absolventen befragt &#91;<Hyperlink href="http:&#47;&#47;www.medizin-bw.de&#47;">http:&#47;&#47;www.medizin-bw.de&#47;</Hyperlink>&#93;. In Bayern werden im Rahmen der <Mark2>Bayerischen Medizinabsolventenstudie</Mark2> (MediBAS) seit 2015 Befragungen in den medizinischen Studieng&#228;ngen (Human-, Zahn- und Veterin&#228;rmedizin) durchgef&#252;hrt &#91;<Hyperlink href="https:&#47;&#47;www.bap.ihf.bayern.de&#47;medibas">https:&#47;&#47;www.bap.ihf.bayern.de&#47;medibas</Hyperlink>&#93;.</Pgraph><SubHeadline2>Anwendungsbereiche der Befragungen</SubHeadline2><Pgraph>Die ersten Befragungen von Absolventinnen und Absolventen wurden vor allem durchgef&#252;hrt, um differenzierte Informationen zu den &#220;bergangsprozessen zwischen Hochschule und Beruf zu erhalten, so z. B. zum beruflichen Verbleib und zu Arbeitslosenquoten. In der Folge standen jedoch zunehmend Fragen der Studienqualit&#228;t im Fokus des Interesses <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. Eine an bayerischen Hochschulen durchgef&#252;hrte Studie <TextLink reference="8"></TextLink> ergab, dass 77 Prozent der Hochschulen die Befragung von Absolventinnen und Absolventen als wichtiges Instrument der Qualit&#228;tssicherung ansehen. F&#252;r 55 Prozent der befragten Hochschulen sind diese Befragungen f&#252;r die strategische Hochschulentwicklung relevant. Jeweils 41 Prozent nutzen die Ergebnisse f&#252;r das Career Center und&#47;oder das Hochschulmarketing und 32 Prozent f&#252;r Studienberatungen.</Pgraph><Pgraph>Tabelle 1 <ImgLink imgNo="1" imgType="table"/> veranschaulicht die Vielfalt der Anwendungsgebiete dieser Befragungen, die zudem je nach Hochschule in ihren Schwerpunkten und ihrem Einsatzzweck differieren k&#246;nnen.</Pgraph><Pgraph>Zu den hochschulinternen Interessen, die mit der Erhebung entsprechender Daten verbunden sind, kommt der Informationsbedarf externer Institutionen und Einrichtungen hinzu. Dies spiegelt das komplexe Gef&#252;ge wider, in dem die medizinische Ausbildung und politische, universit&#228;re, berufsst&#228;ndische Verb&#228;nde sowie die Organe der Gesundheitsversorgung zusammenwirken. Dabei geht es ausdr&#252;cklich darum, die Krankenversorgung als gesamtgesellschaftliches Ziel mit &#196;rztinnen und &#196;rzten auf bestm&#246;glichem Ausbildungsniveau zu sichern (siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>). Teilweise wird die Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen in Zielvereinbarungen zwischen Ministerien und Hochschulen &#8211; wie im Falle Nordrhein-Westfalens &#8211; festgehalten &#91;<Hyperlink href="https:&#47;&#47;www.mkw.nrw&#47;sites&#47;default&#47;files&#47;documents&#47;2018-10&#47;hochschulvereinbarung&#95;nrw&#95;2021&#95;ohne&#95;unterschrift.pdf">https:&#47;&#47;www.mkw.nrw&#47;sites&#47;default&#47;files&#47;documents&#47;2018-10&#47;hochschulvereinbarung&#95;nrw&#95;2021&#95;ohne&#95;unterschrift.pdf</Hyperlink>&#93;. Andere Interessengruppen wirken durch direkte Unterst&#252;tzung mit, z. B. als Partner in Forschungskooperationen (Gesundheitssystemforschung), als Auftraggeber eigenst&#228;ndiger Forschungsprojekte (Krankenkassen) oder als Adressaten der Qualit&#228;tssicherung im Bereich der Krankenversorgung (Patientinnen und Patienten, Kliniken). </Pgraph><Pgraph>Die Heterogenit&#228;t der Anwendungsbereiche und Funktionen der Daten von Befragungen von Absolventinnen und Absolventen spiegelt sich in den bislang eingesetzten Frageb&#246;gen wider. Hochschulen weisen aufgrund regionaler Faktoren, studiengangspezifischer Modelle oder geschichtlicher Hintergr&#252;nde eine Reihe von Eigenheiten auf, die eine Anpassung der Frageb&#246;gen sinnvoll erscheinen lassen. Andererseits erschweren die verschiedenen Frageb&#246;gen und Befragungszeitpunkte einen Vergleich der Fakult&#228;ten untereinander. Bei der Beurteilung von unterschiedlichen didaktischen Konzepten &#8211; und der daraus resultierenden Studienleistungen &#8211; w&#228;re die M&#246;glichkeit zur Durchf&#252;hrung solcher Vergleiche geboten. Hierzu hat der Wissenschaftsrat bereits 2014 festgestellt, dass &#8222;objektivierbare Beurteilungskriterien und Bewertungsmethoden f&#252;r eine vergleichende Evaluierung der Medizinerausbildung national wie international noch nicht ausreichend etabliert sind&#8220; <TextLink reference="9"></TextLink>.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Project description">
      <MainHeadline>Project description</MainHeadline><Pgraph>A working subgroup based on the routinely held meetings of the medical school deans in Germany (<Mark2>Medizinischer Fakult&#228;tentag</Mark2>, or MFT) specifically addressed quality assurance in education by developing a list of criteria for assessing the quality of education. In the course of doing this work, it became clear that particularly when conducting graduate surveys no quality criteria existed. The authors of this report, who have gathered wide-ranging experience with graduate surveys in their university networks, were asked in 2018 to examine and assess the existing procedures and to use the results to make recommendations for planning and implementing graduate surveys. </Pgraph><Pgraph>This report describes the working group&#8217;s results from February 2018 to October 2019 which are presented in the context of research on graduate surveys in the German-speaking countries.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Projektbeschreibung">
      <MainHeadline>Projektbeschreibung</MainHeadline><Pgraph>Ausgehend von den regelm&#228;&#223;ig stattfindenden Arbeitstreffen der Studiendekane und -dekaninnen der medizinischen Fakult&#228;ten in Deutschland (<Mark2>Medizinischer Fakult&#228;tentag</Mark2>: MFT) konstituierte sich die Unterarbeitsgruppe (UAG) Qualit&#228;tssicherung Lehre, die einen Kriterienkatalog f&#252;r die Qualit&#228;t der Lehre entwickelte. Im Zuge dieser Arbeit wurde deutlich, dass insbesondere f&#252;r die Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen keine Qualit&#228;tsma&#223;st&#228;be verf&#252;gbar waren. Die Autorinnen und der Autor dieses Artikels, die an ihren Fakult&#228;ten in verschiedenen Verb&#252;nden vielf&#228;ltige Erfahrungen mit Befragungen von Absolventinnen und Absolventen gesammelt hatten, wurden 2018 beauftragt, eine Sichtung und Einsch&#228;tzung der bestehenden Verfahren vorzunehmen. Daraus sollten Empfehlungen zur Planung und Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen resultieren.</Pgraph><Pgraph>Der vorliegende Bericht beschreibt die von dieser Arbeitsgruppe im Zeitraum von Februar 2018 bis Oktober 2019 erzielten Ergebnisse, die im Kontext der Forschung zu Befragungen von Absolventinnen und Absolventen im deutschsprachigen Raum beleuchtet werden.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Method">
      <MainHeadline>Method</MainHeadline><Pgraph>The first step entailed inspecting several of the questionnaires that have been used by German medical schools. In part, these were variations of the physician surveys used by INCHER or ISTAT and different versions of the surveys used in Bavaria, Baden-W&#252;rttemberg and Lower Saxony. The working group then checked the extent to which these questionnaires were the same in regard to the dimensions they contained (see table 2 <ImgLink imgNo="2" imgType="table"/>). The dimensions were compiled as a list, and the questions frequently asked on these questionnaire versions were then assigned to the dimensions. In the next step each member of the working group was tasked with prioritizing questions that should be obligatory when surveying graduates. A question was classified as &#8220;obligatory&#8221; if the following conditions were met:</Pgraph><Pgraph><UnorderedList><ListItem level="1">It had a direct bearing on quality assurance processes or appeared relevant for a comparison concerning the quality of input, processes, and outcomes of the education. In general, these were questions with which information is collected that is regularly asked for in connection with assessments, both internal (by university committees) and external (accreditations, ministries, <Mark2>Wissenschaftsrat</Mark2>, etc.). Or it is discussed within education research as being central criterion for education quality <TextLink reference="10"></TextLink>.</ListItem><ListItem level="1">All three members of the working group unanimously found it to be essential. If only two members agreed, the relevance of the question was discussed critically and then a decision was made about whether it could be classified as &#8220;obligatory&#8221; or &#8220;not obligatory.&#8221; If questions were formulated in a similar way, one version was selected through a consensus procedure.</ListItem></UnorderedList></Pgraph><Pgraph>The questions selected in this manner were designated as &#8220;core questions&#8221;. Classified as &#8220;optional&#8221; were questions that more deeply probe relevant aspects regarding education quality or professional development, but that are more regionally limited in their informative value and therefore do not need to be essential for all surveys. Overall, an effort was made to basically reduce the number of questions since the questionnaires that were reviewed were usually very extensive.</Pgraph><Pgraph>Parallel to examining the questionnaires, best-practice examples were collected from the group&#8217;s own questionnaires to illustrate effective resource use, high response rates, and practicability (data protection issues etc.) The examples were sorted by topic and supplemented with recommendations from the literature. Based on this, a matrix of procedural elements for graduate surveys was created that includes concrete instructions for conducting these surveys, from finding current addresses to defining the time period for the survey.</Pgraph><Pgraph>The work process included the participation of experts from the project <Mark2>Karriereverl&#228;ufe</Mark2> von <Mark2>&#196;rztinnen und &#196;rzten</Mark2> <Mark2>in der fach&#228;rztlichen Weiterbildung</Mark2> (KarMed: funded by the <Mark2>Bundesministerium f&#252;r Bildung und Forschung</Mark2> (Federal Ministry of Education and Research, or BMBF)) and the <Mark2>Kassen&#228;rztliche Bundesvereinigung</Mark2> (Association of Statutory Health Physicians, or <Mark2>KBV</Mark2>) <TextLink reference="11"></TextLink>. This allowed for discussions of the intermediate results. The tentative conclusion of the project activities is the presentation and discussion of the results at the 12<Superscript>th</Superscript> meeting of the university deans of studies in November 2019 in Berlin.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Vorgehen">
      <MainHeadline>Vorgehen</MainHeadline><Pgraph>Am Anfang der Arbeit stand die Sichtung einiger der an den deutschen medizinischen Fakult&#228;ten bisher eingesetzten Frageb&#246;gen. Zum Teil waren dies Varianten des von INCHER bzw. ISTAT eingesetzten Medizinerfragebogens sowie verschiedene in Baden-W&#252;rttemberg, Bayern und Niedersachsen eingesetzte Versionen. In der Arbeitsgruppe wurde dann gepr&#252;ft, inwieweit diese Frageb&#246;gen hinsichtlich der von ihnen abgebildeten Dimensionen &#252;bereinstimmen (siehe Tabelle 2 <ImgLink imgNo="2" imgType="table"/>). Im Anschluss wurde eine Liste dieser Dimensionen erstellt und h&#228;ufig in diesen Fragebogenversionen vorkommenden Fragen diesen Dimensionen zugeordnet. Im n&#228;chsten Schritt hatte jedes Mitglied der Arbeitsgruppe die Aufgabe, Fragen zu priorisieren, die f&#252;r die Befragung von Absolventinnen und Absolventen obligatorisch sein sollten. Diese wurden dann als &#8222;obligatorisch&#8220; klassifiziert, wenn:</Pgraph><Pgraph><UnorderedList><ListItem level="1">sie einen direkten Bezug zu Qualit&#228;tssicherungsprozessen hatten bzw. f&#252;r einen Vergleich der Input-, Prozess- und Ergebnisqualit&#228;t der Ausbildung relevant erschienen. In der Regel waren dies Fragen, mit denen Daten erfasst werden, die regelm&#228;&#223;ig im Rahmen von internen (seitens der Hochschulgremien) und externen Begutachtungen (Akkreditierungen, Ministerien, Wissenschaftsrat etc.) nachgefragt oder in der Ausbildungsforschung als zentrale Kriterien der Ausbildungsqualit&#228;t diskutiert werden <TextLink reference="10"></TextLink>.</ListItem><ListItem level="1">alle drei Mitglieder der Arbeitsgruppe sie &#252;bereinstimmend als unverzichtbar eingesch&#228;tzt hatten. Bei zwei &#220;bereinstimmungen wurde die Relevanz der Fragen kritisch diskutiert und danach entschieden, ob sie als obligatorisch oder nicht obligatorisch eingestuft werden konnten. Bei inhaltlich &#228;hnlich formulierten Fragen wurde im Konsensverfahren eine Version ausgew&#228;hlt. </ListItem></UnorderedList></Pgraph><Pgraph>Die so ausgew&#228;hlten Fragen wurden als &#8222;Kernfragen&#8220; bezeichnet. Fragen, die relevante Detailaspekte zur Ausbildungsqualit&#228;t oder zu berufsbezogenen Entwicklungen vertiefen, aber eher lokal begrenzte Aussagekraft haben und deshalb nicht zwangsl&#228;ufig Bestandteil jeder Befragung sein m&#252;ssen, wurden als &#8222;optionale Fragen&#8220; klassifiziert. Insgesamt wurde eine grunds&#228;tzliche Reduzierung der Fragenanzahl angestrebt, da die vorliegenden Frageb&#246;gen meist sehr umfangreich waren.</Pgraph><Pgraph>Parallel zu dieser Durchsicht der Frageb&#246;gen wurden Best-Practice-Beispiele f&#252;r eine effektive Ressourcennutzung, hohe R&#252;cklaufquoten und die Praktikabilit&#228;t (u. a. bei Datenschutzfragen) etc. aus eigenen Befragungen zusammengetragen. Diese wurden thematisch sortiert und mit Empfehlungen aus der Literatur erg&#228;nzt. Auf dieser Basis wurde eine Matrix <Mark2>Verfahrenselemente von Befragungen von Absolventinnen und Absolventen</Mark2> erstellt, die konkrete Handlungsanweisungen zur Durchf&#252;hrung dieser Befragungen umfasst und die von &#8222;A wie Adressrecherche&#8220; bis &#8222;Z wie Zeitraum der Befragung&#8220; reichen. </Pgraph><Pgraph>Begleitet wurde der Arbeitsprozess u. a. durch die Einbeziehung von Expertinnen und Experten des Projekts Karriereverl&#228;ufe von &#196;rztinnen und &#196;rzten in der fach&#228;rztlichen Weiterbildung (KarMed: gef&#246;rdert durch das <Mark2>Bundesministerium f&#252;r Bildung und Forschung</Mark2> (BMBF) und die <Mark2>Kassen&#228;rztliche Bundesvereinigung</Mark2> (KBV)) <TextLink reference="11"></TextLink>. Auf diese Weise konnten Zwischenergebnisse diskutiert werden. Den vorl&#228;ufigen Abschluss der Projektaktivit&#228;ten bildete die Vorstellung und Diskussion der Ergebnisse im Rahmen des 12. Treffens der Studiendekaninnen und -dekane im November 2019 in Berlin.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Results">
      <MainHeadline>Results</MainHeadline><SubHeadline2>Questionnaires with core questions</SubHeadline2><Pgraph>The comparison of the survey instruments used by the medical schools revealed the following aspects: In regard to the structure of the questionnaires and their central elements, it was seen that these almost equally cover a retrospective view of university study and the professional experience gathered since then. However, the range covered by the questions within these two training phases varies substantially. Furthermore, there is a wide spectrum of specific questions and different formulations that make comparisons of the answers difficult.</Pgraph><Pgraph>Based on the work steps described above (see Method), a questionnaire was created with core questions (obligatory questions) for medical graduates (medicine and dental medicine). These core questions were meant to form the basis of each graduate survey in order to enable meaningful comparisons. Each medical school would have the opportunity to add optional questions reflecting the university&#8217;s specific interests. Table 2 <ImgLink imgNo="2" imgType="table"/> provides an overview of the topics covered by the core questions and includes optional questions. The questionnaire can be downloaded as an attachment 1 <AttachmentLink attachmentNo="1"/> (german version) to this report.</Pgraph><SubHeadline2>Matrix of procedural elements for graduate surveys</SubHeadline2><Pgraph>The matrix on conducting graduate surveys covers 20 topics. In the first section on researching addresses, it explains how survey participants&#8217; addresses can be updated; the last section describes the concepts of &#8220;time point&#8221; and &#8220;time period&#8221; and when a graduate survey should be conducted. Following this are practical recommendations and options for each topic. Finally, potential problems are identified. Supplemental references to the literature are given at the end of the sections on each topic.</Pgraph><Pgraph>This matrix is not exhaustive, but is rather to be viewed as a preliminary list open to the addition of other evidence-based recommendations for conducting graduate surveys. This matrix is designed to provide guidance for medical schools which have previously had little or no experience with carrying out such surveys.</Pgraph><Pgraph>The matrix can be downloaded as an attachment 2 <AttachmentLink attachmentNo="2"/> (german version) to this report.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Ergebnisse des Projekts">
      <MainHeadline>Ergebnisse des Projekts</MainHeadline><SubHeadline2>Fragebogen mit Kernfragen</SubHeadline2><Pgraph>Der Vergleich, der von den medizinischen Fakult&#228;ten eingesetzten Befragungsinstrumente hat folgende Aspekte verdeutlicht: Hinsichtlich des Aufbaus der Frageb&#246;gen und ihrer zentralen Elemente zeigte sich, dass diese ungef&#228;hr zu gleichen Teilen den R&#252;ckblick auf das Studium und die bisher gesammelten beruflichen Erfahrungen behandeln. Der Fragenumfang der Themenbereiche innerhalb dieser beiden Ausbildungsphasen variiert jedoch erheblich. Zudem gibt es eine gro&#223;e Bandbreite an spezifischen Fragen und unterschiedlichen Formulierungen, die Vergleiche der jeweiligen Antworten erschweren.</Pgraph><Pgraph>Basierend auf den beschriebenen Arbeitsschritten (siehe Abschnitt Vorgehen) wurde ein Fragebogen mit Kernfragen (obligatorische Fragen) f&#252;r Absolventinnen und Absolventen der Medizin (Human- und Zahnmedizin) erstellt. Diese Kernfragen sollten jeder Befragung von Absolventinnen und Absolventen zugrunde liegen, um sinnvolle Vergleiche zu erm&#246;glichen. Jede Fakult&#228;t bzw. Medizinische Hochschule h&#228;tte dar&#252;ber hinaus die M&#246;glichkeit, optionale Fragen hinzuzuf&#252;gen, die den hochschuleigenen Interessen entsprechen. Tabelle 2 <ImgLink imgNo="2" imgType="table"/> gibt eine &#220;bersicht &#252;ber die Themengebiete der Kernfragen sowie zu den Kernfragen selbst inklusive der in den Fragebogen aufgenommenen optionalen Fragen. Der vollst&#228;ndige Fragebogen kann als Anhang 1 <AttachmentLink attachmentNo="1"/> zu diesem Bericht heruntergeladen werden.</Pgraph><SubHeadline2>A&#8211;Z Verfahrenselemente von Befragungen von Absolventinnen und Absolventen</SubHeadline2><Pgraph>Die Matrix zur Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen umfasst 20 Themenabschnitte, die alphabetisch sortiert sind. Im ersten Abschnitt &#8222;Adressrecherche&#8220; wird u. a. erl&#228;utert, wie Adressen der zu Befragenden aktualisiert werden k&#246;nnen, im letzten Abschnitt &#8222;Zeitpunkt &#47; Zeitraum&#8220; wird u. a. beschrieben, wann eine Befragung von Absolventinnen und Absolventen durchgef&#252;hrt werden sollte. Es folgen Handlungsempfehlungen und -optionen f&#252;r die jeweiligen Themenabschnitte. Anschlie&#223;end werden m&#246;gliche Probleme aufgef&#252;hrt. Am Ende der jeweiligen Themenabschnitte werden erg&#228;nzend Literaturhinweise gegeben. </Pgraph><Pgraph>Diese Matrix ist nicht als ersch&#246;pfend, sondern als vorl&#228;ufiges Inventar anzusehen, das f&#252;r weitere evidenzbasierte Empfehlungen zur Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen offen ist. Konzipiert ist diese Matrix als Handreichung f&#252;r medizinische Fakult&#228;ten, die bislang keine oder nur wenig Erfahrung mit der Durchf&#252;hrung von entsprechenden Befragungen haben.</Pgraph><Pgraph>Die Matrix kann als Anhang 2 <AttachmentLink attachmentNo="2"/> zu diesem Bericht heruntergeladen werden.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Discussion and outlook">
      <MainHeadline>Discussion and outlook</MainHeadline><Pgraph>In the fall of 2018 the authors of this report were asked by an MFT working subgroup to generate recommendations for planning and conducting graduate surveys. Two products were developed in the course of this project and are the subject of this report. To enable a comparative evaluation of medical education in Germany as requested by the <Mark2>Wissenschaftsrat</Mark2>, a questionnaire was developed for use by medical schools. The core questions on this questionnaire are meant to ensure that all of the information relevant to quality assurance is collected. Optional questions that are of interest to specific universities can be added. A matrix based on best-practice examples collected by the authors of this report and supplemented with examples from the literature was created to serve as an additional aid in planning and conducting the surveys. These two products should not only contribute to the further development of medical education and its quality assurance, but also allow for comparisons between medical schools regarding the educational situation. The latter should be advanced for the following reasons:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">The use of programs to qualify medical teachers in the German-speaking countries <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink> and the newly established professorships for medical education at the universities create the conditions under which the number of research projects to improve education can be increased. As a consequence, more questions about basic aspects of curriculum development can be investigated scientifically, as can the inputs, the teaching and learning processes, and the outcomes of education. Such questions gain more significance if they are addressed through multicenter approaches. Graduate surveys that enable cross-university comparisons can be helpful in this regard.</ListItem><ListItem level="1" levelPosition="2" numString="2.">The growing importance of medical education and the research on it are also reflected in the new version of the German medical licensing regulations (<Mark2>&#196;rztlichen Approbationsordnung,</Mark2> or &#196;ApprO). The number of sections in the draft legislation (an increase from 44 to 183 sections) shows that the complexity of education-related issues has increased substantially. The National Competency-based Catalogue of Learning Objectives for Undergraduate Medical Education (Nationale<Mark2> Kompetenzbasierte Lernzielkatalog</Mark2>, or NKLM), which has undergone a development process of many years, has now been integrated into the &#196;ApprO. Given this focus on competencies, the question about the measurability of competency arises. In addition to the student outcomes on the second part of the M2 state medical exam, more data will be needed to verify that educational objectives have been achieved &#8211; regardless of whether they represent practical or scientific competencies in medicine. Self-assessments by graduates of their own competencies <TextLink reference="14"></TextLink> could, alongside scores on practical assessments (OSCE), which, by the way, should also be expanded, provide information regarding the quality of education.</ListItem><ListItem level="1" levelPosition="3" numString="3.">Interregional research projects that draw on the results of graduate surveys already exist. For instance, within the scope of the project <Mark2>Studierendenauswahl Verbund (stav)</Mark2> <TextLink reference="15"></TextLink>, cross-university postgraduate data is being used to draw conclusions about the success of the admissions process and the different groups of admitted students. The requirements for robust data on courses of study and professional careers will also increase as a result of the statutory stipulations for structuring the admission processes.</ListItem></OrderedList></Pgraph><Pgraph>In addition to the ongoing use and potential uses for graduate surveys, there are, however, some obstacles and limits which are briefly described here:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">When planning graduate surveys, the question always arises as to how to balance successfully between questions that relate to the current moment (e.g., work&#47;life balance of young physicians) and questions that are of interest over a longer period of time (e.g., developments regarding doctoral degrees in medicine). A questionnaire containing the same questions over many years of student cohorts will be necessary to make reliable internal and external comparisons. On the other hand, new questions will need to be integrated in order to remain current. For instance, in the future there will be questions about the effects of the coronavirus pandemic on medical education that will of necessity complement older questions. So that a questionnaire is answered in full by respondents, its length should be carefully calculated. Analysis of the stopping points on incomplete questionnaires for earlier surveys (dropout analysis), for instance, can provide valuable information about possible optimization <TextLink reference="16"></TextLink>. The use of core questions that remain an unchanged part of all surveys over a longer period of time and the potential inclusion of optional questions can be helpful.</ListItem><ListItem level="1" levelPosition="2" numString="2.">When calling for a benchmark system, it is often underestimated how much results and processes are influenced by factors that make comparisons difficult. For a wide variety of reasons it is virtually impossible to measure the actual teaching at medical schools as a determining factor. In addition, there are many factors external to the university which also help to steer educational success. Van den Bussche et al. <TextLink reference="17"></TextLink> were able to show that state exam scores can be influenced by factors such as the size of the university, staffing at the university, an examinee&#8217;s academic record in secondary school, and their citizenship. A uniform collection of data at the medical schools is important to take these and other potential influencing factors into account.</ListItem><ListItem level="1" levelPosition="3" numString="3.">Because the university rectors are usually in charge of graduate surveys, they also have a decisive effect on the form and content of the questionnaires. It is often the case when developing a uniform, interdisciplinary questionnaire that special aspects of individual subjects are not taken into consideration. The need for university leaders to compare the results of the different subjects with each other is understandable, but it does not do justice to the needs and interests of the medical schools because the structures and conditions of a degree program in medicine, dentistry, or veterinary medicine differ very strongly from the degree programs in other fields of study. A comparison of the results with other medical schools is limited when a uniform, university-specific questionnaire is used for all subjects. It must also be assumed that the acceptance of such surveys will be negatively affected, not only in terms of those surveyed, but also those who receive the reports. It would be possible to better account for the interests of the medical schools by having medical faculty participate on the relevant steering committees. Agreements could also be reached that are structured so that medical schools carry out surveys in coordination with rectors who then, in turn, make the survey data available. Several medical schools have indicated that this is their approach, according to the results of a survey conducted at a German-speaking medical school <TextLink reference="7"></TextLink>.</ListItem><ListItem level="1" levelPosition="4" numString="4.">The issue of a survey&#8217;s representativity is crucial for the acceptance of the results. The tracking of foreign careers (including foreign students who do not work in Germany after completing their studies) is limited due to the difficulties in finding and then contacting these graduates. This group is generally underrepresented in surveys. Moreover, with response rates of 30-50&#37; it cannot be ruled out that the composition of the samples does not correspond with some relevant characteristics of the target population <TextLink reference="18"></TextLink>. It may be assumed that - among other factors - the increasing use of surveys in the evaluation of university teaching contributes to a decline in response rates and compromises data quality <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>.</ListItem><ListItem level="1" levelPosition="5" numString="5.">From a methodological viewpoint, carrying out panel surveys, with which the professional development of graduates is followed over a long period of time, is worth pursuing. In recent years, only the KarMed studies <TextLink reference="11"></TextLink>, as a prospective study on career paths in medicine, alongside the data collected by the DZHW, have done justice to these needs. Anchoring resources is desirable to ensure ongoing research on graduates at the medical schools.</ListItem></OrderedList></Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Diskussion und Ausblick">
      <MainHeadline>Diskussion und Ausblick</MainHeadline><Pgraph>Im Herbst 2018 wurden die Autorinnen und der Autor dieses Berichts von einer Unterarbeitsgruppe des MFT beauftragt, Empfehlungen zur Planung und Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen zu erarbeiten. Im Zuge dieses Projekts wurden zwei Produkte entwickelt, die Gegenstand dieses Berichts sind. Um eine auch vom Wissenschaftsrat gew&#252;nschte vergleichende Evaluierung der medizinischen Ausbildung in Deutschland zu erm&#246;glichen, wurde ein Fragebogen entwickelt, der an vielen medizinischen Fakult&#228;ten eingesetzt werden kann. Die Kernfragen dieses Fragebogens sollen sicherstellen, dass alle zur Qualit&#228;tssicherung relevanten Informationen erfasst werden. Optionale Fragen, die f&#252;r die einzelnen Fakult&#228;ten von Interesse sind, k&#246;nnen hinzugef&#252;gt werden. Als zus&#228;tzliche Hilfestellung f&#252;r die Planung und Durchf&#252;hrung der Befragungen wurde ausgehend von Best-Practice-Beispielen der Autorinnen und des Autors dieses Berichts, die durch Beispiele aus der Literatur erg&#228;nzt wurden, eine Matrix erstellt. Diese beiden Produkte sollen zur weiteren Entwicklung der medizinischen Ausbildung und deren Qualit&#228;tssicherung beitragen und interfakult&#228;re Vergleiche der Ausbildungssituation erm&#246;glichen. Letztere sollten aus folgenden Gr&#252;nden vorangetrieben werden:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">Die Nutzung der im deutschsprachigen Raum vorhandenen Angebote zur medizindidaktischen Qualifizierung von Lehrenden <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink> und die an den Fakult&#228;ten neu eingerichteten Lehrst&#252;hle f&#252;r Medizindidaktik schaffen eine Voraussetzung daf&#252;r, dass zunehmend Forschungsprojekte zur Verbesserung der Lehre durchgef&#252;hrt werden k&#246;nnen. Dadurch k&#246;nnen vermehrt Fragestellungen zu grunds&#228;tzlichen Aspekten der Curriculumentwicklung bzw. zum Input, den Lehr- und Lernprozessen sowie den Outcomes wissenschaftlich &#252;berpr&#252;ft werden. Solche Fragestellungen gewinnen an Aussagekraft, wenn sie multizentrisch bearbeitet werden. Befragungen von Absolventinnen und Absolventen, die fakult&#228;ts&#252;bergreifende Vergleiche erm&#246;glichen, k&#246;nnen hierbei hilfreich sein.</ListItem><ListItem level="1" levelPosition="2" numString="2.">Die wachsende Bedeutung der Medizindidaktik und der Medizinischen Ausbildungsforschung spiegelt sich auch in der neuen <Mark2>&#196;rztlichen Approbationsordnung</Mark2> (&#196;ApprO) wider. Der Paragraphenumfang des Referentenentwurfs (Anstieg von 44 &#167;&#167; auf 183 &#167;&#167;) zeigt, dass die Komplexit&#228;t in Ausbildungsfragen erheblich zugenommen hat. Der <Mark2>Nationale(r) Kompetenzbasierte(r) Lernzielkatalog</Mark2> (NKLM), der einen langj&#228;hrigen Entwicklungsprozess durchlaufen hat, wurde in die &#196;ApprO integriert. Mit dieser Ausrichtung an Kompetenzen stellt sich die Frage nach der Messbarkeit von Kompetenzen. Zur &#220;berpr&#252;fung der Erreichung der Ausbildungsziele &#8211; gleich ob &#228;rztlich-praktische oder wissenschaftliche Kompetenzen &#8211; werden in den n&#228;chsten Jahren neben den Ergebnissen des Zweiten Abschnitts der &#196;rztlichen Pr&#252;fung M2 weitere Daten ben&#246;tigt. Die selbsteingesch&#228;tzten Kompetenzauspr&#228;gungen von Absolventinnen und Absolventen <TextLink reference="14"></TextLink> k&#246;nnten hierbei neben den Ergebnissen praxisorientierter Pr&#252;fungsformate (<Mark2>Objective structured clinical examination</Mark2>: OSCE), die ebenfalls ausgebaut werden sollen, Aussagen zur Ausbildungsqualit&#228;t liefern.</ListItem><ListItem level="1" levelPosition="3" numString="3.">Es existieren bereits &#252;berregionale Forschungsprojekte, die auf die Ergebnisse von Befragungen von Absolventinnen und Absolventen zur&#252;ckgreifen. So werden beispielsweise im Rahmen des Projekts <Mark2>Studierendenauswahl Verbund (stav)</Mark2> <TextLink reference="15"></TextLink> hochschul&#252;bergreifend postgraduale Erhebungen genutzt, um R&#252;ckschl&#252;sse auf den Erfolg der Auswahlprozesse und der unterschiedlichen Studienzugangsgruppen ziehen zu k&#246;nnen. Mit den gesetzlichen Bestimmungen zur Gestaltung der Auswahlprozesse werden auch die Anspr&#252;che an aussagekr&#228;ftigen Daten zu Studien- und Berufsverl&#228;ufen steigen.</ListItem></OrderedList></Pgraph><Pgraph>Neben den beschriebenen weiteren Einsatz- und Nutzungsm&#246;glichkeiten von Befragungen von Absolventinnen und Absolventen gibt es jedoch noch einige H&#252;rden und Limitierungen, die im Folgenden kurz beschrieben werden:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">Bei der Planung von Befragungen der Absolventinnen und Absolventen stellt sich stets die Frage, wie die Balance zwischen Fragestellungen, die einen aktuellen Bezug haben (z. B. zur Work-Life-Balance junger &#196;rztinnen und &#196;rzte) und Fragestellungen, die &#252;ber l&#228;ngere Zeitr&#228;ume von Interesse sind (z. B. Entwicklungen im Bereich medizinischer Promotion) gelingen kann. Um verl&#228;ssliche fakult&#228;tsinterne und -externe Vergleiche vornehmen zu k&#246;nnen, wird ein Fragebogen ben&#246;tigt, der &#252;ber Jahrg&#228;nge hinweg die gleichen Fragen beinhaltet. Auf der anderen Seite m&#252;ssen aufgrund des Zeitgeschehens neue Fragen integriert werden. So werden in Zukunft Fragen nach den Auswirkungen der Corona-Pandemie auf die medizinische Ausbildung die bereits vorhandenen Fragen zwangsl&#228;ufig erg&#228;nzen. Damit der Fragebogen von den Befragten auch vollst&#228;ndig beantwortet wird, sollte seine L&#228;nge sorgf&#228;ltig kalkuliert werden. Hier kann z. B. die Analyse der Abbruchpunkte bei unvollst&#228;ndig ausgef&#252;llten B&#246;gen fr&#252;herer Befragungen (Dropout-Analyse) wertvolle Hinweise f&#252;r m&#246;gliche Optimierungen liefern <TextLink reference="16"></TextLink>. Der Einsatz von Kernfragen, die &#252;ber l&#228;ngere Zeitr&#228;ume unver&#228;ndert Teil aller Befragungen sind, und die M&#246;glichkeit, zus&#228;tzlich optionale Fragen zu stellen, k&#246;nnen hierbei hilfreich sein.</ListItem><ListItem level="1" levelPosition="2" numString="2.">Bei Forderungen nach einem Benchmarksystem wird oftmals untersch&#228;tzt, dass Ergebnisse bzw. Prozesse von Faktoren beeinflusst werden k&#246;nnen, die einen Vergleich erschweren. Bereits das konkrete Lehrgeschehen an den medizinischen Fakult&#228;ten als Einflussgr&#246;&#223;e ist aus den verschiedensten Gr&#252;nden kaum erfassbar. Auch existieren zus&#228;tzlich vielfach au&#223;eruniversit&#228;re Faktoren, die den Ausbildungserfolg mit steuern. Van den Bussche et al. <TextLink reference="17"></TextLink> konnten zeigen, dass Staatsexamensergebnisse durch Faktoren wie Gr&#246;&#223;e des Studienortes, Personalausstattung der Universit&#228;t, Abiturnoten der Pr&#252;flinge und ihre Staatsangeh&#246;rigkeit beeinflusst werden k&#246;nnen. Um diese und andere m&#246;gliche Einflussfaktoren ber&#252;cksichtigen zu k&#246;nnen, ist eine einheitliche Datenerhebung an den medizinischen Standorten wichtig.</ListItem><ListItem level="1" levelPosition="3" numString="3.">Da die Rektorate der Universit&#228;ten meist die Federf&#252;hrung f&#252;r die Befragung von Absolventinnen und Absolventen haben, hat dies entscheidende Auswirkungen auf die Gestaltung der Frageb&#246;gen. Bei der Entwicklung eines einheitlichen fach&#252;bergreifenden Fragebogens werden Besonderheiten der einzelnen F&#228;cher h&#228;ufig nicht ber&#252;cksichtigt. Das Bed&#252;rfnis der Hochschulleitungen die Ergebnisse der verschiedenen F&#228;cher miteinander vergleichen zu k&#246;nnen, ist zwar nachvollziehbar, es wird jedoch den Interessen und Bed&#252;rfnissen der medizinischen Fakult&#228;ten nicht gerecht. Denn die Strukturen und Bedingungen eines Studiums der Human-, Zahn- und Veterin&#228;rmedizin unterscheiden sich stark von denen anderer Studieng&#228;nge. Bei einem standortspezifischen, f&#252;r alle F&#228;cher einheitlichen Fragebogen, ist nicht nur der Vergleich der Ergebnisse mit anderen medizinischen Fakult&#228;ten einschr&#228;nkt. Es ist auch davon auszugehen, dass die Akzeptanz der Befragungen beeintr&#228;chtigt wird, sowohl bei den Befragten, als auch bei den Berichtsempf&#228;ngerinnen und -empf&#228;ngern. Durch ein Engagement der medizinischen Fakult&#228;ten in den entsprechenden Steuerungskreisen k&#246;nnten die Interessen der medizinischen Fakult&#228;ten st&#228;rker ber&#252;cksichtigt werden. Es k&#246;nnten auch Vereinbarungen entstehen, die so gestaltet sind, dass die medizinischen Fakult&#228;ten in Abstimmung mit den Rektoraten die Befragungen durchf&#252;hren und diesen wiederum die Befragungsdaten zur Verf&#252;gung stellen. Gem&#228;&#223; den Ergebnissen einer an deutschsprachigen medizinischen Fakult&#228;ten durchgef&#252;hrten Befragung, gaben einige der medizinischen Fakult&#228;ten ein entsprechendes Vorgehen an <TextLink reference="7"></TextLink>.</ListItem><ListItem level="1" levelPosition="4" numString="4.">F&#252;r die Akzeptanz der Ergebnisse ist die Frage nach deren Repr&#228;sentativit&#228;t essentiell. Die Nachverfolgung von Auslandskarrieren (inklusive ausl&#228;ndischer Studierender, die nach dem Studium nicht in Deutschland arbeiten) ist, z. B. aufgrund der schwierigeren Erreichbarkeit bzw. Auffindbarkeit der Personen, eingeschr&#228;nkt. Diese Gruppe ist in der Regel bei Befragungen unterrepr&#228;sentiert. Weiterhin kann bei R&#252;ckl&#228;ufen von 30&#8211;50&#37; nicht ausgeschlossen werden, dass die Stichprobe in ihrer Zusammensetzung hinsichtlich einiger relevanter Merkmale der Populationszusammensetzung nicht entspricht <TextLink reference="18"></TextLink>. Es kann vermutet werden, dass &#8211; neben anderen Faktoren &#8211; insbesondere die stete Zunahme an Evaluationen und Befragungen aller Art im Rahmen des Studiums zu einem R&#252;ckgang der R&#252;cklaufquoten beitr&#228;gt und die Datenqualit&#228;t beeintr&#228;chtigt <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>.</ListItem><ListItem level="1" levelPosition="5" numString="5.">Aus methodischer Sicht ist die Realisierung von Panelbefragungen, mit denen &#252;ber einen langen Zeitraum der Werdegang der Absolventinnen und Absolventen verfolgt wird, erstrebenswert. In den letzten Jahren konnten neben den Erhebungen des DZHW einzig die KarMed-Studien <TextLink reference="11"></TextLink> als prospektive Studie zu Karriereverl&#228;ufen in der Medizin diesen Anspr&#252;chen gerecht werden. Um langfristig Absolventenforschung an den Fakult&#228;ten zu gew&#228;hrleisten, ist die Verankerung von Ressourcen w&#252;nschenswert.</ListItem></OrderedList></Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Take-home message">
      <MainHeadline>Take-home message</MainHeadline><Pgraph>In summary, suitable instruments are available in the form of the core questionnaire and the matrix outlining all of the procedural elements to assist medical schools in conducting graduate surveys. Both instruments can be downloaded as attachment 1 <AttachmentLink attachmentNo="1"/> (german version) and attachment 2 <AttachmentLink attachmentNo="2"/> (german version)  to this report.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Take-Home-Message">
      <MainHeadline>Take-Home-Message</MainHeadline><Pgraph>Zusammenfassend betrachtet, liegen mit dem Kernfragebogen und der Matrix <Mark2>A&#8211;Z Verfahrenselemente von Befragungen von Absolventinnen und Absolventen</Mark2> geeignete Instrumente vor, um die Durchf&#252;hrung von Befragungen von Absolventinnen und Absolventen an den medizinischen Fakult&#228;ten zu unterst&#252;tzen. Beide Instrumente k&#246;nnen als Anhang 1 <AttachmentLink attachmentNo="1"/> und Anhang 2 <AttachmentLink attachmentNo="2"/> zu diesem Bericht heruntergeladen werden.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>The authors declare that they have no competing interests. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>Die Autoren und Autorinnen erkl&#228;ren, dass sie keinen Interessenkonflikt im Zusammenhang mit diesem Artikel haben.</Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Teichler U</RefAuthor>
        <RefTitle>Potentiale und Ertr&#228;ge von Absolventenstudien</RefTitle>
        <RefYear>2002</RefYear>
        <RefJournal>Sozialwissenschaft Berufspraxis</RefJournal>
        <RefPage>9-32</RefPage>
        <RefTotal>Teichler U. Potentiale und Ertr&#228;ge von Absolventenstudien. Sozialwissenschaft Berufspraxis. 2002;25(1&#47;2):9-32. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;nbn-resolving.org&#47;urn:nbn:de:0168-ssoar-37826</RefTotal>
        <RefLink>https:&#47;&#47;nbn-resolving.org&#47;urn:nbn:de:0168-ssoar-37826</RefLink>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Arnold E</RefAuthor>
        <RefTitle>Absolventenstudien zur Unterst&#252;tzung von Studienreformprojekten: wie l&#228;sst sich der Nutzen steigern&#63;</RefTitle>
        <RefYear>2003</RefYear>
        <RefJournal>Sozialwissenschaft Berufspraxis</RefJournal>
        <RefPage>415-428</RefPage>
        <RefTotal>Arnold E. Absolventenstudien zur Unterst&#252;tzung von Studienreformprojekten: wie l&#228;sst sich der Nutzen steigern&#63; Sozialwissenschaft Berufspraxis. 2003;26(4):415-428. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;nbn-resolving.org&#47;urn:nbn:de:0168-ssoar-38133</RefTotal>
        <RefLink>https:&#47;&#47;nbn-resolving.org&#47;urn:nbn:de:0168-ssoar-38133</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Krahn B</RefAuthor>
        <RefAuthor>Rietz C</RefAuthor>
        <RefAuthor>Rudinger G</RefAuthor>
        <RefTitle>Anforderungen an Verfahren f&#252;r Qualit&#228;tssicherung und Evaluation von Forschung und Lehre im Bologna-Prozess</RefTitle>
        <RefYear>2008</RefYear>
        <RefBookTitle>Evaluation und Qualit&#228;tssicherung vpn Forschung und Lehre im Bologna-Prozess</RefBookTitle>
        <RefPage>9-14</RefPage>
        <RefTotal>Krahn B, Rietz C, Rudinger G. Anforderungen an Verfahren f&#252;r Qualit&#228;tssicherung und Evaluation von Forschung und Lehre im Bologna-Prozess. In: Rudinger G, Krahn B, Rietz C, editors. Evaluation und Qualit&#228;tssicherung vpn Forschung und Lehre im Bologna-Prozess. G&#246;ttingen: V&#38;R unipress; 2008. p.9-14.</RefTotal>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>TU Dresden</RefAuthor>
        <RefAuthor>Zentrum f&#252;r Qualit&#228;tsanalyse</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2020</RefYear>
        <RefBookTitle>S&#228;chsische Absolventenstudie</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>TU Dresden, Zentrum f&#252;r Qualit&#228;tsanalyse. S&#228;chsische Absolventenstudie. Dresden: TU Dresden; 2020. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;tu-dresden.de&#47;zqa&#47;forschung&#47;Forschungsprojekte&#47;saechsische-absolventenstudie</RefTotal>
        <RefLink>https:&#47;&#47;tu-dresden.de&#47;zqa&#47;forschung&#47;Forschungsprojekte&#47;saechsische-absolventenstudie</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Universit&#228;t Konstanz</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>Kooperationsprojekt Baden-W&#252;rttembergische Absolventenstudie</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Universit&#228;t Konstanz. Kooperationsprojekt Baden-W&#252;rttembergische Absolventenstudie. Konstanz: Universit&#228;t Konstanz; 2015. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;www.uni-konstanz.de&#47;qualitaetsmanagement&#47;aktuelles&#47;aktuelles&#47;Kooperationsprojekt-Baden-Wuerttembergische-Absolventenstudie-veroeffentlicht-Gesamtbericht&#47;</RefTotal>
        <RefLink>https:&#47;&#47;www.uni-konstanz.de&#47;qualitaetsmanagement&#47;aktuelles&#47;aktuelles&#47;Kooperationsprojekt-Baden-Wuerttembergische-Absolventenstudie-veroeffentlicht-Gesamtbericht&#47;</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>Leitner M</RefAuthor>
        <RefTitle>35 Jahre Absolventenstudien in Deutschland - eine Bilanz</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Beitr Hochschulforsch</RefJournal>
        <RefPage>8-20</RefPage>
        <RefTotal>Leitner M. 35 Jahre Absolventenstudien in Deutschland - eine Bilanz. Beitr Hochschulforsch. 2009;31(3):8-20.</RefTotal>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Giesler M</RefAuthor>
        <RefAuthor>Kunz K</RefAuthor>
        <RefTitle>&#34;Closing the Gap&#34;: Ergebnisse einer Bestandsaufnahme zu Qualit&#228;tssicherungsma&#223;nahmen der Lehre an medizinischen Fakult&#228;ten</RefTitle>
        <RefYear>2021</RefYear>
        <RefJournal>Z Evid Fortbild Qual Gesundhwes</RefJournal>
        <RefPage>51-60</RefPage>
        <RefTotal>Giesler M, Kunz K. &#34;Closing the Gap&#34;: Ergebnisse einer Bestandsaufnahme zu Qualit&#228;tssicherungsma&#223;nahmen der Lehre an medizinischen Fakult&#228;ten. Z Evid Fortbild Qual Gesundhwes. 2021;164:51-60. DOI: 10.1016&#47;j.zefq.2021.05.008</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.zefq.2021.05.008</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Falk S</RefAuthor>
        <RefAuthor>Reimer M</RefAuthor>
        <RefTitle>Zum Mehrwert von Absolventenstudien f&#252;r das Qualit&#228;tsmanagement. Konzeption und Ziele der Bayrischen Absolventenstudien</RefTitle>
        <RefYear>2018</RefYear>
        <RefBookTitle>Absolventenstudien und Qualit&#228;tsmanagement. Best Practices an deutschen und &#246;sterreichischen Hochschulen</RefBookTitle>
        <RefPage>13-27</RefPage>
        <RefTotal>Falk S, Reimer M. Zum Mehrwert von Absolventenstudien f&#252;r das Qualit&#228;tsmanagement. Konzeption und Ziele der Bayrischen Absolventenstudien. In: Falk S, Reimer M, Schmidt U, editors. Absolventenstudien und Qualit&#228;tsmanagement. Best Practices an deutschen und &#246;sterreichischen Hochschulen. M&#252;nster: Waxmann; 2018. p.13-27.</RefTotal>
      </Reference>
      <Reference refNo="21">
        <RefAuthor>Janson K</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2013</RefYear>
        <RefBookTitle>Absolventenstudien. Ihre Bedeutung f&#252;r die Hochschulentwicklung. Eine Empirische Betrachtung</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Janson K. Absolventenstudien. Ihre Bedeutung f&#252;r die Hochschulentwicklung. Eine Empirische Betrachtung. G&#246;ttingen: Waxmann; 2013.</RefTotal>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>Wissenschaftsrat</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2014</RefYear>
        <RefBookTitle>Empfehlungen zur Weiterentwicklung des Medizinstudiums in Deutschland auf Grundlage einer Bestandsaufnahme der humanmedizinischen Modellstudieng&#228;nge. Drs. 4017-14</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Wissenschaftsrat. Empfehlungen zur Weiterentwicklung des Medizinstudiums in Deutschland auf Grundlage einer Bestandsaufnahme der humanmedizinischen Modellstudieng&#228;nge. Drs. 4017-14. Dresden: Wissenschaftsrat; 2014.</RefTotal>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Paulmann V</RefAuthor>
        <RefTitle>Determinanten der Berufszufriedenheit von jungen Medizinerinnen und Medizinern. Ergebnisse der Absolventenbefragung der Medizinischen Hochschule Hannover 2010 bis 2014</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Beitr Hochschulforsch</RefJournal>
        <RefPage>82-107</RefPage>
        <RefTotal>Paulmann V. Determinanten der Berufszufriedenheit von jungen Medizinerinnen und Medizinern. Ergebnisse der Absolventenbefragung der Medizinischen Hochschule Hannover 2010 bis 2014. Beitr Hochschulforsch. 2016;38(4):82-107.</RefTotal>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Van den Bussche H</RefAuthor>
        <RefAuthor>Selch S</RefAuthor>
        <RefAuthor>Boczor S</RefAuthor>
        <RefAuthor>Meyer J</RefAuthor>
        <RefAuthor>Nehls S</RefAuthor>
        <RefAuthor>Kocalevent R</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2017</RefYear>
        <RefBookTitle>Karriereverl&#228;ufe von &#196;rztinnen und &#196;rzten in der fach&#228;rztlichen Weiterbildung (KarMed)</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Van den Bussche H, Selch S, Boczor S, Meyer J, Nehls S, Kocalevent R. Karriereverl&#228;ufe von &#196;rztinnen und &#196;rzten in der fach&#228;rztlichen Weiterbildung (KarMed). Hamburg: UKE Hamburg; 2017. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;www.uke.de&#47;kliniken-institute&#47;institute&#47;allgemeinmedizin&#47;forschung&#47;karriereverl&#37;C3&#37;A4ufe-von-&#37;C3&#37;A4rztinnen-und-&#37;C3&#37;A4rzten-w&#37;C3&#37;A4hrend-der-fach&#37;C3&#37;A4rztlichen-weiterbildung.html</RefTotal>
        <RefLink>https:&#47;&#47;www.uke.de&#47;kliniken-institute&#47;institute&#47;allgemeinmedizin&#47;forschung&#47;karriereverl&#37;C3&#37;A4ufe-von-&#37;C3&#37;A4rztinnen-und-&#37;C3&#37;A4rzten-w&#37;C3&#37;A4hrend-der-fach&#37;C3&#37;A4rztlichen-weiterbildung.html</RefLink>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>Fabry G</RefAuthor>
        <RefTitle>Warum Hochschuldidaktik&#63; Die Perspektive der Humanmedizin</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Z Didiaktik Rechtswissenschaft</RefJournal>
        <RefPage>136-151</RefPage>
        <RefTotal>Fabry G. Warum Hochschuldidaktik&#63; Die Perspektive der Humanmedizin. Z Didiaktik Rechtswissenschaft. 2016;3(2):136-151. DOI: 10.5771&#47;2196-7261-2016-2-136</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.5771&#47;2196-7261-2016-2-136</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Heide S</RefAuthor>
        <RefAuthor>Pante SV</RefAuthor>
        <RefAuthor>Fleig A</RefAuthor>
        <RefAuthor>M&#246;ltner A</RefAuthor>
        <RefAuthor>Leis</RefAuthor>
        <RefAuthor>S</RefAuthor>
        <RefAuthor>Fritz AH</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Fischer MR</RefAuthor>
        <RefTitle>Individual and institutional influencing factors on completion rates in a medical education master&#39;s program in Germany</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>GMS J Med Educ</RefJournal>
        <RefPage>Doc75</RefPage>
        <RefTotal>Heide S, Pante SV, Fleig A, M&#246;ltner A, Leis, S, Fritz AH, J&#252;nger J, Fischer MR. Individual and institutional influencing factors on completion rates in a medical education master&#39;s program in Germany. GMS J Med Educ. 2019; 36(6):Doc75. DOI: 10.3205&#47;zma001283</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma001283</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Giesler M</RefAuthor>
        <RefAuthor>Forster J</RefAuthor>
        <RefAuthor>Biller S</RefAuthor>
        <RefAuthor>Fabry G</RefAuthor>
        <RefTitle>Entwicklung eines Fragebogens zur Erfassung von Kompetenzen in der Medizin: Ergebnisse zur Reliabilit&#228;t und Validit&#228;t</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc31</RefPage>
        <RefTotal>Giesler M, Forster J, Biller S, Fabry G. Entwicklung eines Fragebogens zur Erfassung von Kompetenzen in der Medizin: Ergebnisse zur Reliabilit&#228;t und Validit&#228;t. GMS Z Med Ausbild. 2011;28(2):Doc31. DOI: 10.3205&#47;zma000743</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma000743</RefLink>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>Bundesministerium f&#252;r Bildung und Forschung</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2018</RefYear>
        <RefBookTitle>Stav - Studierendenauswahl-Verbund</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Bundesministerium f&#252;r Bildung und Forschung. Stav - Studierendenauswahl-Verbund. Berlin: Bundesministerium f&#252;r Bildung und Forschung; 2018. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;www.gesundheitsforschung-bmbf.de&#47;de&#47;stav-studierendenauswahl-verbund-8229.php</RefTotal>
        <RefLink>https:&#47;&#47;www.gesundheitsforschung-bmbf.de&#47;de&#47;stav-studierendenauswahl-verbund-8229.php</RefLink>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>Galesic M</RefAuthor>
        <RefAuthor>Bosnjak M</RefAuthor>
        <RefTitle>Effects of Questionnaire Length on Participation and Indicators of Response Quality in a Web Survey</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Public Opinion Quart</RefJournal>
        <RefPage>349-360</RefPage>
        <RefTotal>Galesic M, Bosnjak M. Effects of Questionnaire Length on Participation and Indicators of Response Quality in a Web Survey. Public Opinion Quart. 2009;73(2):349-360. DOI: 10.1093&#47;poq&#47;nfp031</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1093&#47;poq&#47;nfp031</RefLink>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>Zimmermann T</RefAuthor>
        <RefAuthor>Wegscheider K</RefAuthor>
        <RefAuthor>van der Bussche H</RefAuthor>
        <RefTitle>Der Ausbildungsvergleich (I): Die Erfolgsraten im schriftlichen Teil der &#196;rztlichen Vorpr&#252;fung k&#246;nnen ein irref&#252;hrendes Bild der Qualit&#228;t eines Standortes geben</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>Dtsch &#196;rztebl</RefJournal>
        <RefPage>1732-A1738</RefPage>
        <RefTotal>Zimmermann T, Wegscheider K, van der Bussche H. Der Ausbildungsvergleich (I): Die Erfolgsraten im schriftlichen Teil der &#196;rztlichen Vorpr&#252;fung k&#246;nnen ein irref&#252;hrendes Bild der Qualit&#228;t eines Standortes geben. Dtsch &#196;rztebl. 2006;103(25): 1732-A1738.</RefTotal>
      </Reference>
      <Reference refNo="18">
        <RefAuthor>Bortz J</RefAuthor>
        <RefAuthor>D&#246;ring N</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2006</RefYear>
        <RefBookTitle>Forschungsmethoden und Evaluation f&#252;r Human- und Sozialwissenschaftler</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Bortz J, D&#246;ring N. Forschungsmethoden und Evaluation f&#252;r Human- und Sozialwissenschaftler. 4. Auflage. Heidelberg: Springer; 2006. DOI: 10.1007&#47;978-3-540-33306-7</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;978-3-540-33306-7</RefLink>
      </Reference>
      <Reference refNo="19">
        <RefAuthor>Ramm M</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2014</RefYear>
        <RefBookTitle>Response, Stichprobe und Repr&#228;sentativit&#228;t. Zwei Dokumentationen zum Deutschen Studierendensurvey (DSS)</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Ramm M. Response, Stichprobe und Repr&#228;sentativit&#228;t. Zwei Dokumentationen zum Deutschen Studierendensurvey (DSS). Konstanz: Universit&#228;t Konstanz; 2014. (Hefte zur Bildungs-und Hochschulforschung; 72). Zug&#228;nglich unter&#47;available from: http:&#47;&#47;nbn-resolving.de&#47;urn:nbn:de:bsz:352-0-262244</RefTotal>
        <RefLink>http:&#47;&#47;nbn-resolving.de&#47;urn:nbn:de:bsz:352-0-262244</RefLink>
      </Reference>
      <Reference refNo="20">
        <RefAuthor>Multrus F</RefAuthor>
        <RefAuthor>Majer S</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2017</RefYear>
        <RefBookTitle>Methodenbericht zum 13. Studierendensurvey. Vergleich Papier-Onlinebefragung. Werkstattbericht</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Multrus F, Majer S. Methodenbericht zum 13. Studierendensurvey. Vergleich Papier-Onlinebefragung. Werkstattbericht. Konstanz: Universit&#228;t Konstanz; 2017. (Hefte zur Bildungs- und Hochschulforschung; 95). Zug&#228;nglich unter&#47;available from: http:&#47;&#47;nbn-resolving.de&#47;urn:nbn:de:bsz:352-2-1igvkvziv4mxr2</RefTotal>
        <RefLink>http:&#47;&#47;nbn-resolving.de&#47;urn:nbn:de:bsz:352-2-1igvkvziv4mxr2</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 1: Areas of application and the function of graduate surveys at universities based on Janson &#91;21&#93;</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 1: Anwendungsgebiete und Funktionen von Befragungen von Absolventinnen und Absolventen an Hochschulen in Anlehnung an Janson &#91;21&#93;</Mark1></Pgraph></Caption>
        </Table>
        <Table format="png">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 2: Core and optional questions for surveying graduates (see attachment 1 </Mark1></Pgraph><Pgraph><Mark1>in German) according to topic.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 2: Kern- und optionale Fragen des Fragebogens zur Befragung von Absolventinnen und Absolventen (siehe Anhang 1) nach Inhaltsbereichen gegliedert.</Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>2</NoOfTables>
      </Tables>
      <Figures>
        <Figure format="png" height="521" width="885">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 1: Stakeholders in medical education who use information from graduate surveys, or contribute to them, or gather the information themselves.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 1: Stakeholder in der medizinischen Ausbildung, die Daten aus Befragungen von Absolventinnen und Absolventen nutzen, zu ihnen beitragen oder z.T. selbst erheben.</Mark1></Pgraph></Caption>
        </Figure>
        <NoOfPictures>1</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <Attachment>
          <MediaNo>1</MediaNo>
          <MediaID filename="zma001531.a1en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment&#95;1.pdf" size="1820155" url="">1en</MediaID>
          <MediaID filename="zma001531.a1de.pdf" language="de" mimeType="application/pdf" origFilename="Attachment&#95;1.pdf" size="1820155" url="">1de</MediaID>
          <AttachmentTitle language="en">in German: Befragung von Absolventinnen und Absolventen des Studiengangs Humanmedizin</AttachmentTitle>
          <AttachmentTitle language="de">Befragung von Absolventinnen und Absolventen des Studiengangs Humanmedizin</AttachmentTitle>
        </Attachment>
        <Attachment>
          <MediaNo>2</MediaNo>
          <MediaID filename="zma001531.a2en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment&#95;2.pdf" size="2490780" url="">2en</MediaID>
          <MediaID filename="zma001531.a2de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang&#95;2.pdf" size="2625796" url="">2de</MediaID>
          <AttachmentTitle language="en">Procedural elements of graduate surveys</AttachmentTitle>
          <AttachmentTitle language="de">A&#8211;Z Verfahrenselemente von Befragungen von Absolventinnen und Absolventen</AttachmentTitle>
        </Attachment>
        <NoOfAttachments>2</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>