<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<!DOCTYPE GmsArticle SYSTEM "http://www.egms.de/dtd/2.0.34/GmsArticle.dtd">
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001588</Identifier>
    <IdentifierDoi>10.3205/zma001588</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0015882</IdentifierUrn>
    <ArticleType language="en">article</ArticleType>
    <ArticleType language="de">Artikel</ArticleType>
    <TitleGroup>
      <Title language="en">Final-year information on didactic and organizational issues for students and supervising physicians &#8211; project report on the development and implementation of the cross-site website PJ-input</Title>
      <TitleTranslated language="de">Didaktische und organisatorische Informationen rund um das Praktische Jahr f&#252;r Studierende und Lehrende &#8211; Projektbericht &#252;ber die Entwicklung und Implementierung der standort&#252;bergreifenden Website PJ-input</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>Homberg</Lastname>
          <LastnameHeading>Homberg</LastnameHeading>
          <Firstname>Angelika</Firstname>
          <Initials>A</Initials>
        </PersonNames>
        <Address language="en">Medical Faculty Mannheim, Heidelberg University, Division for Study and Teaching Development, Department of Medical Education Research, Theodor-Kutzer-Ufer 1-3, D-68167 Mannheim, Germany<Affiliation>Medical Faculty Mannheim, Heidelberg University, Division for Study and Teaching Development, Department of Medical Education Research, Mannheim, Germany</Affiliation></Address>
        <Address language="de">Medizinische Fakult&#228;t Mannheim der Universit&#228;t Heidelberg, Abteilung Medizinische Ausbildungsforschung, Gesch&#228;ftsbereich Studium und Lehrentwicklung, Theodor-Kutzer-Ufer 1-3, 68167 Mannheim, Deutschland<Affiliation>Medizinische Fakult&#228;t Mannheim der Universit&#228;t Heidelberg, Abteilung Medizinische Ausbildungsforschung, Gesch&#228;ftsbereich Studium und Lehrentwicklung, Mannheim, Deutschland</Affiliation></Address>
        <Email>angelika.homberg&#64;medma.uni-heidelberg.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Narci&#223;</Lastname>
          <LastnameHeading>Narci&#223;</LastnameHeading>
          <Firstname>Elisabeth</Firstname>
          <Initials>E</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical Faculty Mannheim, Heidelberg University, Competence Center for final-year education Baden-W&#252;rttemberg, Mannheim, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Fakult&#228;t Mannheim der Universit&#228;t Heidelberg, Kompetenzzentrum Praktisches Jahr Baden-W&#252;rttemberg, Gesch&#228;ftsbereich Studium und Lehrentwicklung, Mannheim, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Thiesbonenkamp-Maag</Lastname>
          <LastnameHeading>Thiesbonenkamp-Maag</LastnameHeading>
          <Firstname>Julia</Firstname>
          <Initials>J</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical Faculty Mannheim, Heidelberg University, Division for Study and Teaching Development, Mannheim, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Fakult&#228;t Mannheim der Universit&#228;t Heidelberg, Gesch&#228;ftsbereich Studium und Lehrentwicklung, Mannheim, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Heindl</Lastname>
          <LastnameHeading>Heindl</LastnameHeading>
          <Firstname>Felix</Firstname>
          <Initials>F</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical Faculty Ulm, Competence Center eEducation Baden-W&#252;rttemberg, Ulm, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Fakult&#228;t Ulm, Kompetenzzentrum eEducation in der Medizin BW, Ulm, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Sch&#252;ttpelz-Brauns</Lastname>
          <LastnameHeading>Sch&#252;ttpelz-Brauns</LastnameHeading>
          <Firstname>Katrin</Firstname>
          <Initials>K</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical Faculty Mannheim, Heidelberg University, Division for Study and Teaching Development, Department of Medical Education Research, Mannheim, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Fakult&#228;t Mannheim der Universit&#228;t Heidelberg, Abteilung Medizinische Ausbildungsforschung, Gesch&#228;ftsbereich Studium und Lehrentwicklung, Mannheim, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">final year</Keyword>
      <Keyword language="en">internet</Keyword>
      <Keyword language="en">undergraduate medical education</Keyword>
      <Keyword language="en">access to information</Keyword>
      <Keyword language="en">preceptorship</Keyword>
      <Keyword language="en">clinical competence</Keyword>
      <Keyword language="de">Praktisches Jahr</Keyword>
      <Keyword language="de">Internet</Keyword>
      <Keyword language="de">medizinische Ausbildung</Keyword>
      <Keyword language="de">Zugang zu Informationen</Keyword>
      <Keyword language="de">klinische Ausbildung</Keyword>
      <Keyword language="de">klinische Kompetenz</Keyword>
      <SectionHeading language="en">final year</SectionHeading>
      <SectionHeading language="de">Praktisches Jahr</SectionHeading>
    </SubjectGroup>
    <DateReceived>20211122</DateReceived>
    <DateRevised>20220712</DateRevised>
    <DateAccepted>20221031</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20230215</DatePublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>40</Volume>
        <Issue>1</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
      </Journal>
    </SourceGroup>
    <ArticleNo>6</ArticleNo>
    <Fundings>
      <Funding fundId="01PL17011C">Bundesministerium f&#252;r Bildung und Forschung (BMBF)</Funding>
      <Funding fundId="01PL17011D">Bundesministerium f&#252;r Bildung und Forschung (BMBF)</Funding>
    </Fundings>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph><Mark1>Zielsetzung: </Mark1>Die Ausbildung im Praktischen Jahr (PJ) gewinnt im Medizinstudium an Bedeutung und verlangt von Studierenden ein hohes Ma&#223; an Eigenverantwortung. Ausbildende &#196;rztinnen und &#196;rzte haben die Aufgabe, informelle Lernm&#246;glichkeiten bei der Arbeit mit und an Patientinnen und Patienten f&#252;r Studierende nutzbar zu machen und ihnen schrittweise Verantwortung zu &#252;bertragen. Sowohl Studierende als auch &#196;rztinnen und &#196;rzte haben einen hohen Informationsbedarf in Bezug auf Rahmenbedingungen oder zur didaktischen Umsetzung der Verantwortungs&#252;bergabe. Entsprechende Informationen und Unterst&#252;tzungsangebote wurden bislang seitens der Fakult&#228;ten nur punktuell und wenig standardisiert bereitgestellt. Im Verbundprojekt MERLIN des &#8222;Kompetenznetzes Lehre in der Medizin Baden-W&#252;rttemberg&#8220; wurde eine Plattform f&#252;r das PJ entwickelt und im Web freigeschaltet. Ziel war die B&#252;ndelung von Informationen, um Studierende und Lehrende in ihrem Lehr-Lernprozess zu unterst&#252;tzen und die Qualit&#228;t der Lehre im PJ zu verbessern.</Pgraph><Pgraph><Mark1>Projektbeschreibung: </Mark1>Der Entwicklungsprozess dieser Plattform verlief standort&#252;bergreifend in mehreren Schritten. Ausgehend von einer Bedarfsanalyse wurden Inhalte und Materialien zusammengestellt und strukturiert. Dieser Entwurf wurde mittels einer Simulation durch Studierende evaluiert und anschlie&#223;end &#252;berarbeitet. F&#252;r die technische Umsetzung wurde eine professionelle Internetagentur eingebunden. Die neu konzipierte Website <Mark2>PJ-input</Mark2> enth&#228;lt Bereiche f&#252;r Studierende und ausbildende &#196;rztinnen und &#196;rzte sowie fakult&#228;tsspezifische und  &#252;bergreifende Informationen rund um das PJ. Die fakult&#228;tsspezifischen Inhalte k&#246;nnen hierbei &#252;ber eine Eingabemaske direkt von den jeweiligen Standorten eingegeben und jederzeit aktualisiert werden. Durch die Bereitstellung didaktischer Materialien kann das kompetenzorientierte Lehren und Lernen im PJ unterst&#252;tzt werden. Hierbei wurde beispielsweise das Konzept der Anvertraubaren Professionellen T&#228;tigkeiten (APT) aufgegriffen, welches Studierenden und Lehrenden Orientierung f&#252;r die schrittweise &#220;bernahme bzw. &#220;bergabe von Verantwortung gibt. Die Plattform wurde im Fr&#252;hjahr 2021 freigeschaltet. Das Nutzungsverhalten wird kontinuierlich &#252;ber die Webanwendung erfasst.</Pgraph><Pgraph><Mark1>Ergebnisse und Schlussfolgerung: </Mark1>Die Evaluationsergebnisse zeigen, dass die Website gut besucht und als unterst&#252;tzend wahrgenommen wird. Steigende Nutzungszahlen und die starke Frequentierung durch Studierende in den Bereichen &#8222;im PJ&#8220; und &#8222;nach dem PJ&#8220; der im MERLIN-Projekt beteiligten Fakult&#228;ten best&#228;tigen die zielgruppenorientierte Ausgestaltung und Nutzung. Die Seite sollte noch st&#228;rker f&#252;r Studierende vor dem PJ beworben werden, sowie &#252;ber die Landesgrenze hinweg und bei der Zielgruppe der Lehrenden. Es wird erwartet, dass eine deutschlandweite Einbindung der Fakult&#228;ten vor dem Hintergrund der neuen Approbationsordnung zur kompetenzorientierten Umgestaltung der Lehre und Standardisierung der Ausbildung im PJ einen wesentlichen Beitrag leistet.</Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph><Mark1>Objective: </Mark1>Final-year training is becoming increasingly important in medical studies and requires a high degree of personal responsibility from students. It is the task of supervising physicians to make informal learning opportunities available to students when working with and on patients and to gradually transfer responsibility to them. Both students and physicians have a great need for information regarding the contextual conditions and didactic realization of this transfer of responsibility. Up to now, the faculties have only provided information and support in a sporadic manner and with little standardization. With MERLIN, the joint project undertaken by the Competence Network for Teaching Medicine in Baden-W&#252;rttemberg, a platform for the final year was developed and released on the web. The aim was to bundle information in order to support students and supervising physicians in their teaching-learning process and to improve the quality of teaching in the final year.</Pgraph><Pgraph><Mark1>Project description:</Mark1> The development process of this platform took place in several steps across all faculties. Content and materials were compiled and structured based on a needs assessment. The first draft was evaluated by means of a simulation by students and then revised. A professional internet agency was involved for the technical implementation. The newly designed website <Mark2>PJ-input</Mark2> (&#8220;PJ&#8221; being the abbreviation for &#8220;Praktisches Jahr&#8221;, the final year) contains areas for students and supervising physicians, as well as faculty-specific and general information about the final year. Faculty-specific content can be entered directly by the respective staff via an input mask and updated at any time. The provision of didactic materials can support competency-oriented teaching and learning in the final year. Here, for example, the concept of the Entrustable Professional Activities (EPA) was taken up, which gives students and supervising physicians orientation for the gradual assumption or transfer of responsibility. The platform was launched in spring 2021. Usage behavior is continuously recorded via the web application.</Pgraph><Pgraph><Mark1>Results and conclusion:</Mark1> The evaluation results show that the website is visited often and perceived as supportive. Increasing usage figures and the high frequency of use by students in the sections &#8220;im PJ&#8221; (during the final year) and &#8220;nach dem PJ&#8221; (after the final year) for the faculties involved in the MERLIN project confirm the target group-oriented design and use. The site should be promoted even more to pre-final-year students, as well as across state borders and to the target group of faculties. It is expected that nationwide faculty participation will make a significant contribution to the competency-based shift in teaching and the standardization of training during the final year of study under the new licensing regulations.</Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="Introduction">
      <MainHeadline>Introduction</MainHeadline><Pgraph>Various social and political developments influence healthcare provision and also have an indirect impact on training in the healthcare professions. For example, new licensing regulations for dentists and for psychotherapists were passed on September 22, 2021. The final year of training as the last stage of medical studies is also subject to continuous processes of change and adaptation, for example, due to the nationwide mobility in the final year introduced by the 2013 amendment (of July 17, 2012) to the 2002 licensing regulations for physicians (Approbationsordnung f&#252;r &#196;rztinnen und &#196;rzte, &#196;ApprO) and the obligation to train according to the logbook. Already years ago, calls were made for the development of transferable and substantial learning objectives, as well as a better structuring and standardization of the final year <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>. In 2018 a commission of experts for the 2020 Master Plan for Medical Studies has drawn up recommendations for restructuring medical studies. These provide for a nationwide restructuring of the final year. For example, a quarter for ambulatory medicine is to be implemented in the future and the goal of independent patient care by final-year students is to be increasingly pursued <TextLink reference="3"></TextLink>. While in the current medical licensing regulations two paragraphs provide for the regulation of the final year (&#196;ApprO 2002, last amended by Art. 3 G v. 16.3.2020 I 497, section 1 &#167;&#167; 3, 4), in the draft bill for the new licensing regulations, 29 paragraphs are dedicated to this study phase (&#196;ApprO, November 17, 2020, chapter 1 section 3 &#167;&#167; 43 ff.). Even if this very detailed regulation of the final year is to be criticized, it must be stated that the potential of final-year training is currently not exploited <TextLink reference="4"></TextLink>. The teaching-learning setting in the final year is characterized by working directly on patients in university hospitals, teaching hospitals or teaching practices and differs significantly from that of the preceding years. Most of the teaching takes place locally at the respective place of assignment. Learning cannot be planned for easily because the locations, contact persons, medical staff and patients are constantly changing. This requires a high degree of initiative on the part of the students in order for them to benefit from the predominantly informal learning opportunities <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. Supervising physicians also face the challenge of preparing students for their future careers in addition to managing their own patient care responsibilities. This is particularly true for the final-year study phase, since training also takes place at teaching hospitals and teaching practices that are otherwise not or hardly involved in student teaching. With the planned introduction of a mandatory quarter in an ambulatory setting, the proportion of these institutions will increase even further. The educational mission goes beyond simply teaching knowledge and skills. Rather, it is about supporting students as they grow into the medical role and assume responsibility, and ultimately about fostering appropriate identity development <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>. Both students and supervising physicians face the challenge of adequately informing themselves and selecting appropriate learning environments and strategies. Students need practice opportunities that are appropriate to their skills and provide the right level of challenge <TextLink reference="10"></TextLink>. In addition, there is also a need for continuity, relationship building and establishing trust <TextLink reference="6"></TextLink>. Last but not least, the specified learning objectives must be kept in mind, and the formal and legal regulations must be met. Currently in Germany, the teaching standards applicable to the final year are implemented in a largely inconsistent manner <TextLink reference="11"></TextLink>. Although each faculty is required to provide logbooks with the educational objectives to be achieved, these have been designed very heterogeneously and pursue different goals <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>, <TextLink reference="14"></TextLink>, <TextLink reference="15"></TextLink>, <TextLink reference="16"></TextLink>. In general, previous logbooks focused on isolated activities, such as drawing blood, performing an anamnesis or a specific examination technique, which students were expected to master at the end of the final year. For this, the didactic three-step approach was established: demonstration, multiple supervised performances, routine. In the future, the emphasis will be on students working more and more independently and assuming responsibility for entire sets of activities. The assignment of these activities will be based on the Entrustable Professional Activities (EPA) <TextLink reference="17"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>. These are parts of authentic medical activities that can be evaluated by observation and gradually entrusted to students <TextLink reference="20"></TextLink>. Guidelines for the implementation of EPA in the subjects of surgery, internal medicine, and general medicine have been prepared by a working group of the German Medical Faculty Association (MFT) &#91;<Hyperlink href="https:&#47;&#47;medizinische-fakultaeten.de&#47;themen&#47;studium&#47;neue-konzepte-fuer-die-ausbildung-im-praktischen-jahr&#47;">https:&#47;&#47;medizinische-fakultaeten.de&#47;themen&#47;studium&#47;neue-konzepte-fuer-die-ausbildung-im-praktischen-jahr&#47;</Hyperlink>&#93;. Also, a set of EPAs defines the graduate profile of medical studies &#91;<Hyperlink href="https:&#47;&#47;www.nklm.de">https:&#47;&#47;www.nklm.de</Hyperlink>&#93; in the new version of the National Competency-based Catalogue of Learning Objectives for Undergraduate Medical Education (NKLM 2.0) published by the MFT on April 27, 2021. According to the draft bill for the new licensing regulations (&#196;ApprO 2025), supervising physicians will have a mentoring role in the future (draft bill &#196;ApprO 2020, &#167; 50).</Pgraph><SubHeadline2>MERLIN project: final-year information platform</SubHeadline2><Pgraph>These developments and influences were taken up in MERLIN, the joint project on competence-oriented learning, teaching and assessing in medicine undertaken by the Competence Network for Teaching Medicine in Baden-W&#252;rttemberg. One focus was placed on the competence-oriented further development of the final year. In the course of further developing this training phase, instruments were created for a better standardization and structuring of the final-year training and for nationwide use beyond the locations in Baden-W&#252;rttemberg. The aim was to support the transfer of competencies acquired during the final-year training phase to the everyday working life of a physician. At the same time, the contextual conditions which are conducive to learning and favor the implementation of competency-oriented teaching were investigated <TextLink reference="21"></TextLink>, <TextLink reference="22"></TextLink>. Here it became apparent that flexible supports and clear communication of the legal structures and didactic possibilities are essential, especially due to the time-limited resources of the supervising physicians. In the first project phase, a manual, along with other things, was developed for supervising physicians that includes information on the process, organization, rights and obligations, and teaching opportunities regarding the final year <TextLink reference="23"></TextLink>. In the second project phase (2017 to 2021), this and other information was made available to supervising physicians and students via a site-wide website. Providing information and learning materials without access restrictions via the Internet can have positive effects on learning behaviors <TextLink reference="24"></TextLink> and offers a long-term, low-cost and low-threshold way to reach a broad readership <TextLink reference="25"></TextLink>. </Pgraph><Pgraph>Based on these considerations, the development and implementation of a non-commercial final-year platform was defined as a work package of the MERLIN project. The website should have a high user and practice orientation and provide both final-year students and supervising physicians with comprehensive, low-threshold and site-wide information and learning materials over the entire course of the final year. The website is intended to assist final-year students in planning and organizing the final year and the self-study phases on their own. The general features of the final year, such as nationwide mobility, are to be taken into account. The website should also contribute to the professionalization of the supervising physicians, inform them about current contexts and support them in the competency-oriented implementation of teaching.</Pgraph><Pgraph>The following traces and reflects on the development, implementation and evaluation of the information platform.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Einleitung">
      <MainHeadline>Einleitung</MainHeadline><Pgraph>Verschiedene gesellschaftliche und politische Entwicklungen beeinflussen die Gesundheitsversorgung und wirken sich mittelbar auch auf die Ausbildung in den Gesundheitsberufen aus. So wurden beispielsweise die neue Approbationsordnung f&#252;r Zahn&#228;rzte und Zahn&#228;rztinnen sowie die f&#252;r Psychotherapeutinnen und Psychotherapeuten am 22. September 2021 verabschiedet. Auch das Praktische Jahr (PJ) als letzter Ausbildungsabschnitt des Medizinstudiums ist kontinuierlichen Ver&#228;nderungs- und Anpassungsprozessen unterworfen, beispielsweise durch die in der Novellierung der Approbationsordnung f&#252;r &#196;rzte (&#196;ApprO) 2013 eingef&#252;hrte bundesweite Mobilit&#228;t im Praktischen Jahr und die Verpflichtung nach dem Logbuch auszubilden (&#196;nderungsnovelle zur &#196;ApprO 2002 vom 17.07.2012). Schon vor Jahren wurde die Entwicklung von &#252;bertragbaren und gehaltvollen Lernzielen sowie einer besseren Strukturierung und Standardisierung des PJ eingefordert <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>. 2018 erarbeitete eine Expertenkommission zum Masterplan Medizinstudium 2020 Empfehlungen f&#252;r die Neustrukturierung des Medizinstudiums. Diese sehen bundesweit eine Umstrukturierung des PJ vor. Beispielsweise soll k&#252;nftig ein Quartal f&#252;r ambulante Medizin implementiert und verst&#228;rkt das Ziel der eigenst&#228;ndigen Versorgung von Patientinnen und Patienten durch PJ-Studierende verfolgt werden <TextLink reference="3"></TextLink>. W&#228;hrend in der aktuellen &#196;Appro zwei Paragraphen f&#252;r die Regulierung des PJ vorgesehen sind (&#196;ApprO 2002, zuletzt ge&#228;ndert durch Art. 3 G v. 16.3.2020 I 497, Abs.1 &#167;&#167; 3, 4), widmen sich im Referentenentwurf f&#252;r die neue Approbationsordnung 29 Paragraphen diesem Studienabschnitt (&#196;ApprO vom 17. November 2020, Kapitel 1 Abs.3 &#167;&#167; 43 ff). Auch wenn diese sehr detaillierte Regulierung des PJ zu kritisieren ist, muss man doch festhalten, dass das Potential der PJ-Ausbildung aktuell nicht ausgesch&#246;pft wird <TextLink reference="4"></TextLink>. Das Lehr-Lern-Setting im PJ ist durch die Arbeit direkt an Patientinnen und Patienten in Universit&#228;tskliniken, Lehrkrankenh&#228;usern oder Lehrpraxen gepr&#228;gt und unterscheidet sich wesentlich von dem des vorangegangenen Studiums. Die Lehre findet gr&#246;&#223;tenteils dezentral am jeweiligen Einsatzort statt. Das Lernen ist wenig planbar, da die Arbeitsorte, Ansprechpersonen, das medizinische Personal und die Patientinnen und Patienten stetig wechseln. Dies bedarf seitens der Studierenden ein hohes Ma&#223; an Eigeninitiative, um von den &#252;berwiegend informellen Lernm&#246;glichkeiten profitieren zu k&#246;nnen <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>.</Pgraph><Pgraph>Auch ausbildende &#196;rztinnen und &#196;rzte stehen vor der Herausforderung, neben der Bew&#228;ltigung der eigenen Aufgaben in der Patientenversorgung, Studierende auf ihren sp&#228;teren Beruf vorzubereiten. Dies gilt f&#252;r den Studienabschnitt des PJ in besonderem Ma&#223;e, da die Ausbildung auch an Lehrkrankenh&#228;usern und Lehrpraxen stattfindet, die anderweitig nicht oder kaum an der studentischen Lehre beteiligt sind. Mit der geplanten Einf&#252;hrung eines Pflicht-Abschnitts in einem ambulanten Setting wird der Anteil dieser Einrichtungen noch zunehmen. Der Ausbildungsauftrag geht &#252;ber die reine Vermittlung von Wissen und Fertigkeiten hinaus. Vielmehr geht es um die Unterst&#252;tzung von Studierenden beim Hineinwachsen in die &#228;rztliche Rolle und bei der &#220;bernahme von Verantwortung und letztendlich auch um die F&#246;rderung einer entsprechenden Identit&#228;tsentwicklung <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>. Sowohl Studierende als auch ausbildende &#196;rztinnen und &#196;rzte stehen vor der Herausforderung, sich ad&#228;quat zu informieren und passende Lernumgebungen und Strategien auszuw&#228;hlen. Studierende brauchen &#220;bungsm&#246;glichkeiten, die ihrem Kenntnisstand entsprechen und das richtige Ma&#223; an Herausforderung bieten <TextLink reference="10"></TextLink>. Dar&#252;ber hinaus bedarf es auch einer Kontinuit&#228;t, eines Beziehungsaufbaus und der Herstellung von Vertrauen <TextLink reference="6"></TextLink>. Nicht zuletzt m&#252;ssen die vorgegebenen Lernziele im Blick behalten und die formellen und rechtlichen Regelungen erf&#252;llt werden.</Pgraph><Pgraph>Aktuell werden in Deutschland die f&#252;r das PJ geltenden Standards in der Lehre weitgehend uneinheitlich umgesetzt <TextLink reference="11"></TextLink>. Zwar ist jede Fakult&#228;t verpflichtet, Logb&#252;cher mit den zu erreichenden Ausbildungszielen bereitzustellen. Diese wurden jedoch sehr heterogen ausgestaltet und verfolgen unterschiedliche Ziele <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>, <TextLink reference="14"></TextLink>, <TextLink reference="15"></TextLink>, <TextLink reference="16"></TextLink>. In der Regel konzentrierten sich die bisherigen Logb&#252;cher auf isolierte T&#228;tigkeiten, wie beispielsweise Blutabnehmen, das Durchf&#252;hren einer Anamnese oder einer bestimmten Untersuchungstechnik, die die Studierenden am Ende des PJ beherrschen sollten. Hierf&#252;r wurde der didaktische Dreischritt: Demonstration, mehrmalige supervidierte Ausf&#252;hrung, Routine festgelegt. K&#252;nftig soll der Schwerpunkt auf das zunehmend eigenst&#228;ndige Arbeiten der Studierenden und die &#220;bernahme von Verantwortung f&#252;r ganze T&#228;tigkeitspakete liegen. Die Zuweisung dieser T&#228;tigkeiten wird sich an den sogenannten Anvertraubaren Professionellen T&#228;tigkeiten (APT) orientieren <TextLink reference="17"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>. Dies sind Ausschnitte aus authentischen &#228;rztlichen T&#228;tigkeiten, die der Beobachtung zug&#228;nglich sind und Studierenden schrittweise anvertraut werden k&#246;nnen <TextLink reference="20"></TextLink>. Durch eine Arbeitsgruppe des Medizinischen Fakult&#228;tentags (MFT) wurden Leitf&#228;den f&#252;r die Umsetzung der APT in den F&#228;chern Chirurgie, Innere Medizin und Allgemeinmedizin erstellt &#91;<Hyperlink href="https:&#47;&#47;medizinische-fakultaeten.de&#47;themen&#47;studium&#47;neue-konzepte-fuer-die-ausbildung-im-praktischen-jahr&#47;">https:&#47;&#47;medizinische-fakultaeten.de&#47;themen&#47;studium&#47;neue-konzepte-fuer-die-ausbildung-im-praktischen-jahr&#47;</Hyperlink>&#93;. Auch in der am 27.04.2021 durch den MFT ver&#246;ffentlichten Neufassung des Nationalen Kompetenzbasierten Lernzielkatalogs Medizin (NKLM 2.0) definiert ein Set von APT das Absolventenprofil des Medizinstudiums &#91;<Hyperlink href="https:&#47;&#47;www.nklm.de">https:&#47;&#47;www.nklm.de</Hyperlink>&#93;. Laut dem Referentenentwurf f&#252;r die neue &#196;ApprO 2025 kommt ausbildenden &#196;rztinnen und &#196;rzten k&#252;nftig die Funktion einer Mentorin oder eines Mentors zu (Referentenentwurf &#196;ApprO 2020, &#167; 50).</Pgraph><SubHeadline2>MERLIN-Verbundprojekt: PJ-Informationsplattform</SubHeadline2><Pgraph>Diese Entwicklungen und Einfl&#252;sse wurden im Rahmen des MERLIN-Verbundprojektes &#8222;Kompetenzorientiert lernen, lehren und pr&#252;fen in der Medizin&#8220; des &#8222;Kompetenznetzes Lehre in der Medizin Baden-W&#252;rttemberg&#8220; aufgegriffen. Ein Schwerpunkt wurde auf die kompetenzorientierte Weiterentwicklung des PJ gelegt. Im Zuge der Weiterentwicklung dieses Ausbildungsabschnittes wurden Instrumente entwickelt, die zu einer besseren Standardisierung und Strukturierung der PJ-Ausbildung f&#252;hren und &#252;ber die Standorte in Baden-W&#252;rttemberg hinaus bundesweit eingesetzt werden k&#246;nnen. Ziel war es, in der Phase der PJ-Ausbildung den Transfer der im Studium erworbenen Kompetenzen in den &#228;rztlichen Berufsalltag zu unterst&#252;tzen. Begleitend wurde untersucht, welche Rahmenbedingungen lernf&#246;rderlich sind und die Umsetzung kompetenzorientierter Lehre beg&#252;nstigen <TextLink reference="21"></TextLink>, <TextLink reference="22"></TextLink>. Hier zeigte sich, dass insbesondere durch die zeitlich begrenzten Ressourcen der in die Klinik eingebundenen Lehrenden, flexible Unterst&#252;tzungsangebote und eine klare Kommunikation der rechtlichen Strukturen und didaktischen M&#246;glichkeiten ma&#223;geblich sind. In der ersten Projektphase wurde unter anderem ein Manual f&#252;r ausbildende &#196;rztinnen und &#196;rzte entwickelt, das Informationen zu Ablauf, Organisation, Rechten und Pflichten und zu Lehrgelegenheiten des PJ beinhaltet <TextLink reference="23"></TextLink>. In der zweiten Projektphase (2017 bis 2021) sollten diese und weitere Informationen &#252;ber eine standort&#252;bergreifende Website Lehrenden und Studierenden zur Verf&#252;gung gestellt werden. Die Bereitstellung von Informationen und Lernmaterialien ohne Zugangsbeschr&#228;nkungen &#252;ber das Internet kann positive Effekte auf das Lernverhalten haben <TextLink reference="24"></TextLink> und bietet eine langfristige, kosteng&#252;nstige und niederschwellige M&#246;glichkeit, um eine breite Leserschaft zu erreichen <TextLink reference="25"></TextLink>. </Pgraph><Pgraph>Aus diesen &#220;berlegungen heraus wurde die Entwicklung und Implementierung einer nicht-kommerziellen PJ-Plattform als ein Arbeitspaket des MERLIN-Projektes definiert. Die Website soll eine hohe Nutzer- und Praxisorientierung aufweisen und sowohl den PJ-Studierenden als auch ausbildenden &#196;rztinnen und &#196;rzten umfassend, niedrigschwellig und standort&#252;bergreifend Informations- und Lernmaterialien &#252;ber den gesamten Verlauf des PJ zur Verf&#252;gung stellen. PJ-Studierende sollen durch die Website eine Hilfestellung bei der eigenverantwortlichen Planung und praktischen Ausgestaltung des PJ und der Selbstlernphasen erhalten. Dabei sollen Rahmenbedingungen des PJ, wie beispielsweise die bundesweite Mobilit&#228;t, Rechnung getragen werden. Die Website soll auch zur Professionalisierung der ausbildenden &#196;rztinnen und &#196;rzten beitragen und diese &#252;ber aktuelle Rahmenbedingungen informieren und bei der kompetenzorientierten Umsetzung der Lehre unterst&#252;tzen.</Pgraph><Pgraph>Im Folgenden werden die Entwicklung, Implementation und Evaluation der Informationsplattform nachgezeichnet und reflektiert. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Project description">
      <MainHeadline>Project description</MainHeadline><Pgraph>The planning, development, implementation and evaluation of the information platform was carried out in a four-step process based on already known models of educational needs assessment in the field of higher education didactics and adult education <TextLink reference="26"></TextLink>, <TextLink reference="27"></TextLink>, <TextLink reference="28"></TextLink>. The individual steps are shown in figure 1 <ImgLink imgNo="1" imgType="figure"/> and described below.</Pgraph><SubHeadline2>Needs assessment</SubHeadline2><Pgraph>In order to align the website with the target group, information on specific issues was collected, analyzed and reflected upon during the planning phase.</Pgraph><Pgraph>Quantitative and qualitative methods were used to determine the needs. These different methods offer an advantage of both evaluating existing materials, such as the final-year manual, and generating new content <TextLink reference="29"></TextLink>. Different approaches were chosen for the survey (see figure 1 <ImgLink imgNo="1" imgType="figure"/>). Supervising physicians were asked about additional support needs regarding teaching in the final year after attending the didactic trainings offered by the faculty. The following main topics were identified through open-ended questions: teaching in clinical practice, legal issues, and using the logbook. The results of a survey on the use of the final-year manual showed that it was rated overall as useful and helpful <TextLink reference="30"></TextLink>. In addition, individual and group interviews were conducted with both supervising physicians and students with the question, &#8220;What information would you like to have on a website about the final year&#63;&#8221; The interviews were evaluated using content analysis <TextLink reference="31"></TextLink>. Here, the physicians particularly mentioned information about the assignment of the final-year students on the ward, such as working hours, breakdown of tertials, checklists for interviews, and legal information. The students requested more site-wide information, for example, on legal issues, hygiene and radiation protection regulations, regulations on absences and stays abroad, and support with subsequent applications. In addition, there was a desire for reference materials regarding knowledge specific to the final year, the integration of videos and tutorials, and for faculty-specific information, such as final-year procedures at the respective faculties. For this reason, and because many regulations and forms are faculty-specific, it should also be possible for the individual faculties to include this information in the appropriate places on the website itself.</Pgraph><SubHeadline2>Inventory</SubHeadline2><Pgraph>The inventory served to identify existing subject areas on the Internet. In addition, a comparison was made of the extent to which the content identified in the needs assessment goes beyond the existing range of information and the website to be developed can offer added value <TextLink reference="29"></TextLink>. To this end, German-language platforms on the topic of the final year were searched and analyzed according to the following questions:</Pgraph><Pgraph><UnorderedList><ListItem level="1">Which groups does the website target&#63;</ListItem><ListItem level="1">What is the website&#39;s objective&#63;</ListItem><ListItem level="1">What is the website&#39;s content&#63;</ListItem><ListItem level="1">Is the website freely accessible&#63; </ListItem></UnorderedList></Pgraph><Pgraph>It turned out that the existing resources primarily refer to the organization of the final year and are limited to the target group of final-year students. No information has been provided so far for supervising physicians, and large gaps in the area of support for teaching-learning processes were identified.</Pgraph><SubHeadline2>Compilation of the topics</SubHeadline2><Pgraph>When compiling the topics, the focus was placed on applicability to the final-year situation and the identified needs of the target group <TextLink reference="27"></TextLink>. First, important content was identified and coordinated with the medical faculties involved in MERLIN (Freiburg, Heidelberg, Mannheim, T&#252;bingen, Ulm) in planning meetings that also involved students. The content was structured according to the actions required of the final-year students and supervising physicians. Both groups should have access to the basic and practical knowledge they need for practice-related teaching and learning. The content for students was divided into three sections: &#8220;vor dem PJ&#8221; (before the final year), &#8220;im PJ&#8221; (during the final year ) and &#8220;nach dem PJ&#8221; (after the final year). Furthermore, a distinction was made between faculty-specific information, such as local contact persons or registration dates, and site-wide information, such as dates for medical examinations. For the supervising physicians, the focus was on areas such as organization, legal issues and didactic tools. The legal information was compiled by the Competence Center for final-year education in Baden-W&#252;rttemberg based on current legislation (e.g., &#167; 3 and &#167; 4 &#196;ApprO 2002, &#167; 276 BGB, &#167; 3 StGB, MuSchuG 2017; StrlSchV 2018) with the involvement of expert representatives (radiation protection officers, hygiene officers, etc.) and consideration of current literature <TextLink reference="32"></TextLink>, <TextLink reference="33"></TextLink>, <TextLink reference="34"></TextLink>.</Pgraph><SubHeadline2>Testing phase</SubHeadline2><Pgraph>The content and structure were first transferred to presentation software (Microsoft PowerPoint) to simulate the application. This enabled a pre-evaluation to check the navigation and user-friendliness in terms of content and form <TextLink reference="35"></TextLink>.</Pgraph><Pgraph>Figure 2 <ImgLink imgNo="2" imgType="figure"/> shows a first draft for the structure of the homepage for final-year students. The individual modules contain not only organizational information, but also materials that are directly related to the teaching-learning situation.</Pgraph><Pgraph>In the pre-evaluation, two think aloud tests <TextLink reference="36"></TextLink>, <TextLink reference="37"></TextLink> were conducted with two students each, in which they navigated the simulation and answered given and self-formulated questions. The tests lasted approximately 90 minutes each. The click paths and audio track were recorded using a video content management system (Panopto). In addition, students were surveyed in writing regarding the attractiveness, comprehensibility and structure of the simulation, as well as the relevance of the content and the expected benefits <TextLink reference="38"></TextLink>. The results of the survey showed that the structure of the site was successful and relevant information was easy to find. Students particularly welcomed the content dedicated to learning in the final year, the &#8220;nach dem PJ&#8221; (after the final year) section, and the quality and reliability of the information. Criticisms addressed text blocks with a lot of running text and insufficiently prominent inclusion of important documents. Some terms used in the headings were rated as ambiguous and made navigation difficult. Content was also missed, for example, for handling a pregnancy during the final year. Students requested the inclusion of more videos and improved navigation options. A further pretest with supervising physicians was planned, but was not carried out due to a lack of time and personnel resources. Furthermore, this user group had already been clearly included in the needs assessment with regard to content design.</Pgraph><SubHeadline2>Technical realization</SubHeadline2><Pgraph>The design and implementation took place in cooperation with a professional internet agency. The website was set up as a responsive website using the free content management system (CMS) TYPO3 widely used in the German-speaking world to ensure optimal use on different end devices. Like other CMS systems, TYPO3 CMS consists of a backend, which is used for configuration, development and content maintenance of the website, and a frontend, which represents the website itself. </Pgraph><Pgraph>The site&#39;s page tree was designed and created based on feedback from the pre-evaluation and professional consultation. For the presentation of the content, specific content elements were created as templates based on the predefined content. Only a small number of templates were used to maintain a uniform appearance. Special elements included an interactive map based on the free project OpenStreetMap.org to display possible final-year locations, filtered according to specialization or type of institution, for example. A special content module was also developed to present faculty-specific details to support targeted provision of the most common information (e.g., contact persons, forms, links). </Pgraph><Pgraph>By means of a specific rights system and the linking of content, the backend was designed in such a way that access to and editing of the faculty-specific portions is possible intuitively and without lengthy training for the responsible persons at the faculties. This low-threshold and simple handling is ensured in that content is entered into a central mask and thus, for example, contact persons at the faculties, who appear several times in the frontend, only have to be entered once in the backend.</Pgraph><SubHeadline2>Design and filling of the website</SubHeadline2><Pgraph>The design of the texts and the structure of the screen pages were based on the design rules for Internet platforms. For example, great importance was attached to the visual appearance of the screen design, since it has an effect on whether users engage more deeply with a website at all <TextLink reference="39"></TextLink>. A logo was developed and a name for the website was assigned in order to achieve a recognition effect, to generate an appropriate URL, and to have a clear designation for legal purposes. The name <Mark2>PJ-input</Mark2> was chosen because it is easy to remember and is an acronym composed of the words: Informationen praktisch und transparent (practical and transparent information). This emphasizes the premise of providing information in an application-oriented manner and disclosing commercial or political interests. Appealing visuals were gathered faculty-wide and incorporated into the title bars of each page. Texts for the website were formulated to be as short as possible and easy to read on a screen. Longer texts, such as information on radiation protection, were created as a brochure and included as a printable PDF file. To enable quick and easy orientation and navigation on the website, the sections for students and supervising physicians were specifically color-coded (see figure 3 <ImgLink imgNo="3" imgType="figure"/>). In addition, faculty-specific information was visually identified. The website was set up so that the desired location could be entered on the homepage. This entry is stored as a cookie for six months on the computers of the users. When used during this period or until a different location is selected, only the information valid for this location is displayed.</Pgraph><SubHeadline2>Staff training</SubHeadline2><Pgraph>Training was given to the responsible employees at the five participating faculties in Baden-W&#252;rttemberg so that they can integrate content and media on the website and update and maintain it independently. They should be able to enter content on the faculty-specific pages, such as contact persons, registration deadlines and the respective locations, as well as to update it on an ongoing basis. Access to the backend is also possible via a special entry page with additional support materials.</Pgraph><SubHeadline2>Validation and launch</SubHeadline2><Pgraph>All content, links, and incorporated materials were reviewed formally and with regard to their relevance, coherence and up-to-dateness by members of the project team and revised as necessary. The final version was released by the responsible person at the Competence Center for final-year education in Baden-W&#252;rttemberg. The sections for students were released on March 1, 2020, those for supervising physicians on May 2, 2020.</Pgraph><SubHeadline2>Distribution </SubHeadline2><Pgraph>The website was advertised through various channels. Final-year students and doctors-in-training were targeted via emails and flyers at the faculties in Baden-W&#252;rttemberg. Articles in hospital journals and newsletters also contributed to nationwide dissemination. The new logo was integrated into the email signature of the project staff. Due to the pandemic, dissemination at congresses and network meetings could not be implemented as planned.</Pgraph><SubHeadline2>Evaluation</SubHeadline2><Pgraph>An evaluation tool embedded in the homepage enabled targeted feedback on <Mark2>PJ-input</Mark2> during the first year (from March 15, 2020, to March 14, 2021) based on the following open-ended questions:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">How have you informed yourself about the final year so far&#63;</ListItem><ListItem level="1" levelPosition="2" numString="2.">How did you learn about the final-year information platform&#63;</ListItem><ListItem level="1" levelPosition="3" numString="3.">What reasons or motivation did you have for visiting the final-year information platform&#63;</ListItem><ListItem level="1" levelPosition="4" numString="4.">How could the final-year information platform be improved in your opinion&#63;</ListItem><ListItem level="1" levelPosition="5" numString="5.">What content should be changed, corrected or supplemented in your view&#63;</ListItem><ListItem level="1" levelPosition="6" numString="6.">Do you have any other comments&#63;</ListItem></OrderedList></Pgraph><Pgraph>The tool was developed in close cooperation with the Quality Management team at the Mannheim Medical Faculty. </Pgraph><Pgraph>Furthermore, the usage behavior is continuously recorded via the web applications Webalizer and also with Matomo since July 17, 2021. In each case, the IP addresses are anonymized so that, in compliance with the Data Protection Regulation, it is impossible to draw conclusions about the actual connection.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Projektbeschreibung">
      <MainHeadline>Projektbeschreibung</MainHeadline><Pgraph>Die Planung, Entwicklung, Implementierung und Evaluation der Informationsplattform erfolgte in einem vierstufigen Prozess, der sich an bereits bekannte Modelle der Bildungsbedarfsanalyse im Bereich der Hochschuldidaktik und der Erwachsenenbildung anlehnt <TextLink reference="26"></TextLink>, <TextLink reference="27"></TextLink>, <TextLink reference="28"></TextLink>. Die einzelnen Schritte sind in Abbildung 1 <ImgLink imgNo="1" imgType="figure"/> dargestellt und werden im Folgenden beschrieben. </Pgraph><SubHeadline2>Bedarfsanalyse</SubHeadline2><Pgraph>Um die Website zielgruppengerecht auszurichten, wurden in der Planungsphase Informationen zu bestimmten Fragestellungen gesammelt, analysiert und reflektiert.</Pgraph><Pgraph>F&#252;r die Ermittlung der Bedarfe kamen quantitative und qualitative Methoden zum Einsatz. Diese unterschiedlichen Verfahren bieten den Vorteil, dass sowohl bestehende Materialien wie das PJ-Manual evaluiert, als auch neue Inhalte generiert werden k&#246;nnen <TextLink reference="29"></TextLink>. F&#252;r die Erhebung wurden unterschiedliche Zug&#228;nge gew&#228;hlt (siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>). Ausbildende &#196;rztinnen und &#196;rzte wurden nach dem Besuch der durch die Fakult&#228;t angebotenen didaktischen Schulungen nach weiterem Unterst&#252;tzungsbedarf in Bezug auf die Lehre im PJ befragt. Durch offene Fragen wurden folgende Themenschwerpunkte ermittelt: Lehre im klinischen Alltag, rechtliche Fragestellungen und F&#252;hren des Logbuchs. Die Ergebnisse einer Umfrage zur Nutzung des PJ-Manuals ergab, dass dieses insgesamt als n&#252;tzlich und hilfreich bewertet wurde <TextLink reference="30"></TextLink>. Dar&#252;ber hinaus wurden sowohl mit ausbildenden &#196;rztinnen und &#196;rzten als auch mit Studierenden Einzel- und Gruppeninterviews durchgef&#252;hrt, mit der Fragestellung: &#8222;Welche Informationen w&#252;nschen Sie sich auf einer Website &#252;ber das PJ&#63;&#8220;. Die Interviews wurden inhaltsanalytisch ausgewertet <TextLink reference="31"></TextLink>. Die &#196;rztinnen und &#196;rzte nannten hier insbesondere Informationen zum Einsatz der PJ-Studierenden auf der Station wie beispielsweise Arbeitszeit, Aufgliederung der Tertiale, Checklisten f&#252;r Gespr&#228;che und rechtliche Informationen. Die Studierenden &#228;u&#223;erten den Wunsch nach standort&#252;bergreifenden Informationen, beispielsweise zu den gesetzlichen Rahmenbedingungen, Hygiene- und Strahlenschutzvorschriften, Regelungen von Fehltagen und Auslandsaufenthalten sowie Hilfestellung f&#252;r Bewerbungen. Dar&#252;ber hinaus kam der Wunsch nach Nachschlagewerken f&#252;r PJ-spezifisches Wissen, die Einbindung von Videos und Tutorials und nach standortspezifischen Informationen, wie Abl&#228;ufe des PJ an den jeweiligen Fakult&#228;ten. Um dies aufzugreifen und dem Umstand Rechnung zu tragen, dass viele Regelungen und Formulare fakult&#228;tsspezifisch sind, sollte auch die M&#246;glichkeit gegeben sein, diese Informationen seitens der einzelnen Fakult&#228;ten an den passenden Stellen auf der Website einzubinden.</Pgraph><SubHeadline2>Bestandsaufnahme</SubHeadline2><Pgraph>Die Bestandsaufnahme diente zur Identifikation bereits vorhandener Themenbereiche im Internet. Dar&#252;ber hinaus wurde abgeglichen, inwieweit die in der Bedarfsanalyse ermittelten Inhalte &#252;ber das bisherige Informationsangebot hinaus gehen und die zu entwickelnde Website einen Mehrwert bieten kann <TextLink reference="29"></TextLink>. Hierf&#252;r wurden deutschsprachige Plattformen zum Themenbereich PJ unter folgenden Fragestellungen aufgesucht und analysiert:</Pgraph><Pgraph><UnorderedList><ListItem level="1">An welche Zielgruppen richtet sich die Website&#63;</ListItem><ListItem level="1">Was ist die Zielsetzung der Website&#63;</ListItem><ListItem level="1">Was sind die Inhalte der Website&#63;</ListItem><ListItem level="1">Ist die Website frei zug&#228;nglich&#63; </ListItem></UnorderedList></Pgraph><Pgraph>Es stellte sich heraus, dass sich das bestehende Angebot prim&#228;r auf die Organisation des PJ bezieht und sich auf die Zielgruppe der PJ-Studierenden beschr&#228;nkt. F&#252;r ausbildende &#196;rztinnen und &#196;rzte wurden bislang keine Informationen bereitgestellt und es konnten gro&#223;e L&#252;cken im Bereich der Unterst&#252;tzung von Lehr-Lernprozessen festgestellt werden.</Pgraph><SubHeadline2>Zusammenstellung der Inhalte</SubHeadline2><Pgraph>Bei der Zusammenstellung der Inhalte wurde der Fokus auf die Verwendungssituation PJ und die ermittelten Bedarfe der Zielgruppe gelegt <TextLink reference="27"></TextLink>. Zun&#228;chst wurden wichtige Inhalte identifiziert und mit den an MERLIN beteiligten medizinischen Fakult&#228;ten (Freiburg, Heidelberg, Mannheim, T&#252;bingen, Ulm) in Planungssitzungen, auch unter Einbindung von Studierenden, abgestimmt. Die Inhalte wurden entsprechend der Handlungsanforderungen der PJ-Studierenden und ausbildenden &#196;rztinnen und &#196;rzte gegliedert. Beide Personenkreise sollten Zugang zu Grundlagen- und Handlungswissen erhalten, welches sie jeweils f&#252;r das praxisbezogene Lehren bzw. Lernen ben&#246;tigen. Bei den Inhalten f&#252;r die Studierenden zeigte sich eine Untergliederung in die drei Bereiche: &#8222;vor dem PJ&#8220;, &#8222;im PJ&#8220; und &#8222;nach dem PJ&#8220; sinnvoll. Weiterhin wurde unterschieden zwischen standortspezifischen Informationen, beispielsweise lokale Ansprechpersonen oder Anmeldetermine und standort&#252;bergreifenden Informationen, wie zum Beispiel Termine f&#252;r die &#228;rztlichen Pr&#252;fungen. F&#252;r die Lehrenden standen Bereiche wie Organisation, rechtliche Rahmenbedingungen und didaktische Tools im Fokus. Die Zusammenstellung der rechtlichen Aspekte wurde vom Kompetenzzentrum Praktisches Jahr auf Grundlage der aktuellen Gesetzgebung (z.B. &#167; 3 und &#167; 4 &#196;ApprO 2002, &#167; 276 BGB, &#167; 3 StGB, MuSchuG 2017; StrlSchV 2018) unter Einbindung der jeweiligen Fachvertretung (z.B. Strahlenschutzbevollm&#228;chtigte, Hygienebeauftragte) und Ber&#252;cksichtigung der aktuellen Literatur vorgenommen <TextLink reference="32"></TextLink>, <TextLink reference="33"></TextLink>, <TextLink reference="34"></TextLink>.</Pgraph><SubHeadline2>Testphase </SubHeadline2><Pgraph>Die Inhalte und Struktur wurden zun&#228;chst in eine Pr&#228;sentationssoftware (Microsoft PowerPoint) &#252;bertragen, um die Anwendung zu simulieren. Auf diese Weise wurde durch eine Pr&#228;-Evaluation die Navigation und Nutzerfreundlichkeit inhaltlich und formal &#252;berpr&#252;ft <TextLink reference="35"></TextLink>.</Pgraph><Pgraph>In Abbildung 2 <ImgLink imgNo="2" imgType="figure"/> ist ein erster Entwurf f&#252;r die Struktur der Startseite f&#252;r die PJ-Studierenden zu sehen. Die einzelnen Bausteine enthalten organisatorische Informationen, aber auch Materialien, die einen direkten Bezug zur Lehr-Lern-Situation haben.</Pgraph><Pgraph>An der Pr&#228;-Evaluation nahmen zwei mal zwei PJ-Studierende an einem Think-Aloud-Test <TextLink reference="36"></TextLink>, <TextLink reference="37"></TextLink> teil, bei dem diese durch die Simulation navigierten und hierbei vorgegebene und selbstformulierten Fragestellungen nachgingen. Der Test dauerte jeweils etwa 90 Minuten. Die Klickpfade und die Audiospur wurden mit einem Video-Content-Management-System (Panopto) aufgezeichnet. Zudem wurden die Studierenden hinsichtlich der Attraktivit&#228;t, Verst&#228;ndlichkeit und Struktur der Simulation sowie zur Relevanz der Inhalte und dem erwarteten Nutzen schriftlich befragt <TextLink reference="38"></TextLink>. Die Ergebnisse der Erhebung zeigten, dass der Aufbau der Seite gelungen und entsprechende Informationen leicht auffindbar waren. Die Studierenden begr&#252;&#223;ten vor allem die Inhalte, die sich dem Lernen im PJ widmeten, den Abschnitt &#8222;nach dem PJ&#8220; und die Qualit&#228;t und Verl&#228;sslichkeit der Informationen. Kritisiert wurden Textbl&#246;cke mit viel Flie&#223;text sowie die nicht ausreichend prominente Einbindung wichtiger Dokumente. Einige in den &#220;berschriften verwendeten Begriffe wurden als nicht eindeutig bewertet und erschwerten die Navigation. Zudem wurden Inhalte vermisst, beispielsweise f&#252;r den Umgang mit Schwangerschaft im PJ. Die Studierenden w&#252;nschten sich die Einbindung weiterer Videos und verbesserte Navigationsm&#246;glichkeiten. Ein weiterer Pr&#228;test mit ausbildenden &#196;rztinnen und &#196;rzten war geplant, entfiel aber aufgrund mangelnder zeitlicher und personeller Ressourcen. Zudem wurde bereits bei der Bedarfsanalyse die Nutzergruppe in Bezug auf die inhaltliche Gestaltung gut eingebunden.</Pgraph><SubHeadline2>Technische Umsetzung</SubHeadline2><Pgraph>Die Gestaltung und Umsetzung fand in Zusammenarbeit mit einer professionellen Internetagentur statt. Die Website wurde mit dem freien und im deutschen Sprachraum weitverbreiteten Content-Management-System (CMS) TYPO3 als responsive Website eingerichtet, wodurch die optimale Nutzung auf unterschiedlichen Endger&#228;ten sichergestellt wurde. Wie andere CMS-Systeme besteht auch TYPO3-CMS aus einem Backend, das der Konfiguration, Entwicklung und Inhaltspflege der Website dient, und einem Frontend, das die Website selbst darstellt. </Pgraph><Pgraph>Der Seitenbaum der Website wurde anhand der R&#252;ckmeldungen der Pr&#228;-Evaluation und der professionellen Beratung gestaltet und angelegt. Zur Darstellung des Contents wurden anhand der bereits festgelegten Inhalte, spezifische Inhaltselemente als Template angelegt. Zur Wahrung eines einheitlichen Erscheinungsbildes wurde nur eine geringe Anzahl an Templates genutzt. Besondere Elemente waren zum einen eine interaktive Karte auf Basis des freien Projektes OpenStreetMap.org zur Anzeige m&#246;glicher PJ Einsatzorte, wobei beispielsweise nach Fachrichtung oder nach Einrichtungsart gefiltert werden kann. Zum anderen wurde zur Darstellung der f&#252;r jede Fakult&#228;t spezifischen Inhalte ein spezielles Inhaltsmodul entwickelt, das eine gezielte Bereitstellung der h&#228;ufigsten Informationen (z. B. Ansprechpersonen, Formulare, Links) unterst&#252;tzt. </Pgraph><Pgraph>Durch ein spezifisches Rechtesystem und die Verlinkung von Inhalten wurde das Backend so gestaltet, dass ein Zugriff auf die standortspezifischen Anteile und deren Bearbeitung intuitiv und ohne lange Einarbeitung f&#252;r die verantwortlichen Personen an den Fakult&#228;ten m&#246;glich ist. Die niederschwellige und einfache Handhabung wird dadurch gew&#228;hrleistet, dass Inhalte in eine zentrale Maske eingegeben werden k&#246;nnen und so beispielsweise Ansprechpersonen an den Fakult&#228;ten, die im Frontend mehrfach auftauchen, nur einmalig im Backend eingegeben werden m&#252;ssen. </Pgraph><SubHeadline2>Design und Bef&#252;llung der Website</SubHeadline2><Pgraph>Die Gestaltung der Texte und der Aufbau der Bildschirmseiten orientierte sich an den Gestaltungsregeln f&#252;r Internetplattformen. So wurde beispielsweise auf die visuelle Gestaltung des Screendesigns gro&#223;en Wert gelegt, da das Erscheinungsbild sich darauf auswirkt, ob die Nutzer sich &#252;berhaupt tiefer gehend mit einer Website besch&#228;ftigen <TextLink reference="39"></TextLink>. Es wurde ein Logo entwickelt und ein Name f&#252;r die Website vergeben, um ein Wiedererkennungseffekt zu erzielen, eine entsprechende URL generieren zu k&#246;nnen und f&#252;r rechtliche Fragestellungen eine eindeutige Bezeichnung zu haben. Der Name <Mark2>PJ-input</Mark2> wurde ausgew&#228;hlt, da dieser leicht einpr&#228;gsam ist und als Akronym aus den W&#246;rtern Informationen praktisch und transparent zusammengesetzt ist. Hierdurch wird die Pr&#228;misse hervorgehoben, Informationen anwendungsorientiert anzubieten und kommerzielle oder politische Interessen offenzulegen. Standort&#252;bergreifend wurde ansprechendes Bildmaterial zusammengetragen und in die Titelleisten der einzelnen Seiten eingepflegt. Die Texte f&#252;r die Website wurden so aufbereitet, dass sie m&#246;glichst kurz und gut auf einem Bildschirm zu lesen sind. L&#228;ngere Texte, wie beispielsweis Informationen zum Strahlenschutz, wurden als Brosch&#252;re erstellt und als ausdruckbare PDF-Datei eingebunden. Um eine schnelle und problemlose Orientierung und Navigation auf der Website zu erm&#246;glichen, wurden die Bereiche f&#252;r die Studierenden und die Lehrenden farblich voneinander abgesetzt (siehe Abbildung 3 <ImgLink imgNo="3" imgType="figure"/>). Zudem wurden die standortspezifischen Informationen visuell kenntlich gemacht. Die Website wurde so eingerichtet, dass der jeweils gew&#252;nschte Standort auf der Startseite angeben werden kann. Diese Eingabe wird als Cookie f&#252;r sechs Monate auf den Rechnern der nutzenden Personen gespeichert. Bei Nutzung in diesem Zeitraum oder bis zur Wahl eines anderen Standortes werden dann jeweils nur die f&#252;r diesen Standort g&#252;ltigen Informationen eingeblendet. </Pgraph><SubHeadline2>Schulung der Mitarbeiterinnen und Mitarbeiter</SubHeadline2><Pgraph>Um Inhalte und Medien auf die Website einbinden und eigenst&#228;ndig aktualisieren und pflegen zu k&#246;nnen, wurden die verantwortlichen Mitarbeiterinnen und Mitarbeiter der beteiligten f&#252;nf Fakult&#228;ten in Baden-W&#252;rttemberg geschult. Diese sollten in der Lage sein, Inhalte auf den standortspezifischen Seiten wie Ansprechpersonen und Anmeldefristen sowie die jeweiligen Einsatzorte eigenst&#228;ndig initial einzugeben und fortlaufend aktualisieren zu k&#246;nnen. Der Zugang zum Backend erfolgt zudem &#252;ber eine spezielle Einstiegsseite mit zus&#228;tzlichen Hilfsmaterialien.</Pgraph><SubHeadline2>Validierung und Launch</SubHeadline2><Pgraph>Alle Inhalte, Verkn&#252;pfungen und eingebundenen Materialien wurden von Mitarbeitern und Mitarbeiterinnen des Projektteams formal und hinsichtlich ihrer Relevanz, Stimmigkeit und Aktualit&#228;t &#252;berpr&#252;ft und gegebenenfalls &#252;berarbeitet und korrigiert. Die finale Version wurde von der Verantwortlichen des PJ-Kompetenzzentrums Baden-W&#252;rttemberg freigegeben. Die Bereiche f&#252;r die Studierenden wurden am 1. M&#228;rz 2020 freigeschaltet, die f&#252;r die Lehrenden am 2. Mai 2020. </Pgraph><SubHeadline2>Distribution </SubHeadline2><Pgraph>Die Website wurde auf unterschiedlichen Kan&#228;len beworben. Gezielt angesprochen wurden die PJ-Studierenden und ausbildenden &#196;rztinnen und &#196;rzte &#252;ber E-Mails und Flyer an den Fakult&#228;ten in Baden-W&#252;rttemberg. Beitr&#228;ge in Klinikzeitschriften und Newsletter trugen weiterhin zur deutschlandweiten Verbreitung bei. Das entwickelte Logo wurde in die E-Mail-Signatur der Projektbeteiligten eingebunden. Aufgrund der pandemischen Situation konnte eine geplante Verbreitung auf Kongressen und Netzwerktreffen nicht wie geplant umgesetzt werden.</Pgraph><SubHeadline2>Evaluation</SubHeadline2><Pgraph>Ein auf der Startseite eingebundenes Evaluationstool erm&#246;glichte im ersten Jahr (vom 15.03.2020 bis 14.03.2021) die gezielte R&#252;ckmeldung zur <Mark2>PJ-input</Mark2> anhand von folgenden offenen Fragen:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">Wie haben Sie sich bisher &#252;ber das PJ informiert&#63;</ListItem><ListItem level="1" levelPosition="2" numString="2.">Wie haben Sie von der PJ-Informationsplattform erfahren&#63;</ListItem><ListItem level="1" levelPosition="3" numString="3.">Aus welchen Gr&#252;nden bzw. mit welcher Motivation haben Sie die PJ-Informationsplattform aufgesucht&#63;</ListItem><ListItem level="1" levelPosition="4" numString="4.">Wie k&#246;nnte aus Ihrer Sicht die PJ-Informationsplattform verbessert werden&#63;</ListItem><ListItem level="1" levelPosition="5" numString="5.">Welche Inhalte sollten aus Ihrer Sicht ver&#228;ndert, korrigiert oder erg&#228;nzt werden&#63;</ListItem><ListItem level="1" levelPosition="6" numString="6.">Haben Sie noch weitere Anmerkungen&#63;</ListItem></OrderedList></Pgraph><Pgraph>Das Tool wurde in enger Zusammenarbeit mit dem Team Qualit&#228;tsmanagement an der Medizinischen Fakult&#228;t Mannheim erarbeitet. </Pgraph><Pgraph>Dar&#252;ber hinaus wird das Nutzungsverhalten kontinuierlich &#252;ber die Webanwendungen Webalizer und seit dem 17. Juli 2021 zus&#228;tzlich &#252;ber Matomo erfasst. Hierbei werden jeweils die IP-Adressen anonymisiert, so dass, konform zur Datenschutzverordnung, kein R&#252;ckschluss auf den tats&#228;chlichen Anschluss m&#246;glich ist.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Results of the evaluation and usage analysis">
      <MainHeadline>Results of the evaluation and usage analysis</MainHeadline><Pgraph>During the study period, 21 persons participated in the evaluation integrated on the homepage (final-year students (n&#61;17), supervising physicians (n&#61;3), without indication (n&#61;1)). The low response rate is partly due to the fact that, for data protection reasons, several steps had to be taken in order to participate in the evaluation. The evaluation showed that the students had so far mainly obtained information about the final year from fellow students (n&#61;7). Furthermore, the Internet (n&#61;6), Moodle (n&#61;4), official contacts at the faculty (n&#61;4) and friends (n&#61;2) were mentioned. All participants indicated that they had been made aware of <Mark2>PJ-input</Mark2> through official channels, such as email, information sessions or Moodle. When asked about motivation, interest and curiosity (n&#61;4) were mentioned most frequently, but also reasons such as to expand knowledge, to bring oneself up to date, to leave something lasting for future students. One person emphasized that visiting the site was worthwhile and that they wished they had learned about the site before the final year. Suggestions for improvement were mainly related to stronger promotion of the site. Furthermore, the integration of more videos was mentioned as well as the wish that the teaching hospitals should also have a presence. No points of criticism related to the website were mentioned. Inspired by these suggestions, further measures were taken to promote the site (for example, calling on partner faculties to send information emails to students and supervising physicians and to link the site on their learning platforms). Videos on radiation safety and hygiene were also created and included. Since a link to the teaching hospitals&#8217; homepages has already been included in the overview maps of the deployment sites, it is the hospitals&#8217; responsibility to design them accordingly. </Pgraph><Pgraph>The evaluation of the referrer shows that users mainly access the website via the following three channels: search engines, the homepage of the medical faculties, and their Moodle learning platforms. </Pgraph><Pgraph>Analysis of the Webalizer statistics shows a continuous increase in the number of computers (sites) and page views (pages) (see figure 4 <ImgLink imgNo="4" imgType="figure"/>).</Pgraph><Pgraph>The number of computers indicates how many IP addresses that directed requests to the server could be identified. This does not mean the exact number of real users, but the number of computers represents the closest determinable number &#91;<Hyperlink href="https:&#47;&#47;www.lf.net&#47;support&#47;techinfo&#47;webserver&#47;webalizer.php">https:&#47;&#47;www.lf.net&#47;support&#47;techinfo&#47;webserver&#47;webalizer.php</Hyperlink>&#93;. Therefore, based on the statistics, it can be concluded that about 1,700 people are currently accessing <Mark2>PJ-input</Mark2> per month. The evaluation of the web analytics shows that mainly information on organizational issues was searched for and that the focus was on site-wide pages in the student section. Examples of the most frequently entered search terms and hits entail the expense allowances in the final year and the third state examination. </Pgraph><Pgraph>The section-specific evaluation via Matomo shows that mainly the sections &#8220;im PJ&#8221; (during the final year) and &#8220;nach dem PJ&#8221; (after the final year) are used and that the sections &#8220;vor dem PJ&#8221; (before the final year) and &#8220;PJ f&#252;r Lehrende&#8221; (final-year information for supervising physicians) are visited less frequently (see figure 5 <ImgLink imgNo="5" imgType="figure"/>).</Pgraph><Pgraph>An evaluation of the website&#8217;s distribution shows that it is mainly used within Germany in Baden-W&#252;rttemberg, but also in other German states in the southwest (Rhineland-Palatinate and Saarland) and north (Schleswig-Holstein, Brandenburg, Berlin, Mecklenburg-Western Pomerania). No use is recorded for the other German states. </Pgraph><Pgraph>Further maintenance of <Mark2>PJ-input</Mark2> is the responsibility of the Competence Center for final-year education located in Mannheim. Here, the information and links provided are regularly checked to ensure that they are up to date, and suggestions for improvement are reviewed and implemented if necessary. The involvement of other faculties to provide faculty-specific information and open-source materials is expressly welcomed.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Ergebnisse der Evaluation und Nutzungsanalyse">
      <MainHeadline>Ergebnisse der Evaluation und Nutzungsanalyse</MainHeadline><Pgraph>An der auf der Startseite eingebundenen Evaluation nahmen im Untersuchungszeitraum 21 Personen teil (PJ-Studierende (n&#61;17), ausbildende &#196;rztinnen&#47;&#196;rzte (n&#61;3), ohne Angabe (n&#61;1)). Die geringe R&#252;cklaufquote ist unter anderem darauf zur&#252;ckzuf&#252;hren, dass aus datenschutzrechtlichen Gr&#252;nden mehrere Schritte durchlaufen werden mussten, um an der Evaluation teilzunehmen. Die Auswertung zeigte, dass sich die Studierenden bisher haupts&#228;chlich &#252;ber Kommilitonen &#252;ber das PJ informiert hatten (n&#61;7). Weiterhin wurde das Internet (n&#61;6), Moodle (n&#61;4), offizielle Ansprechpartner der Fakult&#228;t (n&#61;4) und Freunde (n&#61;2) genannt. Alle Teilnehmenden gaben an, &#252;ber offizielle Wege, wie E-Mail, Informationsveranstaltungen oder Moodle auf die <Mark2>PJ-input</Mark2> aufmerksam gemacht worden zu sein. Auf die Frage nach der Motivation wurde am h&#228;ufigsten Interesse und Neugierde (n&#61;4) genannt, aber auch Gr&#252;nde wie: Wissensstand erweitern, sich auf den aktuellen Stand bringen, den nachfolgenden Studierenden etwas Nachhaltiges zu hinterlassen. Eine Person betonte, dass sich der Besuch der Seite gelohnt habe und er&#47;sie sich gew&#252;nscht h&#228;tte, schon vor dem PJ von der Seite erfahren zu haben. Genannte Verbesserungsvorschl&#228;ge bezogen sich vor allem auf eine st&#228;rkere Bewerbung der Seite. Weiterhin wurde die Einbindung weiterer Videos genannt sowie der Wunsch, dass auch die Lehrkrankenh&#228;user einen Auftritt erhalten. Es wurden keine auf die Website bezogenen Kritikpunkte angef&#252;hrt. Angeregt durch diese Vorschl&#228;ge wurden weitere Ma&#223;nahmen ergriffen, um die Seite zu bewerben (beispielsweise Aufruf an Partnerfakult&#228;ten, Informationsmails an Studierende und Lehrende zu schicken und die Seite auf ihren Lernplattformen zu verlinken). Zus&#228;tzlich wurden Videos zum Thema Strahlenschutz und Hygiene erstellt und eingebunden. Da in die &#220;bersichtskarten der Einsatzorte bereits eine Verlinkung zu den Homepages der Lehrkrankenh&#228;user eingef&#252;gt wurde, obliegt es in deren Verantwortung, diese entsprechend zu gestalten. </Pgraph><Pgraph>Die Auswertung des Referrers zeigt, dass die Nutzer haupts&#228;chlich &#252;ber folgende drei Kan&#228;le auf die Website gelangen: Suchmaschinen, die Homepage der Medizinischen Fakult&#228;ten sowie deren Moodle-Lernplattformen. </Pgraph><Pgraph>Die Analyse der Webalizer-Statistik zeigt einen kontinuierlichen Anstieg der Anzahl der Rechner (sites) und Seitenaufrufe (pages) (siehe Abbildung 4 <ImgLink imgNo="4" imgType="figure"/>). </Pgraph><Pgraph>Die Anzahl der Rechner gibt an, wie viele IP-Adressen die Anfragen an den Server gerichtet haben, identifiziert werden konnten. Damit ist zwar nicht exakt die Zahl der realen Benutzer gemeint, aber die Anzahl der Rechner stellt die zu ermittelnde Zahl dar, die dieser Anzahl am n&#228;chsten kommt &#91;<Hyperlink href="https:&#47;&#47;www.lf.net&#47;support&#47;techinfo&#47;webserver&#47;webalizer.php">https:&#47;&#47;www.lf.net&#47;support&#47;techinfo&#47;webserver&#47;webalizer.php</Hyperlink>&#93;. Aus der Statistik l&#228;sst sich daher schlie&#223;en, dass pro Monat derzeit etwa 1.700 Personen auf die <Mark2>PJ-input</Mark2> zugreifen. Die Auswertung der Webanalytik zeigt, dass haupts&#228;chlich Informationen zu organisatorischen Fragestellungen gesucht und schwerpunktm&#228;&#223;ig standort&#252;bergreifende Seiten im Studierendenbereich aufgerufen wurden. Beispiele f&#252;r die zumeist eingegebenen Suchbegriffe und Aufrufe sind die Aufwandsentsch&#228;digung im PJ und das dritte Staatsexamen. </Pgraph><Pgraph>Die bereichsspezifische Auswertung &#252;ber Matomo zeigt, dass haupts&#228;chlich die Bereiche &#8222;im PJ&#8220; und &#8222;nach dem PJ&#8220; genutzt werden und die Bereiche &#8222;vor dem PJ&#8220; und &#8222;PJ f&#252;r Lehrende&#8220; seltener aufgerufen werden (siehe Abbildung 5 <ImgLink imgNo="5" imgType="figure"/>). </Pgraph><Pgraph>Die Auswertung der Verbreitung der Website zeigt, dass diese haupts&#228;chlich innerhalb Deutschlands in Baden-W&#252;rttemberg, aber auch in weiteren Bundesl&#228;ndern im S&#252;dwesten (Rheinland-Pfalz und Saarland) und Norden&#47;Nordosten (Schleswig-Holstein, Brandenburg, Berlin, Mecklenburg-Vorpommern) genutzt wird. Bei den weiteren Bundesl&#228;ndern ist keine Nutzung zu verzeichnen. </Pgraph><Pgraph>Die weitere Pflege der <Mark2>PJ-input</Mark2> obliegt dem Kompetenzzentrum Praktisches Jahr in der Medizin BW am Standort Mannheim. Hier werden regelm&#228;&#223;ig die zur Verf&#252;gung gestellten Informationen und Links auf Aktualit&#228;t &#252;berpr&#252;ft und Verbesserungsvorschl&#228;ge gepr&#252;ft und ggf. umgesetzt. Die Einbindung weiterer Fakult&#228;ten zur Bereitstellung standortspezifischer Informationen und Open-Source-Materialien wird ausdr&#252;cklich begr&#252;&#223;t.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Discussion">
      <MainHeadline>Discussion</MainHeadline><Pgraph>The elaborate and professional development of <Mark2>PJ-input</Mark2> was federally funded in order to enjoy national benefit with regard to competency-oriented training in medical studies. The information platform offers secured information in a non-commercial context and is focused on the needs of the target groups. The integration of a variety of expertise (content-related, professional and technical) as well as the coordination of the content across several faculties reduced the development costs to create materials, such as the videos posted on the website <TextLink reference="40"></TextLink>. In this way, it was also possible to achieve generalizability of the content, so that <Mark2>PJ-input</Mark2> can be used throughout Germany. The site-wide and low-threshold provision of didactic materials and information addresses current developments in medical studies and represents a unique selling point for this website. The heavy use of the &#8220;nach dem PJ&#8221; (after the final year) section shows that students are actively looking for information on the transition from study to career.</Pgraph><Pgraph>A needs assessment was carried out in order to tailor the website to the needs of the students. Here, there is a fundamental risk that needs will be interpreted into it <TextLink reference="41"></TextLink>. The same applies to the think aloud method <TextLink reference="35"></TextLink>. As the evaluation of the web analytics shows, the website has been well received so far, so it can be assumed that the needs of the users were anticipated well. The timing of the website launch coincided with the beginning of the pandemic. Here, it proved advantageous that the website is easy to maintain, so that changes required at short notice could be responded to immediately and corresponding faculty-specific details could also be communicated.</Pgraph><Pgraph>Overall, however, development and implementation required a great deal of staff time, leaving few resources for distribution or for involving other faculties from other states, for example, in posting faculty-specific information. And the pandemic situation at the start of <Mark2>PJ-input</Mark2> prevented nationwide distribution as intended by the project. As a result, the website is not (yet) accessed in some federal states. Convincing was also necessary among the project partners in Baden-W&#252;rttemberg, since information about the final year is usually provided on the respective homepages or learning platforms of the faculties and thus the benefit of another website was not recognized initially. Therefore, the possibilities of <Mark2>PJ-input</Mark2> in the support and competency-based orientation of teaching must be made more visible. Overall, greater and more widespread use is desirable. By involving more faculties and their expertise, the site could be enriched, for example, with more teaching videos, links and informational materials, so that elaborately developed materials can be used across faculties. It is expected that the introduction of the new licensing regulations will increase the need for information among faculty and students. Especially with the introduction of competency-based teaching in the final year, the <Mark2>PJ-input</Mark2> could help to fill information gaps and simplify and standardize the implementation of EPA. At the same time, there is the challenge of keeping <Mark2>PJ-input</Mark2> constantly up to date and adapting it to changing conditions. </Pgraph><Pgraph>The increasing number of visitors and the positive feedback show that the project goal of providing information to support learning in the final year for all supervising physicians and students has been achieved. The high usage rate by students indicates that there is a corresponding need for digitally accessible support. The site must be further disseminated among supervising physicians so that it can make a lasting contribution to their professionalization.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Diskussion">
      <MainHeadline>Diskussion</MainHeadline><Pgraph>Die aufw&#228;ndige und professionelle Entwicklung der <Mark2>PJ-input</Mark2> wurde aus Bundesmitteln finanziert, um einen deutschlandweiten Nutzen im Hinblick auf die kompetenzorientierte Ausbildung im Medizinstudium zu generieren. Die Informationsplattform bietet gesicherte Informationen in einem nicht-kommerziellen Rahmen an und orientiert sich an den Bed&#252;rfnissen der Zielgruppen. Durch die Einbindung von unterschiedlichen Expertisen (inhaltlich, fachlich und technisch) sowie der Abstimmung der Inhalte &#252;ber mehrere Fakult&#228;ten reduzierten sich die Entwicklungskosten f&#252;r die Erstellung der verwendeten Materialien, wie beispielsweise der auf der Website eingestellten Videos <TextLink reference="40"></TextLink>. Auf diese Weise konnte auch eine Generalisierbarkeit der Inhalte erreicht werden, so dass die <Mark2>PJ-input</Mark2> deutschlandweit genutzt werden kann. Die standort&#252;bergreifende und niederschwellige Bereitstellung didaktischer Materialien und Informationen greifen aktuelle Entwicklungen im Medizinstudium auf und stellen ein Alleinstellungsmerkmal dieser Website dar. Die starke Nutzung des Bereichs &#8222;nach dem PJ&#8220; zeigt, dass Studierende aktiv nach Informationen zum &#220;bergang vom Studium in den Beruf suchen.</Pgraph><Pgraph>Um die Website bedarfsgerecht auszurichten, wurde eine Bedarfsanalyse durchgef&#252;hrt. Hier besteht grunds&#228;tzlich die Gefahr, dass Bed&#252;rfnisse hineininterpretiert werden <TextLink reference="41"></TextLink>. &#196;hnliches gilt auch f&#252;r die Think-Aloud-Methode <TextLink reference="35"></TextLink>. Wie die Auswertung der Webanalytik zeigt, wird die Website bisher gut angenommen, so dass davon auszugehen ist, dass die Bed&#252;rfnisse der Nutzer gut antizipiert wurden. Der Zeitpunkt der Freischaltung der Website fiel in den Zeitraum zu Beginn der pandemischen Situation. Hier erwies es sich als vorteilhaft, dass die Website leicht zu pflegen ist, so dass auf kurzfristig erforderliche &#196;nderungen unmittelbar reagiert werden konnte und auch entsprechende standortspezifische Besonderheiten kommuniziert werden konnten.</Pgraph><Pgraph>Insgesamt erforderten die Entwicklung und Implementierung jedoch einen hohen personellen Aufwand, so dass wenig Ressourcen f&#252;r die Distribution und f&#252;r die Einbindung weiterer Fakult&#228;ten aus anderen Bundesl&#228;ndern, beispielsweise f&#252;r die Einstellung von standortspezifischen Informationen, blieben. Auch die pandemische Situation zum Start der <Mark2>PJ-input</Mark2> verhinderte eine deutschlandweite Verbreitung, wie sie durch das Projekt intendiert war. Dies hat zur Folge, dass in einigen Bundesl&#228;ndern (noch) nicht auf die Website zugegriffen wird. Auch innerhalb der Projektpartner in Baden-W&#252;rttemberg musste &#220;berzeugungsarbeit geleistet werden, da in der Regel Informationen rund um das PJ auf der jeweiligen Homepage oder Lernplattformen der Fakult&#228;t zur Verf&#252;gung gestellt werden und somit der Nutzen einer weiteren Website zun&#228;chst nicht erkannt wurde. Daher m&#252;ssen die M&#246;glichkeiten der <Mark2>PJ-input</Mark2> in der Unterst&#252;tzung und kompetenzorientierten Ausrichtung der Lehre verst&#228;rkt sichtbar gemacht werden. Insgesamt ist eine gr&#246;&#223;ere und fl&#228;chendeckende Nutzung w&#252;nschenswert. Durch die Einbindung weiterer Fakult&#228;ten und deren Expertise k&#246;nnte die Seite beispielsweise durch weitere Lehrvideos, Links und Informationsmaterialien angereichert werden, so dass aufw&#228;ndig erarbeitete Materialien standort&#252;bergreifend genutzt werden k&#246;nnen. Es wird erwartet, dass durch die Einf&#252;hrung der neuen Approbationsordnung der Informationsbedarf bei Lehrenden und Studierenden steigt. Insbesondere bei der Einf&#252;hrung der kompetenzorientierten Lehre im PJ k&#246;nnte die <Mark2>PJ-input</Mark2> dazu beitragen, Informationsl&#252;cken zu schlie&#223;en und die Implementierung der APT zu vereinfachen und zu standardisieren. </Pgraph><Pgraph>Gleichzeitig besteht die Herausforderung, die<Mark2> PJ-input</Mark2> stetig aktuell zu halten und an sich ver&#228;ndernde Rahmenbedingungen anzupassen. </Pgraph><Pgraph>Die steigenden Besucherzahlen und die positiven R&#252;ckmeldungen zeigen, dass das Projektziel, Informationen zur Unterst&#252;tzung des Lernens im PJ f&#252;r alle Lehrenden und Studierenden zur Verf&#252;gung zu stellen, erreicht wurde. Die hohe Nutzungsrate durch Studierende weist darauf hin, dass entsprechender Unterst&#252;tzungsbedarf besteht, welcher digital abrufbar ist. Unter Lehrenden muss die Seite noch weitere Verbreitung finden, damit sie zu deren Professionalisierung nachhaltig beitragen kann. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Funding">
      <MainHeadline>Funding</MainHeadline><Pgraph>The project was funded by the German Federal Ministry of Education and Research (BMBF) under project number 01PL17011C and 01PL1701D.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="F&#246;rderung">
      <MainHeadline>F&#246;rderung</MainHeadline><Pgraph>Das Projekt wurde gef&#246;rdert durch das Bundesministerium f&#252;r Bildung und Forschung (BMBF) unter der Projektnummer 01PL17011C und 01PL17011D.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Acknowledgement">
      <MainHeadline>Acknowledgement</MainHeadline><Pgraph>We would like to thank our partners for their cooperation, all of the medical faculties who supplied us with informational materials and constructive criticism, the students who participated in the pre-evaluation, and the project collaborators Mara Gei&#223;inger, Nicolas Krapp and Mareike Pieper, who contributed significantly to its successful implementation.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Danksagung">
      <MainHeadline>Danksagung</MainHeadline><Pgraph>Wir bedanken uns bei den Kooperationspartnern f&#252;r die gute Zusammenarbeit, bei allen medizinischen Fakult&#228;ten, die uns mit Informationsmaterialien und konstruktiver Kritik unterst&#252;tzt haben, bei den Studierenden, die an der Pr&#228;-Evaluation teilnahmen sowie den Projektmitarbeitenden Mara Gei&#223;inger, Nicolas Krapp und Mareike Pieper, die wesentlich zur erfolgreichen Umsetzung beitrugen.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>The authors declare that they have no competing interests. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>Die Autor&#42;innen erkl&#228;ren, dass sie keinen Interessenkonflikt im Zusammenhang mit diesem Artikel haben.</Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Nikendei C</RefAuthor>
        <RefAuthor>Schultz JH</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefTitle>Medizinische Ausbildung innerhalb des Praktischen Jahres</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Z Evid Fortbild Qual Gesundhwes</RefJournal>
        <RefPage>73-74</RefPage>
        <RefTotal>Nikendei C, Schultz JH, J&#252;nger J. Medizinische Ausbildung innerhalb des Praktischen Jahres &#91;Medical education during the practicum year&#93;. Z Evid Fortbild Qual Gesundhwes. 2012;106(2):73-74. DOI: 10.1016&#47;j.zefq.2012.02.001</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.zefq.2012.02.001</RefLink>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Raes P</RefAuthor>
        <RefAuthor>Angstwurm M</RefAuthor>
        <RefAuthor>Berberat P</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefAuthor>Rotgans J</RefAuthor>
        <RefAuthor>Streitlein-B&#246;hme I</RefAuthor>
        <RefAuthor>Burckhardt G</RefAuthor>
        <RefAuthor>Fischer MR</RefAuthor>
        <RefTitle>Quality management of clinical-practical instruction for Practical Year medical students in Germany - proposal for a catalogue of criteria from the German Society of Medical Education</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc49</RefPage>
        <RefTotal>Raes P, Angstwurm M, Berberat P, Kadmon M, Rotgans J, Streitlein-B&#246;hme I, Burckhardt G, Fischer MR. Quality management of clinical-practical instruction for Practical Year medical students in Germany - proposal for a catalogue of criteria from the German Society of Medical Education. GMS Z Med Ausbild. 2014;31(4):Doc49. DOI: 10.3205&#47;zma000941</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma000941</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Wissenschaftsrat</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2018</RefYear>
        <RefBookTitle>Neustrukturierung des Medizinstudiums und &#196;nderung der Approbationsordnung f&#252;r &#196;rzte Modellstudieng&#228;nge - Empfehlungen der Expertenkommission zum Masterplan Medizinstudium 2020</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Wissenschaftsrat. Neustrukturierung des Medizinstudiums und &#196;nderung der Approbationsordnung f&#252;r &#196;rzte Modellstudieng&#228;nge - Empfehlungen der Expertenkommission zum Masterplan Medizinstudium 2020. K&#246;ln: Wissenschaftsrat; 2018. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;www.wissenschaftsrat.de&#47;download&#47;archiv&#47;7271-18.html</RefTotal>
        <RefLink>https:&#47;&#47;www.wissenschaftsrat.de&#47;download&#47;archiv&#47;7271-18.html</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>Scheffer C</RefAuthor>
        <RefAuthor>Edelh&#228;user F</RefAuthor>
        <RefAuthor>Tauschel D</RefAuthor>
        <RefAuthor>Riechmann M</RefAuthor>
        <RefAuthor>Tekian A</RefAuthor>
        <RefTitle>Can final year medical students significantly contribute to patient care&#63; A pilot study about the perception of patients and clinical staff</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>552-557</RefPage>
        <RefTotal>Scheffer C, Edelh&#228;user F, Tauschel D, Riechmann M, Tekian A. Can final year medical students significantly contribute to patient care&#63; A pilot study about the perception of patients and clinical staff. Med Teach. 2010;32(7):552-557. DOI: 10.3109&#47;01421590903437170</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3109&#47;01421590903437170</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Bransen D</RefAuthor>
        <RefAuthor>Govaerts MJ</RefAuthor>
        <RefAuthor>Sluijsmans DM</RefAuthor>
        <RefAuthor>Driessen EW</RefAuthor>
        <RefTitle>Beyond the self: The role of co-regulation in medical students&#39; self-regulated learning</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>234-241</RefPage>
        <RefTotal>Bransen D, Govaerts MJ, Sluijsmans DM, Driessen EW. Beyond the self: The role of co-regulation in medical students&#39; self-regulated learning. Med Educ. 2020;54(3):234-241. DOI: 10.1111&#47;medu.14018</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;medu.14018</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>Mylopoulos M</RefAuthor>
        <RefAuthor>Kulasegaram KM</RefAuthor>
        <RefAuthor>Weyman K</RefAuthor>
        <RefAuthor>Bernstein S</RefAuthor>
        <RefAuthor>Martimianakis MA</RefAuthor>
        <RefTitle>Same but different: exploring mechanisms of learning in a longitudinal integrated clerkship</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Acad Med</RefJournal>
        <RefPage>411-416</RefPage>
        <RefTotal>Mylopoulos M, Kulasegaram KM, Weyman K, Bernstein S, Martimianakis MA. Same but different: exploring mechanisms of learning in a longitudinal integrated clerkship. Acad Med. 2020;95(3):411-416. DOI: 10.1097&#47;ACM.0000000000002960</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1097&#47;ACM.0000000000002960</RefLink>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Hyde S</RefAuthor>
        <RefAuthor>Hannigan A</RefAuthor>
        <RefAuthor>Dornan T</RefAuthor>
        <RefAuthor>McGrath D</RefAuthor>
        <RefTitle>Medical school clinical placements - the optimal method for assessing the clinical educational environment from a graduate entry perspective</RefTitle>
        <RefYear>2018</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>7</RefPage>
        <RefTotal>Hyde S, Hannigan A, Dornan T, McGrath D. Medical school clinical placements - the optimal method for assessing the clinical educational environment from a graduate entry perspective. BMC Med Educ. 2018;18(1):7. DOI: 10.1186&#47;s12909-017-1113-y</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;s12909-017-1113-y</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Dornan T</RefAuthor>
        <RefAuthor>Pearson E</RefAuthor>
        <RefAuthor>Carson P</RefAuthor>
        <RefAuthor>Helmich E</RefAuthor>
        <RefAuthor>Bundy C</RefAuthor>
        <RefTitle>Emotions and identity in the figured world of becoming a doctor</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>174-185</RefPage>
        <RefTotal>Dornan T, Pearson E, Carson P, Helmich E, Bundy C. Emotions and identity in the figured world of becoming a doctor. Med Educ. 2015;49(2):174-185. DOI: 10.1111&#47;medu.12587</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;medu.12587</RefLink>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>Fernando N</RefAuthor>
        <RefAuthor>McAdam T</RefAuthor>
        <RefAuthor>Youngson G</RefAuthor>
        <RefAuthor>McKenzie H</RefAuthor>
        <RefAuthor>Cleland J</RefAuthor>
        <RefAuthor>Yule S</RefAuthor>
        <RefTitle>Undergraduate medical students&#39; perceptions and expectations of theatre-based learning: how can we improve the student learning experience&#63;</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>Surgeon</RefJournal>
        <RefPage>271-274</RefPage>
        <RefTotal>Fernando N, McAdam T, Youngson G, McKenzie H, Cleland J, Yule S. Undergraduate medical students&#39; perceptions and expectations of theatre-based learning: how can we improve the student learning experience&#63; Surgeon. 2007;5(5):271-274. DOI: 10.1016&#47;s1479-666x(07)80024-2</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;s1479-666x(07)80024-2</RefLink>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Ansakorpi H</RefAuthor>
        <RefAuthor>Sumelahti ML</RefAuthor>
        <RefAuthor>Kaasila R</RefAuthor>
        <RefTitle>Medical students&#39; experience of emotions and success in neurological studies - What do they tell us&#63;</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>68</RefPage>
        <RefTotal>Ansakorpi H, Sumelahti ML, Kaasila R. Medical students&#39; experience of emotions and success in neurological studies - What do they tell us&#63; BMC Med Educ. 2017;17(1):68. DOI: 10.1186&#47;s12909-017-0905-4</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;s12909-017-0905-4</RefLink>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Narci&#223; E</RefAuthor>
        <RefAuthor>Sch&#252;ttpelz-Brauns K</RefAuthor>
        <RefAuthor>G&#252;nther J</RefAuthor>
        <RefAuthor>Grab C</RefAuthor>
        <RefAuthor>V&#246;gele E</RefAuthor>
        <RefAuthor>N&#252;hse K</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2017</RefYear>
        <RefBookTitle>A comparison of standards for medical training during the final year in Germany 2013 versus 2016. Annual Meeting of the Association for Medical Education in Europe (AMEE). Helsinki, 26.08-30.08.2017</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Narci&#223; E, Sch&#252;ttpelz-Brauns K, G&#252;nther J, Grab C, V&#246;gele E, N&#252;hse K. A comparison of standards for medical training during the final year in Germany 2013 versus 2016.  Annual Meeting of the Association for Medical Education in Europe (AMEE). Helsinki, 26.08-30.08.2017. Dublin: AMEE; 2017.</RefTotal>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>Krapp N</RefAuthor>
        <RefAuthor>Sch&#252;ttpelz-Brauns K</RefAuthor>
        <RefAuthor>Narciss E</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2018</RefYear>
        <RefBookTitle>MFT-Basislogb&#252;cher: Lernziele teilweise realit&#228;tsfern&#63; In: Jahrestagung der Gesellschaft f&#252;r Medizinische Ausbildung (GMA). Wien, 19.-22.09.2018</RefBookTitle>
        <RefPage>Doc44</RefPage>
        <RefTotal>Krapp N, Sch&#252;ttpelz-Brauns K, Narciss E. MFT-Basislogb&#252;cher: Lernziele teilweise realit&#228;tsfern&#63; In: Jahrestagung der Gesellschaft f&#252;r Medizinische Ausbildung (GMA). Wien, 19.-22.09.2018. D&#252;sseldorf: German Medical Science GMS Publishing House; 2018. Doc4.4. DOI: 10.3205&#47;18gma025</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;18gma025</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Wolfgarten E</RefAuthor>
        <RefAuthor>M&#246;nig S</RefAuthor>
        <RefAuthor>Fetzner U</RefAuthor>
        <RefAuthor>Schr&#246;der W</RefAuthor>
        <RefAuthor>Bollschweiler E</RefAuthor>
        <RefTitle>Erfahrungen mit einem f&#228;cher&#252;bergreifenden Logbuch f&#252;r Medizinstudenten im Chirurgischen Tertial des Praktischen Jahres am Uniklinikum K&#246;ln</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Zentralbl Chir</RefJournal>
        <RefPage>180-186</RefPage>
        <RefTotal>Wolfgarten E, M&#246;nig S, Fetzner U, Schr&#246;der W, Bollschweiler E. Erfahrungen mit einem f&#228;cher&#252;bergreifenden Logbuch f&#252;r Medizinstudenten im Chirurgischen Tertial des Praktischen Jahres am Uniklinikum K&#246;ln &#91;Experience with an interdisciplinary surgical handbook for medical students&#93;. Zentralbl Chir. 2012;137(02):180-186. DOI: 10.1055&#47;s-0031-1283810</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1055&#47;s-0031-1283810</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Kadmon M</RefAuthor>
        <RefAuthor>Roth S</RefAuthor>
        <RefAuthor>Porsche M</RefAuthor>
        <RefAuthor>Sch&#252;rer S</RefAuthor>
        <RefAuthor>Engel C</RefAuthor>
        <RefAuthor>Kadmon G</RefAuthor>
        <RefTitle>Das interaktive Chirurgische Logbuch im Praktischen Jahr: Eine mehrj&#228;hrige Retrospektive</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc22</RefPage>
        <RefTotal>Kadmon M, Roth S, Porsche M, Sch&#252;rer S, Engel C, Kadmon G. Das interaktive Chirurgische Logbuch im Praktischen Jahr: Eine mehrj&#228;hrige Retrospektive. GMS Z Med Ausbild. 2009;26(2):Doc22. DOI: 10.3205&#47;zma00614 </RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma00614</RefLink>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>Schick K</RefAuthor>
        <RefAuthor>Eissner A</RefAuthor>
        <RefAuthor>Wijnen-Meijer M</RefAuthor>
        <RefAuthor>Johannink J</RefAuthor>
        <RefAuthor>Huenges B</RefAuthor>
        <RefAuthor>Ehrhardt M</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefAuthor>Berberat PO</RefAuthor>
        <RefAuthor>Rotthoff T</RefAuthor>
        <RefTitle>Implementing a logbook on entrustable professional activities in the final year of undergraduate medical education in Germany &#8211; a multicentric pilot study</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>GMS J Med Educ</RefJournal>
        <RefPage>Doc69</RefPage>
        <RefTotal>Schick K, Eissner A, Wijnen-Meijer M, Johannink J, Huenges B, Ehrhardt M, Kadmon M, Berberat PO, Rotthoff T. Implementing a logbook on entrustable professional activities in the final year of undergraduate medical education in Germany &#8211; a multicentric pilot study. GMS J Med Educ. 2019;36(6):Doc69. DOI: 10.3205&#47;zma001277</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma001277</RefLink>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>Jud SM</RefAuthor>
        <RefAuthor>Cupisti S</RefAuthor>
        <RefAuthor>Frobenius W</RefAuthor>
        <RefAuthor>Benn S</RefAuthor>
        <RefAuthor>Winkler A</RefAuthor>
        <RefAuthor>Antoniadis S</RefAuthor>
        <RefAuthor>Beckmann MW</RefAuthor>
        <RefAuthor>Heindl F</RefAuthor>
        <RefTitle>Logbooks alone are not enough: initial experience with implementing a logbook for medical students in a clinical internship in gynecology and obstetrics</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Eur J Med Res</RefJournal>
        <RefPage>15</RefPage>
        <RefTotal>Jud SM, Cupisti S, Frobenius W, Benn S, Winkler A, Antoniadis S, Beckmann MW, Heindl F. Logbooks alone are not enough: initial experience with implementing a logbook for medical students in a clinical internship in gynecology and obstetrics. Eur J Med Res. 2020;25(1):15. DOI: 10.1186&#47;s40001-020-00413-6</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;s40001-020-00413-6</RefLink>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>Peters H</RefAuthor>
        <RefAuthor>Holzhausen Y</RefAuthor>
        <RefAuthor>Boscardin C</RefAuthor>
        <RefAuthor>ten Cate O</RefAuthor>
        <RefAuthor>Chen HC</RefAuthor>
        <RefTitle>Twelve tips for the implementation of EPAs for assessment and entrustment decisions</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>802-807</RefPage>
        <RefTotal>Peters H, Holzhausen Y, Boscardin C, ten Cate O, Chen HC. Twelve tips for the implementation of EPAs for assessment and entrustment decisions. Med Teach. 2017;39(8):802-807. DOI: 10.1080&#47;0142159X.2017.1331031</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1080&#47;0142159X.2017.1331031</RefLink>
      </Reference>
      <Reference refNo="18">
        <RefAuthor>Berberat PO</RefAuthor>
        <RefAuthor>Rotthoff T</RefAuthor>
        <RefAuthor>Baerwald C</RefAuthor>
        <RefAuthor>Ehrhardt M</RefAuthor>
        <RefAuthor>Huenges B</RefAuthor>
        <RefAuthor>Johannink J</RefAuthor>
        <RefAuthor>Narciss E</RefAuthor>
        <RefAuthor>Obertacke U</RefAuthor>
        <RefAuthor>Peters H</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefTitle>Entrustable Professional Activities in final year undergraduate medical training - advancement of the final year training logbook in Germany</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>GMS J Med Educ</RefJournal>
        <RefPage>Doc70</RefPage>
        <RefTotal>Berberat PO, Rotthoff T, Baerwald C, Ehrhardt M, Huenges B, Johannink J, Narciss E, Obertacke U, Peters H, Kadmon M. Entrustable Professional Activities in final year undergraduate medical training - advancement of the final year training logbook in Germany. GMS J Med Educ. 2019;36(6):Doc70. DOI: 10.3205&#47;zma001278</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma001278</RefLink>
      </Reference>
      <Reference refNo="19">
        <RefAuthor>ten Cate O</RefAuthor>
        <RefAuthor>Chen HC</RefAuthor>
        <RefAuthor>Hoff RG</RefAuthor>
        <RefAuthor>Peters H</RefAuthor>
        <RefAuthor>Bok H</RefAuthor>
        <RefAuthor>van der Schaaf M</RefAuthor>
        <RefTitle>Curriculum development for the workplace using Entrustable Professional Activities (EPAs): AMEE Guide No. 99</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>983-1002</RefPage>
        <RefTotal>ten Cate O, Chen HC, Hoff RG, Peters H, Bok H, van der Schaaf M. Curriculum development for the workplace using Entrustable Professional Activities (EPAs): AMEE Guide No. 99. Med Teach. 2015;37(11):983-1002. DOI: 10.3109&#47;0142159X.2015.1060308</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3109&#47;0142159X.2015.1060308</RefLink>
      </Reference>
      <Reference refNo="20">
        <RefAuthor>ten Cate O</RefAuthor>
        <RefAuthor>Scheele F</RefAuthor>
        <RefTitle>Competency-based postgraduate training: can we bridge the gap between theory and clinical practice&#63;</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>Acad Med</RefJournal>
        <RefPage>542-547</RefPage>
        <RefTotal>ten Cate O, Scheele F. Competency-based postgraduate training: can we bridge the gap between theory and clinical practice&#63; Acad Med. 2007;82(6):542-547. DOI: 10.1097&#47;ACM.0b013e31805559c7</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1097&#47;ACM.0b013e31805559c7</RefLink>
      </Reference>
      <Reference refNo="21">
        <RefAuthor>Giesler M</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2013</RefYear>
        <RefBookTitle>Lehrf&#246;rderliche Rahmenbedingungen an den Fakult&#228;ten. Workshop des GMA-Ausschusses f&#252;r Personal- und Organisationsentwicklung in der Lehre. M&#252;nchen, 01.-02. M&#228;rz 2013</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Giesler M. Lehrf&#246;rderliche Rahmenbedingungen an den Fakult&#228;ten. Workshop des GMA-Ausschusses f&#252;r Personal- und Organisationsentwicklung in der Lehre. M&#252;nchen: 01.&#8211; 02. M&#228;rz 2013.</RefTotal>
      </Reference>
      <Reference refNo="22">
        <RefAuthor>Sch&#252;ttpelz-Brauns K</RefAuthor>
        <RefAuthor>Narci&#223; E</RefAuthor>
        <RefAuthor>Lammerding-K&#246;ppel M</RefAuthor>
        <RefAuthor>Griewatz J</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2016</RefYear>
        <RefBookTitle>Welche Rahmenbedingungen beeinflussen die Umsetzung kompetenzorientierter Lehrprojekte im Rahmen der medizindidaktischen Qualifizierung&#63; In: Jahrestagung der Gesellschaft f&#252;r Medizinische Ausbildung (GMA). Bern, 14.-17.09.2016.</RefBookTitle>
        <RefPage>DocV9-561</RefPage>
        <RefTotal>Sch&#252;ttpelz-Brauns K, Narci&#223; E, Lammerding-K&#246;ppel M, Griewatz J. Welche Rahmenbedingungen beeinflussen die Umsetzung kompetenzorientierter Lehrprojekte im Rahmen der medizindidaktischen Qualifizierung&#63; In: Jahrestagung der Gesellschaft f&#252;r Medizinische Ausbildung (GMA). Bern, 14.-17.09.2016. D&#252;sseldorf: German Medical Science GMS Publishing House; 2016. DocV9-561. DOI: 10.3205&#47;16gma310</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;16gma310</RefLink>
      </Reference>
      <Reference refNo="23">
        <RefAuthor>N&#252;hse K</RefAuthor>
        <RefAuthor>Narci&#223; E</RefAuthor>
        <RefAuthor>Stiepak J</RefAuthor>
        <RefAuthor>&#214;chsner W</RefAuthor>
        <RefAuthor>Schneyinck C</RefAuthor>
        <RefAuthor>Wosnik A</RefAuthor>
        <RefAuthor>Sch&#252;ttpelz-Brauns K</RefAuthor>
        <RefTitle>Entwicklung eines Manuals f&#252;r Betreuer im Praktischen Jahr f&#252;r die Medizinischen Fakult&#228;ten in Baden-W&#252;rttemberg</RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>Gemeinsame Jahrestagung der Gesellschaft f&#252;r Medizinische Ausbildung (GMA) und des Arbeitskreises zur Weiterentwicklung der Lehre in der Zahnmedizin (AKWLZ).. Leipzig, 30.09.-03.10.2015</RefBookTitle>
        <RefPage>DocP10-144</RefPage>
        <RefTotal>N&#252;hse K, Narci&#223; E, Stiepak J, &#214;chsner W, Schneyinck C, Wosnik A, Sch&#252;ttpelz-Brauns K. Entwicklung eines Manuals f&#252;r Betreuer im Praktischen Jahr f&#252;r die Medizinischen Fakult&#228;ten in Baden-W&#252;rttemberg. In: Gemeinsame Jahrestagung der Gesellschaft f&#252;r Medizinische Ausbildung (GMA) und des Arbeitskreises zur Weiterentwicklung der Lehre in der Zahnmedizin (AKWLZ). Leipzig, 30.09.-03.10.2015. D&#252;sseldorf: German Medical Science GMS Publishing House; 2015. DocP10-144. DOI: 10.3205&#47;15gma175</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;15gma175</RefLink>
      </Reference>
      <Reference refNo="24">
        <RefAuthor>Kuhn S</RefAuthor>
        <RefAuthor>Frankenhauser S</RefAuthor>
        <RefAuthor>Tolks D</RefAuthor>
        <RefTitle>Digitale Lehr- und Lernangebote in der medizinischen Ausbildung</RefTitle>
        <RefYear>2018</RefYear>
        <RefJournal>Bundesgesundheitsblatt Gesundheitsforschung Gesundheitsschutz</RefJournal>
        <RefPage>201-209</RefPage>
        <RefTotal>Kuhn S, Frankenhauser S, Tolks D. Digitale Lehr- und Lernangebote in der medizinischen Ausbildung. Bundesgesundheitsblatt Gesundheitsforschung Gesundheitsschutz. 2018;61(2):201-209. DOI: 10.1007&#47;s00103-017-2673-z</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;s00103-017-2673-z</RefLink>
      </Reference>
      <Reference refNo="25">
        <RefAuthor>Cook DA</RefAuthor>
        <RefAuthor>Levinson AJ</RefAuthor>
        <RefAuthor>Garside S</RefAuthor>
        <RefAuthor>Dupras DM</RefAuthor>
        <RefAuthor>Erwin PJ</RefAuthor>
        <RefAuthor>Montori VM</RefAuthor>
        <RefTitle>Internet-based learning in the health professions: a meta-analysis</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>JAMA</RefJournal>
        <RefPage>1181-1196</RefPage>
        <RefTotal>Cook DA, Levinson AJ, Garside S, Dupras DM, Erwin PJ, Montori VM. Internet-based learning in the health professions: a meta-analysis. JAMA. 2008;300(10):1181-1196. DOI: 10.1001&#47;jama.300.10.1181</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1001&#47;jama.300.10.1181</RefLink>
      </Reference>
      <Reference refNo="26">
        <RefAuthor>Fleige M</RefAuthor>
        <RefAuthor>Gieseke W</RefAuthor>
        <RefAuthor>von Hippel A</RefAuthor>
        <RefAuthor>K&#228;pplinger B</RefAuthor>
        <RefAuthor>Robak S</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2019</RefYear>
        <RefBookTitle>Programm- und Angebotsentwicklung in der Erwachsenen- und Weiterbildung</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Fleige M, Gieseke W, von Hippel A, K&#228;pplinger B, Robak S. Programm- und Angebotsentwicklung in der Erwachsenen- und Weiterbildung. 2 ed. Bielefeld: wbv Publikation; 2019. DOI: 10.36198&#47;9783838552828</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.36198&#47;9783838552828</RefLink>
      </Reference>
      <Reference refNo="27">
        <RefAuthor>Schlutz E</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2006</RefYear>
        <RefBookTitle>Bildungsdienstleistungen und Angebotsentwicklung</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Schlutz E. Bildungsdienstleistungen und Angebotsentwicklung. M&#252;nster: Waxmann; 2006.</RefTotal>
      </Reference>
      <Reference refNo="28">
        <RefAuthor>Faulstich P</RefAuthor>
        <RefAuthor>Zeuner C</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2010</RefYear>
        <RefBookTitle>Erwachsenenbildung</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Faulstich P, Zeuner C. Erwachsenenbildung. Weinheim, Basel: Beltz; 2010.</RefTotal>
      </Reference>
      <Reference refNo="29">
        <RefAuthor>M&#252;ller E</RefAuthor>
        <RefAuthor>Coun&#233; B</RefAuthor>
        <RefAuthor>Goebel S</RefAuthor>
        <RefAuthor>Stoller F</RefAuthor>
        <RefAuthor>Becker G</RefAuthor>
        <RefTitle>Modulare wissenschaftliche Weiterbildung f&#252;r heterogene Zielgruppen entwickeln: Formate &#8211; Methoden &#8211; Herausforderungen</RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>Die Bedarfsanalyse als wichtiges Instrument in der Angebotsentwicklung</RefBookTitle>
        <RefPage>41-54</RefPage>
        <RefTotal>M&#252;ller E, Coun&#233; B, Goebel S, Stoller F, Becker G. Modulare wissenschaftliche Weiterbildung f&#252;r heterogene Zielgruppen entwickeln: Formate &#8211; Methoden &#8211; Herausforderungen. In: Besters-Dilger J, Neuhaus G, editors. Die Bedarfsanalyse als wichtiges Instrument in der Angebotsentwicklung. Freiburg: Rombach; 2015. p.41-54.</RefTotal>
      </Reference>
      <Reference refNo="30">
        <RefAuthor>Narci&#223; E</RefAuthor>
        <RefAuthor>Sch&#252;ttpelz- Brauns K</RefAuthor>
        <RefAuthor>Lammerding-K&#246;ppel M</RefAuthor>
        <RefAuthor>Streitlein-B&#246;hme I</RefAuthor>
        <RefAuthor>Stiepak J</RefAuthor>
        <RefAuthor>&#214;chsner W</RefAuthor>
        <RefAuthor>N&#252;hse K</RefAuthor>
        <RefTitle>Distribution and impact of a manual for clinical mentors in the final year</RefTitle>
        <RefYear>2017</RefYear>
        <RefBookTitle>5th International Conference for Research in Medical Education (RIME 2017). D&#252;sseldorf, 15.-17.03.2017</RefBookTitle>
        <RefPage>DocO25</RefPage>
        <RefTotal>Narci&#223; E, Sch&#252;ttpelz- Brauns K, Lammerding-K&#246;ppel M, Streitlein-B&#246;hme I, Stiepak J, &#214;chsner W, N&#252;hse K. Distribution and impact of a manual for clinical mentors in the final year. In: 5th International Conference for Research in Medical Education (RIME 2017). D&#252;sseldorf, 15.-17.03.2017. D&#252;sseldorf: German Medical Science GMS Publishing House; 2017. DocO25. DOI: 10.3205&#47;17rime25</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;17rime25</RefLink>
      </Reference>
      <Reference refNo="31">
        <RefAuthor>Mayring P</RefAuthor>
        <RefTitle>Qualitative Inhaltsanalyse</RefTitle>
        <RefYear>2000</RefYear>
        <RefJournal>Forum Qual Soc Res</RefJournal>
        <RefPage></RefPage>
        <RefTotal>Mayring P. Qualitative Inhaltsanalyse. Forum Qual Soc Res. 2000;1(2). DOI: 10.17169&#47;fqs-1.2.1089 </RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.17169&#47;fqs-1.2.1089</RefLink>
      </Reference>
      <Reference refNo="32">
        <RefAuthor>Halbe B</RefAuthor>
        <RefTitle>Medizinstudium: Das d&#252;rfen Studierende im Praktischen Jahr</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Dtsch Arztebl</RefJournal>
        <RefPage>A-2356&#47;B-1986</RefPage>
        <RefTotal>Halbe B. Medizinstudium: Das d&#252;rfen Studierende im Praktischen Jahr. Dtsch Arztebl. 2020;117:A-2356&#47;B-1986. </RefTotal>
      </Reference>
      <Reference refNo="33">
        <RefAuthor>St&#252;mpfig A</RefAuthor>
        <RefAuthor>B&#246;hmann D</RefAuthor>
        <RefTitle>Das Praktische Jahr - kein rechtsfreier Raum</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>&#196;rzteblatt</RefJournal>
        <RefPage></RefPage>
        <RefTotal>St&#252;mpfig A, B&#246;hmann D. Das Praktische Jahr - kein rechtsfreier Raum. &#196;rzteblatt. 2017;2. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;www.aerzteblatt.de&#47;archiv&#47;193529&#47;Praktisches-Jahr-Kein-rechtsfreier-Raum</RefTotal>
        <RefLink>https:&#47;&#47;www.aerzteblatt.de&#47;archiv&#47;193529&#47;Praktisches-Jahr-Kein-rechtsfreier-Raum</RefLink>
      </Reference>
      <Reference refNo="34">
        <RefAuthor>Wienke A</RefAuthor>
        <RefAuthor>Bernauer R</RefAuthor>
        <RefTitle>Studierende im praktischen Jahr - Verantwortlichkeiten f&#252;r Fehler durch Studierende der Medizin</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>DG Neurologie</RefJournal>
        <RefPage>235-238</RefPage>
        <RefTotal>Wienke A, Bernauer R. Studierende im praktischen Jahr - Verantwortlichkeiten f&#252;r Fehler durch Studierende der Medizin. DG Neurologie. 2019;2:235-238. DOI: 10.1007&#47;s42451- 019- 0067-1</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;s42451- 019- 0067-1</RefLink>
      </Reference>
      <Reference refNo="35">
        <RefAuthor>Jaspers MW</RefAuthor>
        <RefTitle>A comparison of usability methods for testing interactive health technologies: methodological aspects and empirical evidence</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Int J Med Inform</RefJournal>
        <RefPage>340-353</RefPage>
        <RefTotal>Jaspers MW. A comparison of usability methods for testing interactive health technologies: methodological aspects and empirical evidence. Int J Med Inform. 2009;78(5):340-353. DOI: 10.1016&#47;j.ijmedinf.2008.10.002</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.ijmedinf.2008.10.002</RefLink>
      </Reference>
      <Reference refNo="36">
        <RefAuthor>Jaspers MW</RefAuthor>
        <RefAuthor>Steen T</RefAuthor>
        <RefAuthor>van den Bos C</RefAuthor>
        <RefAuthor>Geenen M</RefAuthor>
        <RefTitle>The think aloud method: a guide to user interface design</RefTitle>
        <RefYear>2004</RefYear>
        <RefJournal>Int J Med inform</RefJournal>
        <RefPage>781-795</RefPage>
        <RefTotal>Jaspers MW, Steen T, van den Bos C, Geenen M. The think aloud method: a guide to user interface design. Int J Med inform. 2004;73(11-12):781-795. DOI: 10.1016&#47;j.ijmedinf.2004.08.003</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.ijmedinf.2004.08.003</RefLink>
      </Reference>
      <Reference refNo="37">
        <RefAuthor>van Someren MW</RefAuthor>
        <RefAuthor>Barnard YF</RefAuthor>
        <RefAuthor>Sandberg JA</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>1994</RefYear>
        <RefBookTitle>The think aloud method: a practical guide to modelling cognitive process</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>van Someren MW, Barnard YF, Sandberg JA. The think aloud method: a practical guide to modelling cognitive process. Cambridge, MA: Academic Press; 1994.</RefTotal>
      </Reference>
      <Reference refNo="38">
        <RefAuthor>G&#246;pferich S</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2006</RefYear>
        <RefBookTitle>Textproduktion im Zeitalter der Globalisierung: Entwicklung einer Didaktik des Wissenstransfers</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>G&#246;pferich S. Textproduktion im Zeitalter der Globalisierung: Entwicklung einer Didaktik des Wissenstransfers. 2 ed. T&#252;bingen: Stauffenburg; 2006.</RefTotal>
      </Reference>
      <Reference refNo="39">
        <RefAuthor>Sch&#252;pbach E</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2003</RefYear>
        <RefBookTitle>Didaktischer Leitfaden f&#252;r E-Learning</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Sch&#252;pbach E. Didaktischer Leitfaden f&#252;r E-Learning. Bern: hep; 2003.</RefTotal>
      </Reference>
      <Reference refNo="40">
        <RefAuthor>Huwendiek S</RefAuthor>
        <RefAuthor>Muntau AC</RefAuthor>
        <RefAuthor>Maier EM</RefAuthor>
        <RefAuthor>T&#246;nshoff B</RefAuthor>
        <RefAuthor>Sostmann K</RefAuthor>
        <RefTitle>E-Learning in der medizinischen Ausbildung</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>Monatsschr Kinderheilkd</RefJournal>
        <RefPage>458-463</RefPage>
        <RefTotal>Huwendiek S, Muntau AC, Maier EM, T&#246;nshoff B, Sostmann K. E-Learning in der medizinischen Ausbildung. Monatsschr Kinderheilkd. 2008;156(5):458-463. DOI: 10.1007&#47;s00112-008-1737-4</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;s00112-008-1737-4</RefLink>
      </Reference>
      <Reference refNo="41">
        <RefAuthor>R&#252;hmling M</RefAuthor>
        <RefTitle>Evaluation in Bildungsprogrammen</RefTitle>
        <RefYear>2017</RefYear>
        <RefBookTitle>Weiterbildungsmanagement professionalisieren. Anregungen aus der Weiterbildungspraxis</RefBookTitle>
        <RefPage>114-133</RefPage>
        <RefTotal>R&#252;hmling M. Evaluation in Bildungsprogrammen. In: Universit&#228;t Rostock, wissenschaftliche Weiterbildung, editor. Weiterbildungsmanagement professionalisieren. Anregungen aus der Weiterbildungspraxis. Rostock: Wissenschaftliche Weiterbildung; 2017. p.114-133.</RefTotal>
      </Reference>
    </References>
    <Media>
      <Tables>
        <NoOfTables>0</NoOfTables>
      </Tables>
      <Figures>
        <Figure format="png" height="410" width="1228">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 1: Project steps to develop the information platform for the final year</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 1: Projektschritte bei der Entwicklung der Informationsplattform f&#252;r das Praktische Jahr</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="360" width="662">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 2: Development of the website (only in German): preliminary structure of the homepage for final-year students</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 2: Entwicklung der Website: Vorl&#228;ufige Struktur der Startseite f&#252;r PJ-Studierende</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="605" width="624">
          <MediaNo>3</MediaNo>
          <MediaID language="en">3en</MediaID>
          <MediaID language="de">3de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 3: Homepage for </Mark1><Mark1><Mark2>PJ-input </Mark2></Mark1><Mark1>(website only in German)</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 3: Startseite der </Mark1><Mark1><Mark2>PJ-input</Mark2></Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="482" width="1218">
          <MediaNo>4</MediaNo>
          <MediaID language="en">4en</MediaID>
          <MediaID language="de">4de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 4: Webalizer statistics on the number of computers and page views per month</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 4: Webalizer-Statistik zur Anzahl der Rechner und Seitenaufrufe pro Monat </Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="347" width="1545">
          <MediaNo>5</MediaNo>
          <MediaID language="en">5en</MediaID>
          <MediaID language="de">5de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 5: Matomo statistics on the average number of page views per month per section for the periods August 2021 to May 2022</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 5: Matomo Statistik zur durchschnittlichen Anzahl der Seitenaufrufe pro Monat je Bereich f&#252;r die Zeitr&#228;ume August 2021 bis Mai 2022</Mark1></Pgraph></Caption>
        </Figure>
        <NoOfPictures>5</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <NoOfAttachments>0</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>