<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001057</Identifier>
    <IdentifierDoi>10.3205/zma001057</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0010578</IdentifierUrn>
    <ArticleType language="en">article</ArticleType>
    <ArticleType language="de">Artikel</ArticleType>
    <TitleGroup>
      <Title language="en">How well do final year undergraduate medical students master practical clinical skills&#63;</Title>
      <TitleTranslated language="de">Wie gut beherrschen Studierende im Praktischen Jahr klinisch-praktische Fertigkeiten&#63;</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>St&#246;rmann</Lastname>
          <LastnameHeading>St&#246;rmann</LastnameHeading>
          <Firstname>Sylv&#232;re</Firstname>
          <Initials>S</Initials>
        </PersonNames>
        <Address language="en">Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, Ziemssenstra&#223;e 1, D-80336 M&#252;nchen, Germany, Phone: &#43;49 (0)89&#47;4400-52318, Fax: &#43;49 (0)89&#47;4400-52192<Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation></Address>
        <Address language="de">Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, Ziemssenstra&#223;e 1, 80336 M&#252;nchen, Deutschland, Tel.: &#43;49 (0)89&#47;4400-52318, Fax: &#43;49 (0)89&#47;4400-52192<Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation></Address>
        <Email>sylvere.stoermann&#64;med.uni-muenchen.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Stankiewicz</Lastname>
          <LastnameHeading>Stankiewicz</LastnameHeading>
          <Firstname>Melanie</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Raes</Lastname>
          <LastnameHeading>Raes</LastnameHeading>
          <Firstname>Patricia</Firstname>
          <Initials>P</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Berchtold</Lastname>
          <LastnameHeading>Berchtold</LastnameHeading>
          <Firstname>Christina</Firstname>
          <Initials>C</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Kosanke</Lastname>
          <LastnameHeading>Kosanke</LastnameHeading>
          <Firstname>Yvonne</Firstname>
          <Initials>Y</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Illes</Lastname>
          <LastnameHeading>Illes</LastnameHeading>
          <Firstname>Gabrielle</Firstname>
          <Initials>G</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Loose</Lastname>
          <LastnameHeading>Loose</LastnameHeading>
          <Firstname>Peter</Firstname>
          <Initials>P</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Angstwurm</Lastname>
          <LastnameHeading>Angstwurm</LastnameHeading>
          <Firstname>Matthias W.</Firstname>
          <Initials>MW</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der Universit&#228;t M&#252;nchen, Medizinische Klinik und Poliklinik IV, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">practical examination</Keyword>
      <Keyword language="en">OSCE</Keyword>
      <Keyword language="en">physical examination</Keyword>
      <Keyword language="en">clinical skills</Keyword>
      <Keyword language="de">praktische Pr&#252;fung</Keyword>
      <Keyword language="de">OSCE</Keyword>
      <Keyword language="de">k&#246;rperliche Untersuchung</Keyword>
      <Keyword language="de">klinische Fertigkeiten</Keyword>
      <SectionHeading language="en">Clinical skills</SectionHeading>
      <SectionHeading language="de">Praktische Fertigkeiten</SectionHeading>
    </SubjectGroup>
    <DateReceived>20150930</DateReceived>
    <DateRevised>20160311</DateRevised>
    <DateAccepted>20160510</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20160815</DatePublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>33</Volume>
        <Issue>4</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
        <IssueTitle>Clinical skills</IssueTitle>
      </Journal>
    </SourceGroup>
    <ArticleNo>58</ArticleNo>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph><Mark1>Einleitung: </Mark1>Die k&#246;rperliche Untersuchung und klinisch-praktische Fertigkeiten sind wesentliche &#228;rztliche F&#228;higkeiten, mit deren Hilfe die Diagnostik und Therapie von Krankheiten gesteuert werden. Durch curriculare Ver&#228;nderungen wird der praktischen Ausbildung ein hoher Stellenwert einger&#228;umt. Wie gut beherrschen also Studierende im Praktischen Jahr (PJ) klinisch-praktische Fertigkeiten&#63;</Pgraph><Pgraph><Mark1>Methoden: </Mark1>Wir f&#252;hrten eine freiwillige m&#252;ndlich-praktische Pr&#252;fung mittels OSCE bei Studierenden im PJ durch. Inhalte der Pr&#252;fung waren u.a. die k&#246;rperliche Untersuchung (Herz, Lunge, Abdomens, Gef&#228;&#223;system, Lymphsystem; neurologische, endokrinologische bzw. orthop&#228;dische Untersuchung) sowie elementare praktische Fertigkeiten (etwa EKG-Interpretation, Basis-Befundung R&#246;ntgen-Thorax). Die Teilnehmer f&#252;llten zudem vor Beginn der Pr&#252;fung einen Fragebogen aus, u.a. zur Einsch&#228;tzung der eigenen Leistung.</Pgraph><Pgraph><Mark1>Ergebnisse:</Mark1> Insgesamt 214 PJ-Studierende nahmen teil und erreichten 72,8&#37; der erreichbaren Punktzahl. Eine nicht ausreichende Leistung (&#60;60&#37;) zeigten 9,3&#37; der Teilnehmer (n&#61;20). Geschlecht, vorangegangene Ausbildung in einem Gesundheitsberuf sowie Studienort hatten keinen Einfluss auf die Leistung. Im Mittel sch&#228;tzten sich die Studierenden 0,5 Notenstufen besser. 35,3&#37; der Teilnehmer vermochten ihre Leistung richtig einzusch&#228;tzen. 30,0&#37; &#252;bersch&#228;tzten ihr Ergebnis um eine Notenstufe, 18,8&#37; um zwei oder mehr Notenstufen. </Pgraph><Pgraph><Mark1>Diskussion: </Mark1>Studierende im Praktischen Jahr zeigen deutliche Defizite bei der Durchf&#252;hrung klinisch-praktischer Fertigkeiten im Rahmen einer m&#252;ndlich-praktischen Pr&#252;fung. Dabei &#252;bersch&#228;tzt knapp die H&#228;lfte der Studierenden die eigene Leistung. Eine institutionalisierte, regelhafte Pr&#252;fung der m&#252;ndlich-praktischen F&#228;higkeiten im Praktischen Jahr erscheint daher notwendig.</Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph><Mark1>Introduction: </Mark1>The clinical examination and other practical clinical skills are fundamental to guide diagnosis and therapy. The teaching of such practical skills has gained significance through legislative changes and adjustments of the curricula of medical schools in Germany. We sought to find out how well final year undergraduate medical students master practical clinical skills.</Pgraph><Pgraph><Mark1>Methods:</Mark1> We conducted a formative 4-station objective structured clinical examination (OSCE) focused on practical clinical skills during the final year of undergraduate medical education. Participation was voluntary. Besides the examination of heart, lungs, abdomen, vascular system, lymphatic system as well as the neurological, endocrinological or orthopaedic examination we assessed other basic clinical skills (e.g. interpretation of an ECG, reading a chest X-ray). Participants filled-out a questionnaire prior to the exam, inter alia to give an estimate of their performance.</Pgraph><Pgraph><Mark1>Results: </Mark1>214 final year students participated in our study and achieved a mean score of 72.8&#37; of the total score obtainable. 9.3&#37; of participants (n&#61;20) scored insufficiently (&#60;60&#37;). We found no influence of sex, prior training in healthcare or place of study on performance. Only one third of the students correctly estimated their performance (35.3&#37;), whereas 30.0&#37; and 18.8&#37; over-estimated their performance by 10&#37; and 20&#37; respectively.</Pgraph><Pgraph><Mark1>Discussion: </Mark1>Final year undergraduate medical students demonstrate considerable deficits performing practical clinical skills in the context of a formative assessment. Half of the students over-estimate their own performance. We recommend an institutionalised and frequent assessment of practical clinical skills during undergraduate medical education, especially in the final year.</Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="1. Introduction">
      <MainHeadline>1. Introduction</MainHeadline><Pgraph>The basic clinical examination is a fundamental skill of physicians that facilitates diagnosis and therapy <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>. Technical progress has changed the practice of medicine, which increasingly relies on laboratory assessments, diagnostic imaging, and other sources of technical examination. Some authors mourn that this has led to a deterioration of the ability to perform a systematic and focused hands-on clinical examination <TextLink reference="4"></TextLink>, <TextLink reference="5"></TextLink>. Medical students and young physicians alike demonstrate deficits in performing a clinical examination <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. A legislative reform in Germany in 2002 (Medical Licensure Act) pushed the faculties to develop new curricula with an emphasis on practical training <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>, <TextLink reference="11"></TextLink>, <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>, <TextLink reference="14"></TextLink>. By specifically defining the type and amount, this law formalised clinical practical teaching and its curricular design <TextLink reference="15"></TextLink>. This lead to novel teaching concepts as well as whole curricula centred on medical skills <TextLink reference="16"></TextLink>, <TextLink reference="17"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>. An intensive training of practical clinical skills during the first years of undergraduate medical education aims to prepare students well for their future role as physicians; the final year is an important landmark in undergraduate training and consists mainly of practical exercise of previously and newly acquired skills <TextLink reference="21"></TextLink>. The Medical Curriculum (MeCuM) integrates clinical training into pre-clinical courses during year 2 of undergraduate studies, starting with history taking. Through a variety of diverse formats (lectures, bedside teaching, peer teaching, and blended learning) students learn the theoretical basis of the clinical examination and have the opportunity to put it into practice. Longitudinal internships in general medical practices and frequent bedside courses allow practical exercise and feedback discussions steer the learning. As students progress, further practical clinical skills are taught in the context of their respective system (such as writing and reading an ECG as part of the cardiovascular teaching block, interpretation of a chest X-ray during the respiratory teaching block). Higher-level skills such as clinical decision-making are part of the formation during the final year when students should be proficient in the practice of basic clinical skills. However, a comparison of the performance in the Licensure Examination before and after the reform at both medical faculties in Munich (LMU und TU) showed a statistically significant decline of scores in the oral and practical part of the exam <TextLink reference="22"></TextLink>. Changes in medical curricula in Germany and their impact on the increase in medical knowledge during clinical training are well studied <TextLink reference="23"></TextLink>, <TextLink reference="24"></TextLink>; investigations of learned practical skills and achievement of competence based learning objectives are lacking. It is therefore unclear, how well undergraduate medical students receiving training more focused on clinical skills effectively master these skills in their final year.</Pgraph><Pgraph>Furthermore, the adequate self-assessment of performance and therefore one&#8217;s own limitations play a crucial role in the care for patients. Everyone involved in patient care should seek help in case of overload <TextLink reference="25"></TextLink>. It is important for every (aspiring) physician to recognise limits of one&#8217;s own abilities and to prevent harm through erroneous action or even faulty omission. Danger lies in over-estimation (unconscious incompetence) as well as under-estimation (unconscious competence) of one&#8217;s abilities <TextLink reference="26"></TextLink>. Multiple studies have shown that subjective self-assessment and objectively measured performance do not necessarily correlate <TextLink reference="27"></TextLink>, <TextLink reference="28"></TextLink>, <TextLink reference="29"></TextLink>. Undergraduate medical students have a responsibility towards their patients as well as their teachers to estimate their skills adequately in order to improve on deficits and further develop strengths. This holds especially true as the physical examination acts as a cornerstone of diagnosis <TextLink reference="2"></TextLink>, <TextLink reference="30"></TextLink>. Typically, final year medical students in Germany are first to see admitted patients. Therefore, a realistic self-assessment of examination proficiency is vital for the patients&#8217; well-being and further course of hospital stay. We wanted to know how well undergraduate students in an advanced and critical part of their training could estimate their abilities to perform basic clinical skills.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="1. Einleitung">
      <MainHeadline>1. Einleitung</MainHeadline><Pgraph>Die k&#246;rperliche Untersuchung ist eine der wesentlichen &#228;rztlichen Fertigkeiten, mit deren Hilfe eine Diagnose gestellt und eine Therapie begonnen werden kann <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>. Durch eine zunehmend &#8222;apparativ&#8220; gestaltete Medizin beobachten einige Autoren mit Sorge einen R&#252;ckgang der F&#228;higkeit zur systematischen und fokussierten k&#246;rperlichen Untersuchung <TextLink reference="4"></TextLink>, <TextLink reference="5"></TextLink>. Medizinstudierende wie auch junge &#196;rzte zeigen in einigen Untersuchungen Defizite im Rahmen der k&#246;rperlichen Untersuchung <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. Durch die Neufassung der &#196;rztlichen Approbationsordnung im Jahre 2002 hat sich die Gestaltung des praktischen Unterrichts an deutschen Medizinfakult&#228;ten deutlich ge&#228;ndert und zu einer Vielzahl verschiedener &#196;nderungen und Reformen der Curricula deutscher Medizinfakult&#228;ten gef&#252;hrt <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>, <TextLink reference="11"></TextLink>, <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>, <TextLink reference="14"></TextLink>. Mit den strengen Vorgaben zu Art und Umfang des klinisch-praktischen Unterrichts wurde hierdurch ein neuer Schwerpunkt auf eine Formalisierung des Unterrichts klinischer Fertigkeiten in der curricularen Gestaltung gesetzt <TextLink reference="15"></TextLink>(. Hieraus entstanden auch neue Konzepte zur Gestaltung von Unterricht und ganzen Curricula mit &#228;rztlichen Kompetenzen im Mittelpunkt <TextLink reference="16"></TextLink>, <TextLink reference="17"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>. Dabei zielt eine intensive Schulung klinisch-praktischer F&#228;higkeiten und Kompetenzen w&#228;hrend der ersten Jahre des Medizinstudiums darauf ab, die Studierenden gut auf ihre Rolle als angehende &#196;rzte vorzubereiten, deren praktische Ausbildung im entsprechend benannten Praktischen Jahr kulminiert <TextLink reference="21"></TextLink>. Im Medizinischen Curriculum M&#252;nchen (MeCuM) wird entsprechend den Anforderungen fr&#252;h mit einer klinischen Integration der vorklinischen F&#228;cher begonnen. Ab dem 3. Semester erlernen und &#252;ben die Studierenden die Anamnese. Ab dem 5. Semester kommt die k&#246;rperliche Untersuchung hinzu, deren theoretisches Fundament und die prakische Aus&#252;bung in mehreren Lehrformaten (klassische Vorlesungen, Unterricht am Krankenbett, Peer Teaching, Blended Learning) gelehrt wird. Im Rahmen von longitudinal angelegten Praktika in Allgemeinmedizinischen Praxen sowie wiederholtem Unterricht am Krankenbett werden die k&#246;rperliche Untersuchung und klinische Kompetenzen des Arztes immer wieder ge&#252;bt und durch Feedback-Gespr&#228;che das Lernen gesteuert. Im Laufe des weiteren Studiums werden dabei im system- bzw. fach-bezogenen Kontext weitere praktische Kompetenzen im Rahmen des Unterrichts vermittelt (z.B. EKG schreiben und lesen, Basisdiagnostik in Befundung eines R&#246;ntgen Thorax, Punktionstechniken, situations-bezogene klinische Entscheidungsfindung). Eine vergleichende Untersuchung der Notengebung im Zweiten Staatsexamen nach altem und nach neuem Recht an den beiden medizinischen Fakult&#228;ten in M&#252;nchen (LMU und TU) zeigte jedoch eine statistisch signifikante Verschlechterung der Noten in der m&#252;ndlich-praktischen Abschlusspr&#252;fung <TextLink reference="22"></TextLink>. Die nach 2002 eingetretenen Ver&#228;nderungen in der medizinischen Lehre sind in punkto Wissenszuwachs im klinischen Studienabschnitt gut belegt <TextLink reference="23"></TextLink>, <TextLink reference="24"></TextLink>; bislang fehlen jedoch Untersuchungen zu den erlernten praktischen Fertigkeiten und &#228;rztlichen kompetenzbasierten Lernzielen. Es stellt sich also die Frage, wie gut Studierende, die nach Ma&#223;gabe der &#8222;neuen&#8220; Approbationsordnung unterrichtet und praktisch ausgebildet wurden, im Praktischen Jahr klinisch-praktische Fertigkeiten tats&#228;chlich beherrschen.</Pgraph><Pgraph>Dar&#252;ber hinaus spielt die ad&#228;quate Einsch&#228;tzung der eigenen Leistungsf&#228;higkeit und damit auch der eigenen Kompetenz-Grenzen eine wichtige Rolle in der Versorgung von Patienten. Jeder an der Patientenversorgung Beteiligte sollte bei gef&#252;hlter &#220;berforderung die n&#246;tige Hilfe suchen <TextLink reference="25"></TextLink>. Es ist somit f&#252;r einen jeden (zuk&#252;nftigen) Arzt wichtig, die eigenen Grenzen zu kennen, um weiteren Schaden durch falsches Handeln oder fehlerhaftes Unterlassen zu verhindern. Die Gefahr liegt dabei sowohl im &#220;bersch&#228;tzen (unbewusste Inkompetenz) als auch im Untersch&#228;tzen (unbewusste Kompetenz) der eigenen F&#228;higkeiten <TextLink reference="26"></TextLink>. In mehreren Untersuchungen konnte dabei gezeigt werden, dass zwischen der subjektiven Einsch&#228;tzung der eigenen &#228;rztlichen Leistungsf&#228;higkeit und der objektiv gemessenen Leistungsf&#228;higkeit nicht notwendiger Weise eine Korrelation besteht <TextLink reference="27"></TextLink>, <TextLink reference="28"></TextLink>, <TextLink reference="29"></TextLink>. Auch PJ-Studierende m&#252;ssen bereits &#252;ber eine &#8222;gesunde Selbsteinsch&#228;tzung&#8220; verf&#252;gen und sich ihrer Verantwortung bewusst sein. Diese beginnt bereits bei der Aufnahme des Patienten auf Station. Die k&#246;rperliche Untersuchung ist dabei ein nicht zu ersetzender Grundpfeiler der medizinischen Diagnosefindung <TextLink reference="2"></TextLink>, <TextLink reference="30"></TextLink>, der gute Fachkenntnis und gute manuelle Fertigkeiten voraussetzt. Eine entsprechend realistische Beurteilung der eigenen Leistungsf&#228;higkeit ist daher von besonderer Bedeutung, insbesondere da gerade von der Selbst&#252;bersch&#228;tzung in jungen Assistenzarztjahren gro&#223;e Gefahr f&#252;r das Wohl der anvertrauten Patienten ausgeht. Inwiefern also sind Studierende im Rahmen dieses fortgeschrittenen und kritischen Ausbildungs-Szenarios in der Lage ihre F&#228;higkeiten ad&#228;quat einzusch&#228;tzen&#63;</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="2. Methods">
      <MainHeadline>2. Methods</MainHeadline><Pgraph>Undergraduate medical students in their final year could participate in a formative oral and practical examination (&#8220;m&#252;ndlich-praktische Pr&#252;fung im PJ&#8221;, abbreviated: mP3) using the OSCE format (objective structured clinical examination) from mid-2011 through 2014. The intent of this examination was to offer the participants the possibility to objectively assess practical clinical skills and obtain individual feedback as to identify strengths and weaknesses. The examination consisted of four OSCE stations. The stations covered various aspects of the physical examination: heart, lungs, abdomen, and vascular&#47;lymphatic system as well as neurological, endocrinological, and orthopaedic examination. Amongst others, the stations covered basic clinical skills such as writing and reading of a 12-lead ECG, basic interpretation of an abdominal CT scan, identifying normal and abnormal findings on a chest X-ray, outlining the management of an emergency in the ER, enumerate important laboratory parameters to aid differential diagnosis in specified clinical settings). Two thirds of each station is devoted to the physical examination, the remaining third assesses other clinical skills. Each instalment of the OSCE consisted of stations compiled from a pool of 12 different OSCE stations. An expert panel designed and validated all stations. Participants performed the physical examination on probands instructed not to give any feedback during the examination. Marks for specific steps of the physical examination were awarded only if that step was performed correctly in its entirety. Each station lasted precisely 12 minutes. Afterwards, students obtained 3 minutes feedback from the examiner. All 19 examiners were faculty staff members with experience in examining OSCEs as well as professional experience as clinicians. Frequently held workshops for faculty by our Institute for Didactics and Education Research ensure a high standard of quality in the implantation of assessments such as the OSCE.</Pgraph><Pgraph>Participants voluntarily filled-out a questionnaire referring to personal and demographic details, the course of studies, prior training in healthcare (e.g. as paramedic or as nurse) as well as the assumed mark achieved in the examination (5 point scale as commonly used in Germany for school grading: exam mark 1 &#61; &#8220;excellent&#8221; to 5 &#61; &#8220;insufficient&#8221;). To allow for comparison of the self-assessment with the OSCE score (expressed as percentage of total achievable points), we converted the OSCE score into the same 5 point scale according to a conversion scheme common in Germany and used in the National License Examinations <TextLink reference="8"></TextLink>. Students received a notification of their achieved score after the examination.</Pgraph><Pgraph>All statistical analyses were performed using SPSS (IBM Corp., Armonk, NY, U.S.A.). For the difference between two means, t-tests were used; in cases with multiple groups, an analysis of variance was performed. Effect sizes were assessed using Cohen&#8217;s d. p values &#945;&#61;0.05 were considered statistically significant.</Pgraph><Pgraph>The operational sequence, purpose, and intention of scientific interpretation of the data of this practical examination were announced to the local ethics committee, which deemed a formal ethical approval not necessary. The study was conducted according to principles of the World Medical Association&#8217;s Declaration of Helsinki and Declaration of Geneva. All undergraduate medical students in their final year could participate. Participation was voluntary and participants gave written consent to the scientific analysis of the examination and publication of results. Not consenting did not exclude students from the examination.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="2. Methoden">
      <MainHeadline>2. Methoden</MainHeadline><Pgraph>Studierenden im Praktischen Jahr wurde von Mitte 2011 bis Ende 2014 die freiwillige Teilnahme an einer m&#252;ndlich-praktischen Pr&#252;fung im OSCE-Format angeboten (m&#252;ndlich-praktische Pr&#252;fung im PJ, kurz: mP3). Ziel dieser Pr&#252;fung war es, den Teilnehmern eine M&#246;glichkeit zu bieten, das eigene K&#246;nnen in Bezug auf klinisch-praktische Fertigkeiten und &#228;rztliche Kompetenzen zu &#252;berpr&#252;fen und im Rahmen eines individualisierten Feedbacks St&#228;rken und Schw&#228;chen darzulegen. Die Teilnehmer durchliefen vier OSCE-Stationen zu verschiedenen Teilbereichen klinisch-praktischer Fertigkeiten (Untersuchung des Herzens, der Lunge, des Abdomens, des Gef&#228;&#223;systems, des Lymphsystems; neurologische, endokrinologische bzw. orthop&#228;dische Untersuchung; u.a. Anfertigung und Interpretation eines EKGs, Beurteilung eines Abdomen-CT, Beurteilung und Interpretation einer R&#246;ntgen-Aufnahme des Thorax, Schilderung des praktischen Vorgehens einer klinischen Situation in der Notaufnahme, Anforderung von Laboruntersuchungen bei bestimmten klinischen Fragestellungen). Jede Station bestand zu etwa zwei Dritteln aus k&#246;rperlicher Untersuchung und einem Drittel zum jeweiligen Kontext passende praktische Fertigkeiten. Jede Pr&#252;fung wurde dabei vorab aus einem Katalog von insgesamt 12 verschiedenen OSCE-Stationen zusammengestellt. Alle OSCE-Stationen wurden durch ein Expertengremium gestaltet und validiert. F&#252;r die Pr&#252;fung der k&#246;rperlichen Untersuchung wurden standardisierte Probanden verwendet. Punkte wurden nur f&#252;r die korrekte Durchf&#252;hrung der einzelnen Schritte vergeben. F&#252;r jede der Stationen hatten die Studierenden exakt 12 Minuten Zeit. Im Anschluss erfolgte ein 3-min&#252;tiges Feedback durch den Pr&#252;fer. Jeder der insgesamt 19 Pr&#252;fer verf&#252;gte &#252;ber Erfahrung als Pr&#252;fer in einem OSCE sowie klinisch-praktische Berufserfahrung. Durch regelm&#228;&#223;ig stattfindende Dozententrainings durch unser Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin werden dabei einheitliche Qualit&#228;tsstandards bei Pr&#252;fungsformaten wie dem OSCE erreicht.</Pgraph><Pgraph>Die Studierenden gaben mittels eines Fragebogen freiwillig Auskunft &#252;ber pers&#246;nliche und demographische Angaben, den Studienverlauf (einschlie&#223;lich aktuellem PJ-Tertial) sowie etwaige vor dem Studium erworbene F&#228;higkeiten im Gesundheitsbereich (etwa: Ausbildung zum Rettungssanit&#228;ter bzw. zum Gesundheitspfleger), sowie die Selbsteinsch&#228;tzung der klinischen Kompetenz auf einer 5-Punkte Notenskala (Note 1&#61;&#8222;sehr gut&#8220;, Note 5&#61;&#8222;mangelhaft&#8220;). Um die studentische Selbsteinsch&#228;tzung mit dem objektiven Ergebnis der OSCE-Pr&#252;fung vergleichen zu k&#246;nnen, wurde das Ergebnis in Notenstufen entsprechend dem Notenschl&#252;ssel f&#252;r schriftliche Pr&#252;fungen der &#196;rztlichen Approbationsordnung umgewandelt <TextLink reference="8"></TextLink>. Das Gesamtergebnis der Pr&#252;fung und ihrer einzelnen Teilstationen wurde nach Auswertung der jeweiligen Pr&#252;fung den Teilnehmern mitgeteilt.</Pgraph><Pgraph>Die statistische Auswertung wurde mit dem Programm SPSS (IBM Corp., Armonk, NY, U.S.A.) durchgef&#252;hrt. Mittelwertsunterschiede zwischen zwei Gruppen wurden mit Hilfe der t-Test-Familie untersucht; bei mehreren Gruppen wurde eine Varianzanalyse durchgef&#252;hrt. Die Effektst&#228;rken wurde mittels Cohen&#8217;s d bestimmt. Es wurde ein Signifikanzniveau von &#945;&#61;0,05 festgelegt.</Pgraph><Pgraph>Ablauf, Zweck und Intention der wissenschaftlichen Auswertung der praktischen Pr&#252;fung wurden der lokalen Ethikkommission der LMU angezeigt. Die formale Ausstellung eines Ethikvotums zur Durchf&#252;hrung dieser Studie wurde durch diese jedoch als nicht notwendig bewertet. Die Studie wurde nach den Grunds&#228;tzen der Deklaration von Helsinki (Neufassung Seoul 2008) und dem Genfer Gel&#246;bnis durchgef&#252;hrt. Die Teilnahme an der Pr&#252;fung und der Studie war freiwillig; die Teilnehmer stimmten der Auswertung der Pr&#252;fungsergebnisse schriftlich zu. Die Teilnahme zur Pr&#252;fung wurde allen PJ-Studierenden angeboten. Die Teilnahme an der Pr&#252;fung wurde nicht von der Einwilligung zur wissenschaftlichen Auswertung abh&#228;ngig gemacht.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="3. Results">
      <MainHeadline>3. Results</MainHeadline><SubHeadline2>Study population</SubHeadline2><Pgraph>214 students participated in the study from mid-2011 until the end of 2014. Median age of participants was 26.3 (&#177;4.5) years. Almost two thirds (64.0&#37;; n&#61;137) were female, thus corresponding to the gender distribution of all undergraduate medical students at the LMU Munich. There was no significant age difference between female and male participants (m&#61;27.5&#177;3.2 years; f&#61;27.1&#177;5.1 years; p&#61;0.544). Most participants (n&#61;156; 72.9&#37;) had pursued their medical studies at the LMU Munich from the beginning; the other participants had joined the LMU Munich at later stages of their undergraduate studies.</Pgraph><SubHeadline2>Total performance</SubHeadline2><Pgraph>On average participants achieved 72.8&#37;&#177;10.1&#37; of the maximum total score (see Figure 1 <ImgLink imgNo="1" imgType="figure"/>). After converting the performance score into a 5 point scale only 3.7&#37; achieved an examination mark of &#8220;1&#8221; (&#8220;excellent&#8221;; score&#61;90&#37;; n&#61;8), 23.4&#37; a mark of &#8220;2&#8221; (&#8220;good&#8221;; score 80-90&#37;; n&#61;50), 34.6 a mark of &#8220;3&#8221; (&#8220;fair&#8221;; score 70-80&#37;; n&#61;74), and 29.0&#37; a mark of &#8220;4&#8221; (&#8220;poor&#8221;; score 60-70&#37;; n&#61;62). Twenty students (9.3&#37;) had an &#8220;insufficient&#8221; score (defined as&#60;60&#37;; mark of &#8220;5&#8221;).</Pgraph><SubHeadline2>Confounding factors</SubHeadline2><Pgraph>Female participants had a tendency towards slightly higher scores; however, this difference was not significant (73.7&#37;&#177;10.1&#37; versus 71.1&#37;&#177;9.9&#37;; p&#61;0.069). There were no significant differences in scores between participants who had studied at the LMU Munich from the beginning vs. at later stages (p&#61;0.349). A prior training in healthcare did not yield other scores than without prior training (p&#61;0.363). Scores were homogenously distributed amongst participants from 2011 until 2014 (p&#61;0.881).</Pgraph><Pgraph>The majority of participants stated not having prepared themselves specifically for the exam (63.1&#37;). They achieved significantly lower scores in comparison to prepared students (71.8&#37;&#177;9.3&#37; vs. 78.6&#37;&#177;10,0&#37;; p&#60;0,001; d&#61;0,27). For an overview of these results, cf. Table 1 <ImgLink imgNo="1" imgType="table"/>.</Pgraph><SubHeadline2>Self-assessment</SubHeadline2><Pgraph>170 participants (79.4&#37;) gave an estimate of their performance in the examination. Self-assessed performance and total examination score correlated positively and significantly (r&#61;0.26; p&#60;0.001). On average, students over-estimated their performance by half an examination mark. 60 participants (35.3&#37;) correctly assessed their performance. 51 students (30.0&#37;) over-estimated their performance by one, 32 participants (18.8&#37;) by two marks. 21 students (12.4&#37;) under-estimated their performance by one, 6 participants (3.5&#37;) by two marks. Of the 20 participants with a total score below 60&#37; (&#8220;insufficient&#8221;) 16 had self-assessed their performance of which 13 (81.3&#37;) were over-estimating. Confer to Figure 2 <ImgLink imgNo="2" imgType="figure"/> for an overview of self-assessment in relation to total score.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="3. Ergebnisse">
      <MainHeadline>3. Ergebnisse</MainHeadline><SubHeadline2>Studienpopulation</SubHeadline2><Pgraph>An der Studie nahmen insgesamt 214 Studierende im Zeitraum von Mitte 2011 bis Ende 2014 statt. Das mediane Alter der Studierenden betrug 26,3 Jahre (&#177;4,5 Jahre). 64,0&#37; der Teilnehmer waren weiblich (n&#61;137), entsprechend der Geschlechterverteilung aller Medizinstudierenden an der LMU M&#252;nchen. Das Alter unterschied sich nicht signifikant zwischen den Geschlechtern (m&#61;27,5&#177;3,2 Jahre; w&#61;27,1&#177;5,1 Jahre; p&#61;0,544). 156 Teilnehmer (72,9&#37;) hatten ihr bisheriges Studium vollst&#228;ndig an der LMU M&#252;nchen absolviert.</Pgraph><SubHeadline2>Gesamtleistung</SubHeadline2><Pgraph>Im Mittel erreichten die Teilnehmer 72,8&#37;&#177;10,1&#37; der erreichbaren Punktezahl (Histogramm: siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>). Entsprechend dem Notenschl&#252;ssel f&#252;r schriftliche Pr&#252;fungen der &#196;rztlichen Approbationsordnung erreichten 3,7&#37; die Note 1 (Punktewert &#61;90&#37;, n&#61;8), 23,4&#37; die Note 2 (80-90&#37;, n&#61;50), 34,6&#37; die Note 3 (70-80&#37;, n&#61;74) und 29,0&#37; die Note 4 (60-70&#37;, n&#61;62). Von allen Teilnehmern erzielten 9,3&#37; (n&#61;20) weniger als 60&#37; der erreichbaren Punkte, entsprechend einer nicht ausreichenden Leistung.</Pgraph><SubHeadline2>Beeinflussende Faktoren</SubHeadline2><Pgraph>Der Vergleich der Leistung getrennt nach Geschlechtern zeigt eine tendenziell, allerdings nicht signifikant bessere Leistung der weiblichen Pr&#252;fungsteilnehmerinnen (73,7&#37;&#177;10,1&#37; versus 71,1&#37;&#177;9,9&#37;; p&#61;0,069). Die Pr&#252;fungsergebnisse von Studierenden, die ihr Studium vollst&#228;ndig an der LMU M&#252;nchen absolviert haben, unterschieden sich nicht signifikant von anderen Medizinstudierenden, die w&#228;hrend des Studiums oder zum PJ an die LMU M&#252;nchen wechselten (p&#61;0,349). Auch eine vorausgegangene Ausbildung in einem Gesundheitsberuf ging nicht mit signifikant besseren Leistungen einher (p&#61;0,363). Es zeigten sich ebenfalls keine Unterschiede der Pr&#252;fungsleistung von 2011 bis 2014 (p&#61;0,881).</Pgraph><Pgraph>Der Gro&#223;teil der Studierenden stellte sich laut eigenen Angaben ohne vorherige, spezifische Vorbereitung zur Pr&#252;fung vor (63,1&#37;). Hierbei wurden signifikant schlechtere Ergebnisse erzielt (71,8&#37;&#177;9,3&#37;) als durch die Studierenden, die sich vor der Pr&#252;fung darauf vorbereitet hatten. Letztere erreichten ein Ergebnis von 78,6&#37;&#177; 0,0&#37; (p&#60;0,001; d&#61;0,27). Einen &#220;berblick &#252;ber die Pr&#252;fungsergebnisse der untersuchten Faktoren gibt Tabelle 1 <ImgLink imgNo="1" imgType="table"/>.</Pgraph><SubHeadline2>Selbsteinsch&#228;tzung</SubHeadline2><Pgraph>Insgesamt 79,4&#37; der Teilnehmer (n&#61;170) gaben eine Einsch&#228;tzung der eigenen Kompetenz bez&#252;glich der klinisch-praktischen Fertigkeiten an. Hierbei zeigte sich eine signifikante, aber geringe Korrelation zwischen der Selbsteinsch&#228;tzung und tats&#228;chlich erzielten Leistung (r&#61;0,26; p&#60;0,001). Im Mittel sch&#228;tzten sich die Studierenden 0,5 Notenstufen besser. 60 Teilnehmer (35,3&#37;) vermochten ihre Leistung richtig einzusch&#228;tzen. 51 Studierende (30,0&#37;) &#252;bersch&#228;tzten ihr Ergebnis um eine Notenstufe, 32 Teilnehmer (18,8&#37;) um zwei oder mehr Notenstufen. Von den 20 Studierenden mit einem Gesamtergebnis unter 60&#37; (&#8222;nicht ausreichend&#8220;) hatten 16 eine Selbsteinsch&#228;tzung vorgenommen. 13 Studierende (81,3&#37;) sch&#228;tzten dabei ihre Leistung zu gut ein. Lediglich 21 Studierende (12,4&#37;) untersch&#228;tzten ihre Leistung um eine Notenstufe; 6 Teilnehmer (3,5&#37;) beurteilten ihre Leistung um mindestens zwei Notenstufen zu schlecht. Die durchschnittliche Selbsteinsch&#228;tzung in Abh&#228;ngigkeit der tats&#228;chlichen Leistung ist in Abbildung 2 <ImgLink imgNo="2" imgType="figure"/> dargestellt.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="4. Discussion">
      <MainHeadline>4. Discussion</MainHeadline><Pgraph>Practical clinical skills such as the physical examination remain an important instrument in the physician&#8217;s armamentarium. Our analysis of a formative, oral-practical examination in undergraduate medical students in their final year showed a lack of these skills despite the advanced course of studies and immanent licensure. Our participants had trouble performing a physical examination as well as basic clinical procedures such as writing and reading an ECG. A comparable analysis in American students during the USMLE Step 2 Clinical Skills Examination yielded similar results <TextLink reference="31"></TextLink>. Recently Schmidmaier et al. used a progress test to show that knowledge of internal medicine continuously increases at the LMU Munich <TextLink reference="24"></TextLink>. However, these results are not generalizable onto practical clinical skills <TextLink reference="32"></TextLink>.</Pgraph><Pgraph>In Germany acquiring new and improving on existing skills during the final year of undergraduate medical studies relies heavily on the supervision and patronage of the ward&#8217;s physicians where students spend their final year. In practice, supervision is lacking and the acquisition and improvement of skills depends largely on chance and the individual commitment of the students <TextLink reference="33"></TextLink>, <TextLink reference="34"></TextLink>, <TextLink reference="35"></TextLink>. A rather new approach is to follow the development of clinical skills with a progress test longitudinally <TextLink reference="36"></TextLink>, <TextLink reference="37"></TextLink>, <TextLink reference="38"></TextLink>; so far, published data are lacking.</Pgraph><Pgraph>Learning practical clinical skills requires complex interventions and a seamless interaction between all parties involved (medical faculty, teaching hospitals, and other hospitals&#47;practices where students complete clinical traineeships). In reality, this is hardly controllable and students develop a large part of their &#8220;clinical practice&#8221; outside class <TextLink reference="39"></TextLink>. Effectively this means that an important part of medical training is beyond the grasp of university structures and therefore escapes institutional quality standards. So far, teaching of practical clinical skills at faculty level focuses on the use of skills labs <TextLink reference="40"></TextLink>, <TextLink reference="41"></TextLink> where peers mostly perform teaching (student tutors). Multiple studies have shown this concept to be effective <TextLink reference="42"></TextLink>, <TextLink reference="43"></TextLink>. Structured formats improve practical clinical skills acquired in the skills lab lastingly <TextLink reference="44"></TextLink>. Another mechanism is to perform intermittent formative examinations and make use of the &#8220;assessment drives learning&#8221; effect <TextLink reference="45"></TextLink>. In respect to the data presented herein, it seems important to perform formative examinations assessing clinical skills as measures of quality assurance during the final year of undergraduate medical education <TextLink reference="46"></TextLink>. Ideally, these examinations should be composed of assessments of diverse skills and compiled from an exhaustive catalogue <TextLink reference="47"></TextLink>. In light of high costs of these examination formats <TextLink reference="48"></TextLink>, <TextLink reference="49"></TextLink>, faculties have to rethink how to find affordable solutions to improve the teaching of clinical skills, such as special tutorship programmes <TextLink reference="50"></TextLink>. Important questions in this context are: Who profits from such formative examinations&#63; How frequent should they be&#63; At what point in time during the course of medical studies should the first examination take place&#63; Is the OSCE the right format for such examinations&#63; There are no answers to these questions derived from generalizable recommendations from the literature. To select specific students (and therefore to favour those) might seem ethically ill advised. However, additional interventions have proven helpful in those students at risk of attrition <TextLink reference="51"></TextLink>, <TextLink reference="52"></TextLink>. From an economical stance, it could be justified to limit additional resources to those students at risk. A possible compromise (albeit increasing administrative overhead) could be to offer a certain minimum of such examinations to all students and to examine students at risk more frequently. How often and from which year of undergraduate education on is unclear as data is scarce <TextLink reference="53"></TextLink>. We think that such examinations should begin early on to prevent giving feedback too late, i.e. when false manoeuvres have already become routine. Alternatives are other formats such as the Mini-CEX and others (CEC, DOPS) that can take place directly at the &#8220;workplace&#8221;. As such, they offer interesting possibilities to assess clinical skills intermittently with comparatively little &#224; priori effort <TextLink reference="54"></TextLink>, <TextLink reference="55"></TextLink>, <TextLink reference="56"></TextLink>. Conversely, more effort is required to instruct and train examiners correctly for these formats.</Pgraph><Pgraph>One third of all students correctly self-assessed their performance. Almost half of our participants over-estimated their performance; nearly one in five to a vast degree. This is more than previously described <TextLink reference="29"></TextLink>, <TextLink reference="57"></TextLink>. The phenomenon is not new and neither limited to medical studies nor students per se <TextLink reference="58"></TextLink>, <TextLink reference="59"></TextLink>. Our students received structured and qualitative feedback after the exanimation. Many students were surprised when they realized how off they were in their self-assessment. Consequences of over-estimation can be serious, in particular when it leads to diagnostic and&#47;or therapeutic errors <TextLink reference="60"></TextLink>, <TextLink reference="61"></TextLink>, <TextLink reference="62"></TextLink>. The ability to correctly self-evaluate is difficult to teach or train. It was postulated that video feedback would be sufficient to improve self-assessment <TextLink reference="63"></TextLink>. A study by Hawkins and colleagues achieved improvement only retrospectively when a video of the students&#8217; performance was juxtaposed a video demonstrating the correct manoeuvres <TextLink reference="64"></TextLink>. It is therefore important to give the students a good idea of their performance through structured feedback, but also to show the correct execution of the skill assessed. Criticism must always be communicated in a meaningful way and it has to be noted that responsiveness to feedback is modulated by expectations and attitudes <TextLink reference="65"></TextLink>.</Pgraph><Pgraph>We presented data from a formative and voluntary examination, for which students had to register actively. This may have biased our results. One would expect eager and especially motivated students to participate in an optional examination leading to false-positive results. In so far we deem our data and the conclusions derived from them to be plausible. Our examination is well accepted and students use it to prepare themselves for the final part of the Licensure Examination, which also takes place as an oral and practical exam. A strength of our data is the size of the study population that allows for reliable statements even when effect size is small.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="4. Diskussion">
      <MainHeadline>4. Diskussion</MainHeadline><Pgraph>Die k&#246;rperliche Untersuchung bleibt ein wichtiges Instrument der &#228;rztlichen T&#228;tigkeit. In unserer Auswertung einer freiwilligen m&#252;ndlich-praktischen Pr&#252;fung im Praktischen Jahr konnten wir zeigen, dass die F&#228;higkeiten zu klinisch-praktischen F&#228;higkeiten wie vor allem der k&#246;rperlichen Untersuchung oder der Kompetenz, Befunde zu bewerten und zu interpretieren, jedoch selbst im fortgeschrittenen Ausbildungs-Szenario des Praktischen Jahres nur m&#228;&#223;ig gut beherrscht wird. &#196;hnliche Ergebnisse konnten bei amerikanischen Medizinstudierenden gezeigt werden <TextLink reference="31"></TextLink>. Mit Hilfe des Progress Tests Medizin (PTM) konnte an der LMU M&#252;nchen gezeigt werden, dass das Wissen in Innerer Medizin w&#228;hrend des Studiums kontinuierlich w&#228;chst <TextLink reference="24"></TextLink>. Allerdings sind diese Ergebnisse nicht ohne weiteres auf die praktischen F&#228;higkeiten und andere &#228;rztliche Kompetenzen &#252;bertragbar <TextLink reference="32"></TextLink>. Obwohl eine Supervision von Studierenden im Praktischen Jahr notwendige Voraussetzung zur Kontrolle und Optimierung der vorhandenen praktischen Fertigkeiten ist und dar&#252;ber hinaus dem Erlernen neuer F&#228;higkeiten dient, sieht die Realit&#228;t doch oft anders aus und der Kompetenzerwerb bleibt dem Zufall und im wesentlichen dem individuellen Engagement der Studierenden &#252;berlassen <TextLink reference="33"></TextLink>, <TextLink reference="34"></TextLink>, <TextLink reference="35"></TextLink>. Neue Ans&#228;tze verfolgen daher das Ziel, klinische Fertigkeiten und Kompetenzen im Rahmen eines Progress-Tests longitudinal zu beobachten <TextLink reference="36"></TextLink>, <TextLink reference="37"></TextLink>, <TextLink reference="38"></TextLink>; bislang fehlen hierzu jedoch publizierte Daten.</Pgraph><Pgraph>Das Lernen von praktischen F&#228;higkeiten ist ohne aufw&#228;ndige Interventionen und einem reibungslosen Zusammenspiel aller an der praktischen Ausbildung beteiligten Parteien (medizinische Fakult&#228;t, Lehrkrankenh&#228;user im akademischen Umfeld, aber auch die an der Famulantenausbildung beteiligten Krankenh&#228;user und Praxen) und somit in realiter nur bedingt steuerbar; ein Gro&#223;teil der &#8222;&#220;bung&#8220;, mit der Studierende ihre klinisch-praktischen Fertigkeiten entwickeln, erfolgt au&#223;erhalb des Unterrichts <TextLink reference="39"></TextLink>. Damit entzieht sich dieser wichtige Teil der Ausbildung aus der strukturierten Vermittlung an den Universit&#228;ten. Bisherige Methoden, die Vermittlung praktischer Fertigkeiten zu institutionalisieren, fokussieren auf den Einsatz von sogenannten Skills-Labs <TextLink reference="40"></TextLink>, <TextLink reference="41"></TextLink>. In der Mehrheit der F&#228;lle handelt es sich hierbei um studentische Tutoren, die im Sinne von &#8222;peer teaching&#8220; j&#252;ngere Kommilitonen die entsprechenden Fertigkeiten lehren. Vorbehalte &#252;ber etwaige Defizite dieses Konzepts wurden in zahlreichen Untersuchungen widerlegt <TextLink reference="42"></TextLink>, <TextLink reference="43"></TextLink>. Durch entsprechend strukturierte Angebote l&#228;sst sich die Vermittlung von praktischen Fertigkeiten im Skills Lab nachhaltig verbessern <TextLink reference="44"></TextLink>.Ein weiterer Mechanismus zur Begleitung der Entwicklung der individuellen F&#228;higkeiten kann sein, intermittierende formative Pr&#252;fungen anzubieten und dabei den Effekt zu nutzen, dass Pr&#252;fungen das Lernen f&#246;rdern <TextLink reference="45"></TextLink>. Hierbei sollten auch als Ma&#223;nahmen zum Qualit&#228;tsmanagement der klinisch-praktischen Ausbildung im Praktischen Jahr des Medizinstudiums formative Pr&#252;fungen stattfinden, die klinische Fertigkeiten und &#228;rztliche Kompetenzen pr&#252;fen <TextLink reference="46"></TextLink>. Idealerweise werden dabei auch &#8211; wie in der vorliegenden Studie &#8211; unterschiedliche Fertigkeiten gepr&#252;ft und die einzelnen Pr&#252;fungen aus einem Katalog unterschiedlicher Komponenten zusammengestellt <TextLink reference="47"></TextLink>. Angesichts der hohen Kosten, die mit diesen Pr&#252;fungsformaten verbunden sind <TextLink reference="48"></TextLink>, <TextLink reference="49"></TextLink>, ist von den Fakult&#228;ten ein entsprechendes Umdenken notwendig, um &#252;bergreifende, fachlich losgel&#246;ste Ma&#223;nahmen zur Verbesserung der klinisch-praktischen F&#228;higkeiten zu finanzieren, etwa in Form spezieller Schulungsprogramme <TextLink reference="50"></TextLink>. Dabei stellen schon einige konzeptionelle Fragen erste H&#252;rden auf: Welche Studierenden profitieren von solchen Pr&#252;fungen&#63; Wie oft m&#252;ssen diese Pr&#252;fungen wiederholt werden&#63; Wann sollte im Studienverlauf damit begonnen werden&#63; Ist OSCE das richtige Pr&#252;fungsformat&#63; Die Fragen lassen sich nicht pauschal durch allgemein ableitbare Empfehlungen aus dem umfangreichen Literatur-Fundus zu den Themen formativer und klinisch-praktischer Pr&#252;fungen beantworten. Eine Selektion von Studierenden, die ein solches Angebot erhalten, ist ethisch bedenklich. Allerdings profitieren diejenigen, die schlechtere Leistungen zeigen, mehr von zus&#228;tzlichen Interventionen <TextLink reference="51"></TextLink>, <TextLink reference="52"></TextLink>, so dass aus &#246;konomischen Erw&#228;gungen heraus eine Beschr&#228;nkung auf ebensolche Studierende zu rechtfertigen w&#228;re. Ein denkbarer und reizvoller Mittelweg, der jedoch den administrativen Aufwand wiederum erh&#246;ht, k&#246;nnte es sein, allen Studierenden eine Mindestzahl dieser Pr&#252;fungen anzubieten und &#8222;gef&#228;hrdete Teilnehmer&#8220;, deren Leistungen nicht einem definierten Mindestma&#223; entsprechen, &#246;fter zu pr&#252;fen. Wie h&#228;ufig es jedoch solcher Pr&#252;fungen bedarf und ab welchem Semester damit sinnvollerweise begonnen werden sollte, bleibt vollkommen offen, da hierzu wenig Daten vorliegen <TextLink reference="53"></TextLink>. Um ein zu sp&#228;tes Feedback, wenn falsche Techniken bereits Routine geworden sind, zu vermeiden, halten wir jedoch einen fr&#252;hen Beginn formativer, praktischer Pr&#252;fungen f&#252;r sinnvoll. Alternative Pr&#252;fungsformate wie Mini-CEX und andere (etwa CEC und DOPS), die direkt am &#8222;Arbeitsplatz&#8220; durchgef&#252;hrt werden, bieten interessante M&#246;glichkeiten, intermittierende Pr&#252;fungen mit vergleichsweise geringem unmittelbarem &#224;-priori-Aufwand direkt am Patienten auf Station durchzuf&#252;hren <TextLink reference="54"></TextLink>, <TextLink reference="55"></TextLink>, <TextLink reference="56"></TextLink>. Hierbei ist jedoch zu beachten, dass umso mehr Aufwand in der Schulung der Pr&#252;fer aufzubringen ist.</Pgraph><Pgraph>Die Selbsteinsch&#228;tzung war bei einem Drittel der Studierenden zutreffend. Nahezu die H&#228;lfte der Teilnehmer &#252;bersch&#228;tzte jedoch die eigene Leistung im Vergleich zur tats&#228;chlichen Leistung; nahezu jeder f&#252;nfte Teilnehmer &#252;bersch&#228;tzte die Leistung dabei deutlich. Dies ist deutlich mehr als bislang beschrieben <TextLink reference="29"></TextLink>, <TextLink reference="57"></TextLink>. Das Ph&#228;nomen ist jedoch nicht neu und weder auf Humanmedizin noch studentische Selbsteinsch&#228;tzung beschr&#228;nkt <TextLink reference="58"></TextLink>, <TextLink reference="59"></TextLink>. Im Anschluss an die Pr&#252;fung erhielten unsere Teilnehmer eine Mitteilung &#252;ber die erreichte Leistung. Im Rahmen dieser Mitteilung erfolgte auch ein nicht strukturiertes, qualitatives Feedback durch die Studierenden selbst. Hierbei lie&#223; sich eine deutliche Verbl&#252;ffung &#252;ber die Diskrepanz von Selbsteinsch&#228;tzung und tats&#228;chlicher Leistung erkennen. Die Konsequenzen der Selbst&#252;bersch&#228;tzung k&#246;nnen gravierend sein, insbesondere wenn sie zu diagnostischen Fehlern und damit auch Therapiefehlern f&#252;hrt <TextLink reference="60"></TextLink>, <TextLink reference="61"></TextLink>, <TextLink reference="62"></TextLink>. Die F&#228;higkeit zur Selbsteinsch&#228;tzung ist schwer zu trainieren. Lange wurde propagiert, dass Video-Feedback der eigenen Leistung ausreichen w&#252;rde, um die studentische Selbsteinsch&#228;tzung zu verbessern <TextLink reference="63"></TextLink>. In einer Studie von Hawkins und Kollegen konnte eine Verbesserung der Selbsteinsch&#228;tzung lediglich retrospektiv erreicht werden, indem zus&#228;tzlich zum Vorspielen einer Videoaufzeichnung der eigenen Leistung auch eine Aufzeichnung einer korrekten Durchf&#252;hrung als Vergleichspunkt pr&#228;sentiert wurde <TextLink reference="64"></TextLink>. Es ist daher ebenfalls wichtig durch gut konstruiertes Feedback den Studierenden ein ad&#228;quates Bild ihrer Leistungen und ihrer Leistungsf&#228;higkeit zu vermitteln und die korrekte Durchf&#252;hrung zu demonstrieren. Dabei muss allerdings bedacht werden, dass die Erwartungen und Einstellungen zur selektiven Wahrnehmung von Kritik f&#252;hren kann <TextLink reference="65"></TextLink>.</Pgraph><Pgraph>Bei der vorliegenden Studie handelt es sich um eine freiwillige Pr&#252;fung, zu der sich die Teilnehmer anmelden mussten. Hierdurch besteht ein Bias, der zu einer Verzerrung der Ergebnisse gef&#252;hrt haben k&#246;nnte. Man w&#252;rde jedoch bei einer freiwilligen Pr&#252;fung erwarten, dass sich besonders engagierte und motivierte Studierende melden und so eher ein Bias hin zu falsch-hohen Ergebnissen vorliegt. Insofern erachten wir unsere Daten und die daraus gewonnen Schl&#252;sse f&#252;r plausibel. Allerdings wird das Angebot von den Studierenden als gute M&#246;glichkeit eingesch&#228;tzt, sich auf die m&#252;ndlich-praktische Abschlusspr&#252;fung des Studiums vorzubereiten und erscheint entsprechend attraktiv (&#8222;Es war sehr hilfreich nochmal selbstkritisch k&#246;rperliche Untersuchung pr&#252;fungskonform einzu&#252;ben. Danke f&#252;r die M&#252;hen der Organisatoren und Zeit der Pr&#252;fer.&#8220;, &#8222;Ich bin auf Empfehlung einer Kommilitonin gekommen.&#8220;). Eine St&#228;rke unserer Untersuchung ist die Gr&#246;&#223;e der Studienpopulation, die verl&#228;ssliche Aussagen &#252;ber auch kleinere Effekte zul&#228;sst.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="5. Conclusions">
      <MainHeadline>5. Conclusions</MainHeadline><Pgraph>The performance of undergraduate medical students in their final year during a formative oral and practical clinical examination leaves ample room for improvement. Almost two thirds of our participants scored &#8220;fairly&#8221; or &#8220;poorly&#8221;; one in ten students fails. Practically half of our students over-estimated their own performance. An established, standardized, formative examination during the final year of undergraduate studies seems vital.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="5. Schlussfolgerungen">
      <MainHeadline>5. Schlussfolgerungen</MainHeadline><Pgraph>Die Leistungen von Studierenden im Praktischen Jahr bei der Durchf&#252;hrung klinisch-praktischer Kompetenzen im Rahmen einer m&#252;ndlich-praktischen Pr&#252;fung bieten Raum f&#252;r Verbesserung. Nahezu zwei Drittel der Studierenden zeigen lediglich eine befriedigende oder ausreichende Leistung; jeder zehnte Teilnehmer versagt in der Pr&#252;fung. Dabei &#252;bersch&#228;tzt knapp die H&#228;lfte der Studierenden die eigene Leistung. Eine fest etablierte standardisierte, formative Pr&#252;fung im Praktischen Jahr erscheint daher notwendig.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Acknowledgements">
      <MainHeadline>Acknowledgements</MainHeadline><Pgraph>We thank our examiners and colleagues for their support and all the efforts put into implementing the mP3 examination: Prof. Dr. Ralf Schmidmaier, PD Dr. Peter Reilich, PD Dr. Stefan Grote, PD Dr. Peter Thaller, PD Dr. Philipp Baumann, Dr. Kathrin Schr&#246;dl, Dr. Philip von der Borch, Dr. Bert Urban, Dr. Michael Maier, Dr. Mark op den Winkel, Dr. Costanza Chiapponi, Anja Fischer, Caroline Strenkert, Andreas Sturm, and Christina Berr.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Danksagung">
      <MainHeadline>Danksagung</MainHeadline><Pgraph>Wir danken unseren Pr&#252;fern und Kollegen f&#252;r die tatkr&#228;ftige Unterst&#252;tzung bei der Umsetzung der m&#252;ndlich-praktischen Pr&#252;fung im PJ (mP3): Prof. Dr. Ralf Schmidmaier, PD Dr. Peter Reilich, PD Dr. Stefan Grote, PD Dr. Peter Thaller, PD Dr. Philipp Baumann, Dr. Kathrin Schr&#246;dl, Dr. Philip von der Borch, Dr. Bert Urban, Dr. Michael Maier, Dr. Mark op den Winkel, Dr. Costanza Chiapponi, Anja Fischer, Caroline Strenkert, Andreas Sturm und Christina Berr.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>The authors declare that they have no competing interests.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>Die Autoren erkl&#228;ren, dass sie keinen Interessenkonflikt im Zusammenhang mit diesem Artikel haben. </Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Kirch W</RefAuthor>
        <RefAuthor>Schafii C</RefAuthor>
        <RefTitle>Misdiagnosis at a university hospital in 4 medical eras</RefTitle>
        <RefYear>1996</RefYear>
        <RefJournal>Medicine (Baltimore)</RefJournal>
        <RefPage>29&#8211;40</RefPage>
        <RefTotal>Kirch W, Schafii C. Misdiagnosis at a university hospital in 4 medical eras. Medicine (Baltimore). 1996;75(1):29&#8211;40. DOI: 10.1097&#47;00005792-199601000-00004</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1097&#47;00005792-199601000-00004</RefLink>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Reilly BM</RefAuthor>
        <RefTitle>Physical examination in the care of medical inpatients: an observational study</RefTitle>
        <RefYear>2003</RefYear>
        <RefJournal>Lancet</RefJournal>
        <RefPage>1100&#8211;1105</RefPage>
        <RefTotal>Reilly BM. Physical examination in the care of medical inpatients: an observational study. Lancet. 2003;362(9390):1100&#8211;1105. DOI: 10.1016&#47;S0140-6736(03)14464-9</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1016&#47;S0140-6736(03)14464-9</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Kugler J</RefAuthor>
        <RefAuthor>Verghese A</RefAuthor>
        <RefTitle>The physical exam and other forms of fiction</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>J Gen Intern Med</RefJournal>
        <RefPage>756&#8211;757</RefPage>
        <RefTotal>Kugler J, Verghese A. The physical exam and other forms of fiction. J Gen Intern Med. 2010;25(8):756&#8211;757. DOI: 10.1007&#47;s11606-010-1400-3</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1007&#47;s11606-010-1400-3</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>Feddock CA</RefAuthor>
        <RefTitle>The lost art of clinical skills</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>Am J Med</RefJournal>
        <RefPage>374&#8211;378</RefPage>
        <RefTotal>Feddock CA. The lost art of clinical skills. Am J Med. 2007;120(4):374&#8211;378. DOI: 10.1016&#47;j.amjmed.2007.01.023</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1016&#47;j.amjmed.2007.01.023</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Cook C</RefAuthor>
        <RefTitle>The lost art of the clinical examination: an overemphasis on clinical special tests</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>J Man Manip Ther</RefJournal>
        <RefPage>3&#8211;4</RefPage>
        <RefTotal>Cook C. The lost art of the clinical examination: an overemphasis on clinical special tests. J Man Manip Ther. 2010;18(1):3&#8211;4. DOI: 10.1179&#47;106698110X12595770849362</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1179&#47;106698110X12595770849362</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>Wilkerson L</RefAuthor>
        <RefAuthor>Lee M</RefAuthor>
        <RefTitle>Assessing physical examination skills of senior medical students: knowing how versus knowing when</RefTitle>
        <RefYear>2003</RefYear>
        <RefJournal>Acad Med</RefJournal>
        <RefPage>S30&#8211;S32</RefPage>
        <RefTotal>Wilkerson L, Lee M. Assessing physical examination skills of senior medical students: knowing how versus knowing when. Acad Med. 2003;78(10 Suppl):S30&#8211;S32.</RefTotal>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Ramani S</RefAuthor>
        <RefAuthor>Ring BN</RefAuthor>
        <RefAuthor>Lowe R</RefAuthor>
        <RefAuthor>Hunter D</RefAuthor>
        <RefTitle>A pilot study assessing knowledge of clinical signs and physical examination skills in incoming medicine residents</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>J Grad Med Educ</RefJournal>
        <RefPage>232&#8211;235</RefPage>
        <RefTotal>Ramani S, Ring BN, Lowe R, Hunter D. A pilot study assessing knowledge of clinical signs and physical examination skills in incoming medicine residents. J Grad Med Educ. 2010;2(2):232&#8211;235. DOI: 10.4300&#47;JGME-D-09-00107.1</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.4300&#47;JGME-D-09-00107.1</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Bundesministerium f&#252;r Gesundheit</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2002</RefYear>
        <RefBookTitle>Approbationsordnung f&#252;r &#196;rzte</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Bundesministerium f&#252;r Gesundheit. Approbationsordnung f&#252;r &#196;rzte. Berlin: Bundesministerium f&#252;r Gesundheit; 2002.</RefTotal>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>Eitel F</RefAuthor>
        <RefTitle>Die neue Approbationsordnung verlangt tief greifende &#196;nderungen in der Lehrorganisation</RefTitle>
        <RefYear>2002</RefYear>
        <RefJournal>Gesundheitswesen (Suppl Med Ausbild)</RefJournal>
        <RefPage>1-2</RefPage>
        <RefTotal>Eitel F. Die neue Approbationsordnung verlangt tief greifende &#196;nderungen in der Lehrorganisation. Gesundheitswesen (Suppl Med Ausbild). 2002;19(Suppl1):1&#8211;2. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;gesellschaft-medizinische-ausbildung.org&#47;files&#47;ZMA-Archiv&#47;2002&#47;1&#47;Eitel&#95;F-ae.pdf</RefTotal>
        <RefLink>https:&#47;&#47;gesellschaft-medizinische-ausbildung.org&#47;files&#47;ZMA-Archiv&#47;2002&#47;1&#47;Eitel&#95;F-ae.pdf</RefLink>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Steiner T</RefAuthor>
        <RefAuthor>Schmidt J</RefAuthor>
        <RefAuthor>Bardenheuer H</RefAuthor>
        <RefAuthor>Kirschfink M</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefAuthor>Schneider G</RefAuthor>
        <RefAuthor>Seller H</RefAuthor>
        <RefAuthor>Sonntag HG</RefAuthor>
        <RefAuthor>f&#252;r die HEICUMED Planungsgruppe</RefAuthor>
        <RefTitle>HEICUMED&#63;: Heidelberger Curriculum Medicinale - Ein modularer Reformstudiengang zur Umsetzung der neuen Approbationsordnung</RefTitle>
        <RefYear>2003</RefYear>
        <RefJournal>Gesundheitswesen (Suppl Med Ausbild)</RefJournal>
        <RefPage>87-91</RefPage>
        <RefTotal>Steiner T, Schmidt J, Bardenheuer H, Kirschfink M, Kadmon M, Schneider G, Seller H, Sonntag HG, f&#252;r die HEICUMED Planungsgruppe. HEICUMED&#63;: Heidelberger Curriculum Medicinale - Ein modularer Reformstudiengang zur Umsetzung der neuen Approbationsordnung. Gesundheitswesen (Suppl Med Ausbild). 2003;20(Suppl2):87&#8211;91. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;gesellschaft-medizinische-ausbildung.org&#47;files&#47;ZMA-Archiv&#47;2003&#47;2&#47;Steiner&#95;T,&#95;J&#37;C3&#37;BCnger&#95;J,&#95;Schmidt&#95;J,&#95;Bardenheuer&#95;H,&#95;Kirschfink&#95;M,&#95;Kadmon&#95;M,&#95;Schneider&#95;G,&#95;Seller&#95;H,&#95;Sonntag&#95;HG.pdf</RefTotal>
        <RefLink>https:&#47;&#47;gesellschaft-medizinische-ausbildung.org&#47;files&#47;ZMA-Archiv&#47;2003&#47;2&#47;Steiner&#95;T,&#95;J&#37;C3&#37;BCnger&#95;J,&#95;Schmidt&#95;J,&#95;Bardenheuer&#95;H,&#95;Kirschfink&#95;M,&#95;Kadmon&#95;M,&#95;Schneider&#95;G,&#95;Seller&#95;H,&#95;Sonntag&#95;HG.pdf</RefLink>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Schulze J</RefAuthor>
        <RefAuthor>Drolshagen S</RefAuthor>
        <RefAuthor>N&#252;rnberger F</RefAuthor>
        <RefAuthor>Ochsendorf F</RefAuthor>
        <RefTitle>Gestaltung des klinischen Studiums nach den Vorgaben der neuen &#196;rztlichen Approbationsordnung &#8211; Struktur und Organisation</RefTitle>
        <RefYear>2003</RefYear>
        <RefJournal>Gesundheitswesen (Suppl Med Ausbild)</RefJournal>
        <RefPage>68-77</RefPage>
        <RefTotal>Schulze J, Drolshagen S, N&#252;rnberger F, Ochsendorf F. Gestaltung des klinischen Studiums nach den Vorgaben der neuen &#196;rztlichen Approbationsordnung &#8211; Struktur und Organisation. Gesundheitswesen (Suppl Med Ausbild). 2003;20(Suppl2):68&#8211;77. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;gesellschaft-medizinische-ausbildung.org&#47;files&#47;ZMA-Archiv&#47;2003&#47;2&#47;Schulze&#95;J,&#95;Drolshagen&#95;S,&#95;N&#37;C3&#37;BCrnberger&#95;F,&#95;Ochsendorf&#95;F.pdf</RefTotal>
        <RefLink>https:&#47;&#47;gesellschaft-medizinische-ausbildung.org&#47;files&#47;ZMA-Archiv&#47;2003&#47;2&#47;Schulze&#95;J,&#95;Drolshagen&#95;S,&#95;N&#37;C3&#37;BCrnberger&#95;F,&#95;Ochsendorf&#95;F.pdf</RefLink>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>van den Bussche H</RefAuthor>
        <RefTitle>Lehren und Lernen am UKE - Die Umsetzung der Approbationsordnung f&#252;r &#196;rzte in Hamburg</RefTitle>
        <RefYear>2004</RefYear>
        <RefJournal>Z Allgemeinmed</RefJournal>
        <RefPage>431&#8211;437</RefPage>
        <RefTotal>van den Bussche H. Lehren und Lernen am UKE - Die Umsetzung der Approbationsordnung f&#252;r &#196;rzte in Hamburg. Z Allgemeinmed. 2004;80:431&#8211;437. DOI: 10.1055&#47;s-2004-820414</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1055&#47;s-2004-820414</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Huwendiek S</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Kirschfink M</RefAuthor>
        <RefAuthor>Bosse HM</RefAuthor>
        <RefAuthor>Resch F</RefAuthor>
        <RefAuthor>Duelli R</RefAuthor>
        <RefAuthor>Bardenhauer HJ</RefAuthor>
        <RefAuthor>Sonntag HG</RefAuthor>
        <RefAuthor>Steiner T</RefAuthor>
        <RefTitle>Umsetzung der deutschen Approbationsordnung 2002 im modularen Reformstudiengang Heidel- berger Curriculum Medicinale (HeiCuMed)</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>ZfHE</RefJournal>
        <RefPage>17-27</RefPage>
        <RefTotal>Huwendiek S, Kadmon M, J&#252;nger J, Kirschfink M, Bosse HM, Resch F, Duelli R, Bardenhauer HJ, Sonntag HG, Steiner T. Umsetzung der deutschen Approbationsordnung 2002 im modularen Reformstudiengang Heidel- berger Curriculum Medicinale (HeiCuMed). ZfHE. 2008;3(3):17&#8211;27. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.zfhe.at&#47;index.php&#47;zfhe&#47;article&#47;view&#47;70&#47;75</RefTotal>
        <RefLink>http:&#47;&#47;www.zfhe.at&#47;index.php&#47;zfhe&#47;article&#47;view&#47;70&#47;75</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Zeuner S</RefAuthor>
        <RefAuthor>Henke T</RefAuthor>
        <RefAuthor>Achilles E</RefAuthor>
        <RefAuthor>Kampmeyer D</RefAuthor>
        <RefAuthor>Schwanitz P</RefAuthor>
        <RefTitle>36 Different Ways To Study Medicine</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc20</RefPage>
        <RefTotal>Zeuner S, Henke T, Achilles E, Kampmeyer D, Schwanitz P. 36 Different Ways To Study Medicine. GMS Z Med Ausbild. 2010;27(2):Doc20. DOI: 10.3205&#47;zma000657</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000657</RefLink>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>Haage H</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2003</RefYear>
        <RefBookTitle>Das neue Medizinstudium</RefBookTitle>
        <RefPage>320</RefPage>
        <RefTotal>Haage H. Das neue Medizinstudium. Aachen: Shaker Verlag; 2003. S.320.</RefTotal>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>Fischer T</RefAuthor>
        <RefAuthor>Simmenroth-Nayda A</RefAuthor>
        <RefAuthor>Herrmann-Lingen C</RefAuthor>
        <RefAuthor>Wetzel D</RefAuthor>
        <RefAuthor>Chenot JF</RefAuthor>
        <RefAuthor>Kleiber C</RefAuthor>
        <RefAuthor>Staats H</RefAuthor>
        <RefAuthor>Kochen MM</RefAuthor>
        <RefTitle>Medizinische Basisf&#228;higkeiten &#8211; ein Unterrichtskonzept im Rahmen der neuen Approbationsordnung</RefTitle>
        <RefYear>2003</RefYear>
        <RefJournal>Z All Med</RefJournal>
        <RefPage>432-436</RefPage>
        <RefTotal>Fischer T, Simmenroth-Nayda A, Herrmann-Lingen C, Wetzel D, Chenot JF, Kleiber C, Staats H, Kochen MM. Medizinische Basisf&#228;higkeiten &#8211; ein Unterrichtskonzept im Rahmen der neuen Approbationsordnung. Z All Med. 2003;79:432&#8211;436. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;www.online-zfa.de&#47;media&#47;archive&#47;2003&#47;09&#47;10.1055-s-2003-43063.pdf</RefTotal>
        <RefLink>https:&#47;&#47;www.online-zfa.de&#47;media&#47;archive&#47;2003&#47;09&#47;10.1055-s-2003-43063.pdf</RefLink>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>&#214;chsner W</RefAuthor>
        <RefAuthor>Forster J</RefAuthor>
        <RefTitle>Approbierte &#196;rzte - kompetente &#196;rzte&#63; Die neue Approbationsordnung f&#252;r &#196;rzte als Grundlage f&#252;r kompetenzbasierte Curricula</RefTitle>
        <RefYear>2005</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc04</RefPage>
        <RefTotal>&#214;chsner W, Forster J. Approbierte &#196;rzte - kompetente &#196;rzte&#63; Die neue Approbationsordnung f&#252;r &#196;rzte als Grundlage f&#252;r kompetenzbasierte Curricula. GMS Z Med Ausbild. 2005;22(1):Doc04. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2005-22&#47;zma000004.shtml</RefTotal>
        <RefLink>http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2005-22&#47;zma000004.shtml</RefLink>
      </Reference>
      <Reference refNo="18">
        <RefAuthor>Kulike K</RefAuthor>
        <RefAuthor>Hilgers J</RefAuthor>
        <RefAuthor>St&#246;rmann S</RefAuthor>
        <RefAuthor>Hornung T</RefAuthor>
        <RefAuthor>Dudziak J</RefAuthor>
        <RefAuthor>Weinmann P</RefAuthor>
        <RefAuthor></RefAuthor>
        <RefTitle>Kerncurriculum f&#252;r die Medizinische Ausbildung in Deutschland: Ein Vorschlag der Medizinstudierenden Deutschlands</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc58</RefPage>
        <RefTotal>Kulike K, Hilgers J, St&#246;rmann S, Hornung T, Dudziak J, Weinmann P, et al. Kerncurriculum f&#252;r die Medizinische Ausbildung in Deutschland: Ein Vorschlag der Medizinstudierenden Deutschlands. GMS Z Med Ausbild. 2006;23(4):Doc58. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2006-23&#47;zma000277.shtml</RefTotal>
        <RefLink>http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2006-23&#47;zma000277.shtml</RefLink>
      </Reference>
      <Reference refNo="19">
        <RefAuthor>Schnabel KP</RefAuthor>
        <RefAuthor>Boldt PD</RefAuthor>
        <RefAuthor>Breuer G</RefAuthor>
        <RefAuthor>Fichtner A</RefAuthor>
        <RefAuthor>Karsten G</RefAuthor>
        <RefAuthor>Kujumdshiev S</RefAuthor>
        <RefAuthor>Schmidts M</RefAuthor>
        <RefAuthor>Stosch C</RefAuthor>
        <RefTitle>Konsensusstatement &#34;Praktische Fertigkeiten im Medizinstudium&#34; &#8211; ein Positionspapier des GMA-Ausschusses f&#252;r praktische Fertigkeiten</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc58</RefPage>
        <RefTotal>Schnabel KP, Boldt PD, Breuer G, Fichtner A, Karsten G, Kujumdshiev S, Schmidts M, Stosch C. Konsensusstatement &#34;Praktische Fertigkeiten im Medizinstudium&#34; &#8211; ein Positionspapier des GMA-Ausschusses f&#252;r praktische Fertigkeiten. GMS Z Med Ausbild. 2011;28(4):Doc58. DOI: 10.3205&#47;zma000770</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000770</RefLink>
      </Reference>
      <Reference refNo="20">
        <RefAuthor>Fischer MR</RefAuthor>
        <RefAuthor>Bauer D</RefAuthor>
        <RefAuthor>Mohn K</RefAuthor>
        <RefTitle>Endlich fertig&#33; Nationale Kompetenzbasierte Lernzielkataloge Medizin (NKLM) und Zahnmedizin (NKLZ) gehen in die Erprobung</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc35</RefPage>
        <RefTotal>Fischer MR, Bauer D, Mohn K. Endlich fertig&#33; Nationale Kompetenzbasierte Lernzielkataloge Medizin (NKLM) und Zahnmedizin (NKLZ) gehen in die Erprobung. GMS Z Med Ausbild. 2015;32(3):Doc35. DOI: 10.3205&#47;zma000977</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000977</RefLink>
      </Reference>
      <Reference refNo="21">
        <RefAuthor>Jilg S</RefAuthor>
        <RefAuthor>M&#246;ltner A</RefAuthor>
        <RefAuthor>Berberat P</RefAuthor>
        <RefAuthor>Fischer MR</RefAuthor>
        <RefAuthor>Breckwoldt J</RefAuthor>
        <RefTitle>How do Supervising Clinicians of a University Hospital and Associated Teaching Hospitals Rate the Relevance of the Key Competencies within the CanMEDS Roles Framework in Respect to Teaching in Clinical Clerkships&#63;&#63;</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc33</RefPage>
        <RefTotal>Jilg S, M&#246;ltner A, Berberat P, Fischer MR, Breckwoldt J. How do Supervising Clinicians of a University Hospital and Associated Teaching Hospitals Rate the Relevance of the Key Competencies within the CanMEDS Roles Framework in Respect to Teaching in Clinical Clerkships&#63;&#63; GMS Z Med Ausbild. 2015;32(3):Doc33. DOI: 10.3205&#47;zma000975</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000975</RefLink>
      </Reference>
      <Reference refNo="22">
        <RefAuthor>Seyfarth M</RefAuthor>
        <RefAuthor>Reincke M</RefAuthor>
        <RefAuthor>Seyfarth J</RefAuthor>
        <RefAuthor>Ring J</RefAuthor>
        <RefAuthor>Fischer MR</RefAuthor>
        <RefTitle>Neue &#228;rztliche Approbationsordnung und Notengebung beim Zweiten Staatsexamen</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>Dtsch Arztebl Int</RefJournal>
        <RefPage>500&#8211;504</RefPage>
        <RefTotal>Seyfarth M, Reincke M, Seyfarth J, Ring J, Fischer MR. Neue &#228;rztliche Approbationsordnung und Notengebung beim Zweiten Staatsexamen. Dtsch Arztebl Int. 2010;107(28-29):500&#8211;504.</RefTotal>
      </Reference>
      <Reference refNo="23">
        <RefAuthor>Raupach T</RefAuthor>
        <RefAuthor>Vogel D</RefAuthor>
        <RefAuthor>Schiekirka S</RefAuthor>
        <RefAuthor>Keijsers C</RefAuthor>
        <RefAuthor>Cate O Ten</RefAuthor>
        <RefAuthor>Harendza S</RefAuthor>
        <RefTitle>WissenszuwachsimPraktischen Jahr des Medizinstudiums in Deutschland</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc33</RefPage>
        <RefTotal>Raupach T, Vogel D, Schiekirka S, Keijsers C, Cate O Ten, Harendza S. WissenszuwachsimPraktischen Jahr des Medizinstudiums in Deutschland. GMS Z Med Ausbild. 2013;30(3):Doc33. DOI: 10.3205&#47;zma000876</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000876</RefLink>
      </Reference>
      <Reference refNo="24">
        <RefAuthor>Schmidmaier R</RefAuthor>
        <RefAuthor>Holzer M</RefAuthor>
        <RefAuthor>Angstwurm M</RefAuthor>
        <RefAuthor>Nouns Z</RefAuthor>
        <RefAuthor>Reincke M</RefAuthor>
        <RefAuthor>Fischer MR</RefAuthor>
        <RefTitle>Querschnittevaluation des Medizinischen Curriculums M&#252;nchen (MeCuM) mit Hilfe des Progress Tests Medizin (PTM)</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc70</RefPage>
        <RefTotal>Schmidmaier R, Holzer M, Angstwurm M, Nouns Z, Reincke M, Fischer MR. Querschnittevaluation des Medizinischen Curriculums M&#252;nchen (MeCuM) mit Hilfe des Progress Tests Medizin (PTM). GMS Z Med Ausbild. 2010;27(5):Doc70. DOI: 10.3205&#47;zma000707</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000707</RefLink>
      </Reference>
      <Reference refNo="25">
        <RefAuthor>Happel O</RefAuthor>
        <RefAuthor>Papenfu&#223; T</RefAuthor>
        <RefAuthor>Kranke P</RefAuthor>
        <RefTitle>Schockraummanagement &#8211; Simulation, Teamtraining und Kommunikation f&#252;r eine bessere Traumaversorgung TT - Training for real: simulation, team-training and communication to improve trauma management</RefTitle>
        <RefYear>2010</RefYear>
        <RefJournal>An&#228;sthesiol Intensivmed Notfallmed Schmerzther</RefJournal>
        <RefPage>408&#8211;415</RefPage>
        <RefTotal>Happel O, Papenfu&#223; T, Kranke P. Schockraummanagement &#8211; Simulation, Teamtraining und Kommunikation f&#252;r eine bessere Traumaversorgung TT - Training for real: simulation, team-training and communication to improve trauma management. An&#228;sthesiol Intensivmed Notfallmed Schmerzther. 2010;45(06):408&#8211;415. DOI: 10.1055&#47;s-0030-1255348</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1055&#47;s-0030-1255348</RefLink>
      </Reference>
      <Reference refNo="26">
        <RefAuthor>Ingham H</RefAuthor>
        <RefAuthor>Luft J</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>1955</RefYear>
        <RefBookTitle>The Johari Window: a graphic model for interpersonal relations</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Ingham H, Luft J. The Johari Window: a graphic model for interpersonal relations. Los Angeles: Proceedings of the western training laboratory in group development; 1955.</RefTotal>
      </Reference>
      <Reference refNo="27">
        <RefAuthor>Barnsley L</RefAuthor>
        <RefAuthor>Lyon PM</RefAuthor>
        <RefAuthor>Ralston SJ</RefAuthor>
        <RefAuthor>Hibbert EJ</RefAuthor>
        <RefAuthor>Cunningham I</RefAuthor>
        <RefAuthor>Gordon FC</RefAuthor>
        <RefAuthor></RefAuthor>
        <RefTitle>Clinical skills in junior medical officers: A comparison of self-reported confidence and observed competence</RefTitle>
        <RefYear>2004</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>358&#8211;367</RefPage>
        <RefTotal>Barnsley L, Lyon PM, Ralston SJ, Hibbert EJ, Cunningham I, Gordon FC, et al. Clinical skills in junior medical officers: A comparison of self-reported confidence and observed competence. Med Educ. 2004;38(4):358&#8211;367. DOI: 10.1046&#47;j.1365-2923.2004.01773.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1046&#47;j.1365-2923.2004.01773.x</RefLink>
      </Reference>
      <Reference refNo="28">
        <RefAuthor>Mavis B</RefAuthor>
        <RefTitle>Self-efficacy and OSCE performance among second year medical students.</RefTitle>
        <RefYear>2001</RefYear>
        <RefJournal>Adv Heal Sci Educ</RefJournal>
        <RefPage>93&#8211;102</RefPage>
        <RefTotal>Mavis B. Self-efficacy and OSCE performance among second year medical students. Adv Heal Sci Educ. 2001;6(2):93&#8211;102. DOI: 10.1023&#47;A:1011404132508</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1023&#47;A:1011404132508</RefLink>
      </Reference>
      <Reference refNo="29">
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Schellberg D</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>Subjektive Kompetenzeinsch&#228;tzung von Studierenden und ihre Leistung im OSCE</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc51</RefPage>
        <RefTotal>J&#252;nger J, Schellberg D, Nikendei C. Subjektive Kompetenzeinsch&#228;tzung von Studierenden und ihre Leistung im OSCE. GMS Z Med Ausbild. 2006;23(3):Doc51. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2006-23&#47;zma000270.shtml</RefTotal>
        <RefLink>http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2006-23&#47;zma000270.shtml</RefLink>
      </Reference>
      <Reference refNo="30">
        <RefAuthor>Verghese A</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2011</RefYear>
        <RefBookTitle>A doctor&#39;s touch</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Verghese A. A doctor&#39;s touch. Edinburgh: TEDGlobal2011; 2011.</RefTotal>
      </Reference>
      <Reference refNo="31">
        <RefAuthor>Peitzman SJ</RefAuthor>
        <RefAuthor>Cuddy MM</RefAuthor>
        <RefTitle>Performance in Physical Examination on the USMLE Step 2 Clinical Skills Examination</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Acad Med</RefJournal>
        <RefPage>209&#8211;213</RefPage>
        <RefTotal>Peitzman SJ, Cuddy MM. Performance in Physical Examination on the USMLE Step 2 Clinical Skills Examination. Acad Med. 2015;90(2):209&#8211;213. DOI: 10.1097&#47;ACM.0000000000000570</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1097&#47;ACM.0000000000000570</RefLink>
      </Reference>
      <Reference refNo="32">
        <RefAuthor>Vukanovic-Criley JM</RefAuthor>
        <RefAuthor>Criley S</RefAuthor>
        <RefAuthor>Warde CM</RefAuthor>
        <RefAuthor>Boker JR</RefAuthor>
        <RefAuthor>Guevara-Matheus L</RefAuthor>
        <RefAuthor>Churchill WH</RefAuthor>
        <RefAuthor>Nelson WP</RefAuthor>
        <RefAuthor>Criley JM</RefAuthor>
        <RefTitle>Competency in cardiac examination skills in medical students, trainees, physicians, and faculty: a multicenter study</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>Arch Intern Med</RefJournal>
        <RefPage>610&#8211;616</RefPage>
        <RefTotal>Vukanovic-Criley JM, Criley S, Warde CM, Boker JR, Guevara-Matheus L, Churchill WH, Nelson WP, Criley JM. Competency in cardiac examination skills in medical students, trainees, physicians, and faculty: a multicenter study. Arch Intern Med. 2006;166(6):610&#8211;616. DOI: 10.1001&#47;archinte.166.6.610</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1001&#47;archinte.166.6.610</RefLink>
      </Reference>
      <Reference refNo="33">
        <RefAuthor>Engel C</RefAuthor>
        <RefAuthor>Porsche M</RefAuthor>
        <RefAuthor>Roth S</RefAuthor>
        <RefAuthor>Ganschow P</RefAuthor>
        <RefAuthor>B&#252;chler MW</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefTitle>Welche Ausbildungsinhalte brauchen Studierende im Praktischen Jahr - Bedarfsanalyse als Basis f&#252;r ein chirurgisches PJ-Curriculum</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc89</RefPage>
        <RefTotal>Engel C, Porsche M, Roth S, Ganschow P, B&#252;chler MW, Kadmon M. Welche Ausbildungsinhalte brauchen Studierende im Praktischen Jahr - Bedarfsanalyse als Basis f&#252;r ein chirurgisches PJ-Curriculum. GMS Z Med Ausbild. 2008;25(3):Doc89. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2008-25&#47;zma000573.shtml</RefTotal>
        <RefLink>http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2008-25&#47;zma000573.shtml</RefLink>
      </Reference>
      <Reference refNo="34">
        <RefAuthor>Remmen R</RefAuthor>
        <RefAuthor>Derese A</RefAuthor>
        <RefAuthor>Scherpbier A</RefAuthor>
        <RefAuthor>Denekens J</RefAuthor>
        <RefAuthor>Hermann I</RefAuthor>
        <RefAuthor>Van Der Vleuten C</RefAuthor>
        <RefAuthor></RefAuthor>
        <RefTitle>Can medical schools rely on clerkships to train students in basic clinical skills&#63;</RefTitle>
        <RefYear>1999</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>600&#8211;605</RefPage>
        <RefTotal>Remmen R, Derese A, Scherpbier A, Denekens J, Hermann I, Van Der Vleuten C, et al. Can medical schools rely on clerkships to train students in basic clinical skills&#63; Med Educ. 1999;33(8):600&#8211;605. DOI: 10.1046&#47;j.1365-2923.1999.00467.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1046&#47;j.1365-2923.1999.00467.x</RefLink>
      </Reference>
      <Reference refNo="35">
        <RefAuthor>K&#246;hl-Hackert N</RefAuthor>
        <RefAuthor>Krautter M</RefAuthor>
        <RefAuthor>Andreesen S</RefAuthor>
        <RefAuthor>Hoffmann K</RefAuthor>
        <RefAuthor>Herzog W</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>Lernen am sp&#228;teren Arbeitsplatz: eine Analyse studentischer Erwartungen an den Stationseinsatz im Fachbereich der Inneren Medizin</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc43</RefPage>
        <RefTotal>K&#246;hl-Hackert N, Krautter M, Andreesen S, Hoffmann K, Herzog W, J&#252;nger J, Nikendei C. Lernen am sp&#228;teren Arbeitsplatz: eine Analyse studentischer Erwartungen an den Stationseinsatz im Fachbereich der Inneren Medizin. GMS Z Med Ausbild. 2014;31(4):Doc43. DOI: 10.3205&#47;zma000935</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000935</RefLink>
      </Reference>
      <Reference refNo="36">
        <RefAuthor>Pugh D</RefAuthor>
        <RefAuthor>Touchie C</RefAuthor>
        <RefAuthor>Wood TJ</RefAuthor>
        <RefAuthor>Humphrey-Murto S</RefAuthor>
        <RefTitle>Progress testing: is there a role for the OSCE&#63;</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>623&#8211;631</RefPage>
        <RefTotal>Pugh D, Touchie C, Wood TJ, Humphrey-Murto S. Progress testing: is there a role for the OSCE&#63; Med Educ. 2014;48(6):623&#8211;631. DOI: 10.1111&#47;medu.12423</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;medu.12423</RefLink>
      </Reference>
      <Reference refNo="37">
        <RefAuthor>Pugh D</RefAuthor>
        <RefAuthor>Touchie C</RefAuthor>
        <RefAuthor>Humphrey-Murto S</RefAuthor>
        <RefAuthor>Wood TJ</RefAuthor>
        <RefTitle>The OSCE progress test &#8211; Measuring clinical skill development over residency training</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>168-73</RefPage>
        <RefTotal>Pugh D, Touchie C, Humphrey-Murto S, Wood TJ. The OSCE progress test &#8211; Measuring clinical skill development over residency training. Med Teach. 2016;38(2):168-73. DOI: 10.3109&#47;0142159X.2015.1029895</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159X.2015.1029895</RefLink>
      </Reference>
      <Reference refNo="38">
        <RefAuthor>Gold J</RefAuthor>
        <RefAuthor>DeMuth R</RefAuthor>
        <RefAuthor>Mavis B</RefAuthor>
        <RefAuthor>Wagner D</RefAuthor>
        <RefTitle>Progress testing 2.0: clinical skills meets necessary science</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Med Educ Online</RefJournal>
        <RefPage></RefPage>
        <RefTotal>Gold J, DeMuth R, Mavis B, Wagner D. Progress testing 2.0: clinical skills meets necessary science. Med Educ Online. 2015;20.</RefTotal>
      </Reference>
      <Reference refNo="39">
        <RefAuthor>Duvivier RJ</RefAuthor>
        <RefAuthor>van Geel K</RefAuthor>
        <RefAuthor>van Dalen J</RefAuthor>
        <RefAuthor>Scherpbier AJJ a</RefAuthor>
        <RefAuthor>van der Vleuten CPM</RefAuthor>
        <RefTitle>Learning physical examination skills outside timetabled training sessions: what happens and why&#63;</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Adv Health Sci Educ Theory Pract</RefJournal>
        <RefPage>339&#8211;355</RefPage>
        <RefTotal>Duvivier RJ, van Geel K, van Dalen J, Scherpbier AJJ a, van der Vleuten CPM. Learning physical examination skills outside timetabled training sessions: what happens and why&#63; Adv Health Sci Educ Theory Pract. 2012;17(3):339&#8211;355. DOI: 10.1007&#47;s10459-011-9312-5</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1007&#47;s10459-011-9312-5</RefLink>
      </Reference>
      <Reference refNo="40">
        <RefAuthor>Blohm M</RefAuthor>
        <RefAuthor>Lauter J</RefAuthor>
        <RefAuthor>Branchereau S</RefAuthor>
        <RefAuthor>Krauter M</RefAuthor>
        <RefAuthor>K&#246;hl-Hackert N</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Herzog W</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>&#34;Peer-Assisted Learning&#34; (PAL) im Skills-Lab &#8211; eine Bestandsaufnahme an den Medizinischen Fakult&#228;ten der Bundesrepublik Deutschland</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc10</RefPage>
        <RefTotal>Blohm M, Lauter J, Branchereau S, Krauter M, K&#246;hl-Hackert N, J&#252;nger J, Herzog W, Nikendei C. &#34;Peer-Assisted Learning&#34; (PAL) im Skills-Lab &#8211; eine Bestandsaufnahme an den Medizinischen Fakult&#228;ten der Bundesrepublik Deutschland. GMS Z Med Ausbild. 2015;32(1):Doc10. DOI: 10.3205&#47;zma000952</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000952</RefLink>
      </Reference>
      <Reference refNo="41">
        <RefAuthor>Profanter C</RefAuthor>
        <RefAuthor>Perathoner A</RefAuthor>
        <RefTitle>DOPS (Direct Observation of Procedural Skills) im studentischen Skills-Lab: Funktioniert das&#63; Eine Analyse der Performanz klinischer Fertigkeiten und der curricularen Nebeneffekte</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc45</RefPage>
        <RefTotal>Profanter C, Perathoner A. DOPS (Direct Observation of Procedural Skills) im studentischen Skills-Lab: Funktioniert das&#63; Eine Analyse der Performanz klinischer Fertigkeiten und der curricularen Nebeneffekte. GMS Z Med Ausbild. 2015;32(4):Doc45. DOI: 10.3205&#47;zma000987</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000987</RefLink>
      </Reference>
      <Reference refNo="42">
        <RefAuthor>Yu TC</RefAuthor>
        <RefAuthor>Wilson NC</RefAuthor>
        <RefAuthor>Singh PP</RefAuthor>
        <RefAuthor>Lemanu DP</RefAuthor>
        <RefAuthor>Hawken SJ</RefAuthor>
        <RefAuthor>Hill AG</RefAuthor>
        <RefTitle>Medical students-as-teachers: a systematic review of peer-assisted teaching during medical school</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Adv Med Educ Pract</RefJournal>
        <RefPage>157&#8211;172</RefPage>
        <RefTotal>Yu TC, Wilson NC, Singh PP, Lemanu DP, Hawken SJ, Hill AG. Medical students-as-teachers: a systematic review of peer-assisted teaching during medical school. Adv Med Educ Pract. 2011;2:157&#8211;172.</RefTotal>
      </Reference>
      <Reference refNo="43">
        <RefAuthor>Weyrich P</RefAuthor>
        <RefAuthor>Celebi N</RefAuthor>
        <RefAuthor>Schrauth M</RefAuthor>
        <RefAuthor>M&#246;ltner A</RefAuthor>
        <RefAuthor>Lammerding-K&#246;ppel M</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>Peer-assisted versus faculty staff-led skills laboratory training: a randomised controlled trial</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>113&#8211;120</RefPage>
        <RefTotal>Weyrich P, Celebi N, Schrauth M, M&#246;ltner A, Lammerding-K&#246;ppel M, Nikendei C. Peer-assisted versus faculty staff-led skills laboratory training: a randomised controlled trial. Med Educ. 2009;43(2):113&#8211;120. DOI: 10.1111&#47;j.1365-2923.2008.03252.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;j.1365-2923.2008.03252.x</RefLink>
      </Reference>
      <Reference refNo="44">
        <RefAuthor>Herrmann-Werner A</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefAuthor>Keifenheim K</RefAuthor>
        <RefAuthor>Bosse HM</RefAuthor>
        <RefAuthor>Lund F</RefAuthor>
        <RefAuthor>Wagner R</RefAuthor>
        <RefAuthor>Celebi N</RefAuthor>
        <RefAuthor>Zipfel S</RefAuthor>
        <RefAuthor>Weyrich P</RefAuthor>
        <RefTitle>&#34;Best Practice&#34; Skills Lab Training vs. a &#34;see one, do one&#34; Approach in Undergraduate Medical Education: An RCT on Students&#39; Long-Term Ability to Perform Procedural Clinical Skills</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>PLoS One</RefJournal>
        <RefPage>1&#8211;13</RefPage>
        <RefTotal>Herrmann-Werner A, Nikendei C, Keifenheim K, Bosse HM, Lund F, Wagner R, Celebi N, Zipfel S, Weyrich P. &#34;Best Practice&#34; Skills Lab Training vs. a &#34;see one, do one&#34; Approach in Undergraduate Medical Education: An RCT on Students&#39; Long-Term Ability to Perform Procedural Clinical Skills. PLoS One. 2013;8(9):1&#8211;13. DOI: 10.1371&#47;journal.pone.0076354</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1371&#47;journal.pone.0076354</RefLink>
      </Reference>
      <Reference refNo="45">
        <RefAuthor>Buss B</RefAuthor>
        <RefAuthor>Krautter M</RefAuthor>
        <RefAuthor>Mo&#168;ltner A</RefAuthor>
        <RefAuthor>Weyrich P</RefAuthor>
        <RefAuthor>Werner A</RefAuthor>
        <RefAuthor>Ju&#168;nger J</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>Der &#34;Assessment Drives Learning&#34;-Effekt beim Training klinisch-praktischer Fertigkeiten - Implikationen f&#252;r die Curriculumsgestaltung und die Planung von Ressourcen Zusammenfassung</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc70</RefPage>
        <RefTotal>Buss B, Krautter M, Mo&#168;ltner A, Weyrich P, Werner A, Ju&#168;nger J, Nikendei C. Der &#34;Assessment Drives Learning&#34;-Effekt beim Training klinisch-praktischer Fertigkeiten - Implikationen f&#252;r die Curriculumsgestaltung und die Planung von Ressourcen Zusammenfassung. GMS Z Med Ausbild. 2012;29(5):Doc70. DOI: 10.3205&#47;zma000840</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000840</RefLink>
      </Reference>
      <Reference refNo="46">
        <RefAuthor>Raes P</RefAuthor>
        <RefAuthor>Angstwurm M</RefAuthor>
        <RefAuthor>Berberat P</RefAuthor>
        <RefAuthor>Kadmon M</RefAuthor>
        <RefAuthor>Rotgans J</RefAuthor>
        <RefAuthor>Streitlein-B&#246;hme I</RefAuthor>
        <RefAuthor>Burckhardt G</RefAuthor>
        <RefAuthor>Fischer MR</RefAuthor>
        <RefTitle>Qualit&#228;tsmanagement der klinisch-praktischenAusbildung im Praktischen Jahr des Medizinstudiums &#8211; Vorschlag eines Kriterienkatalogs der Gesellschaft f&#252;r Medizinische Ausbildung</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc49</RefPage>
        <RefTotal>Raes P, Angstwurm M, Berberat P, Kadmon M, Rotgans J, Streitlein-B&#246;hme I, Burckhardt G, Fischer MR. Qualit&#228;tsmanagement der klinisch-praktischenAusbildung im Praktischen Jahr des Medizinstudiums &#8211; Vorschlag eines Kriterienkatalogs der Gesellschaft f&#252;r Medizinische Ausbildung. GMS Z Med Ausbild. 2014;31(4):Doc49. DOI: 10.3205&#47;zma00094</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma00094</RefLink>
      </Reference>
      <Reference refNo="47">
        <RefAuthor>Bouwmans GA</RefAuthor>
        <RefAuthor>Denessen E</RefAuthor>
        <RefAuthor>Hettinga AM</RefAuthor>
        <RefAuthor>Michels C</RefAuthor>
        <RefAuthor>Postma CT</RefAuthor>
        <RefTitle>Reliability and validity of an extended clinical examination</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>1072-1077</RefPage>
        <RefTotal>Bouwmans GA, Denessen E, Hettinga AM, Michels C, Postma CT. Reliability and validity of an extended clinical examination. Med Teach. 2015;37(12):1072-1077. DOI: 10.3109&#47;0142159x.2015.1009423</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159x.2015.1009423</RefLink>
      </Reference>
      <Reference refNo="48">
        <RefAuthor>Brown C</RefAuthor>
        <RefAuthor>Ross S</RefAuthor>
        <RefAuthor>Cleland J</RefAuthor>
        <RefAuthor>Walsh K</RefAuthor>
        <RefTitle>Money makes the (medical assessment) world go round: The cost of components of a summative final year Objective Structured Clinical Examination (OSCE)</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>653-659</RefPage>
        <RefTotal>Brown C, Ross S, Cleland J, Walsh K. Money makes the (medical assessment) world go round: The cost of components of a summative final year Objective Structured Clinical Examination (OSCE). Med Teach. 2015;37(7):653-659. DOI: 10.3109&#47;0142159x.2015.1033389</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159x.2015.1033389</RefLink>
      </Reference>
      <Reference refNo="49">
        <RefAuthor>Rau T</RefAuthor>
        <RefAuthor>Fegert J</RefAuthor>
        <RefAuthor>Liebhardt H</RefAuthor>
        <RefTitle>Wie hoch liegen die Personalkosten f&#252;r die Durchf&#252;hrung einer OSCE&#63; Eine Kostenaufstellung nach betriebswirtschaftlichen Gesichtspunkten</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc13</RefPage>
        <RefTotal>Rau T, Fegert J, Liebhardt H. Wie hoch liegen die Personalkosten f&#252;r die Durchf&#252;hrung einer OSCE&#63; Eine Kostenaufstellung nach betriebswirtschaftlichen Gesichtspunkten. GMS Z Med Ausbild. 2011;28(1):Doc13. DOI: 10.3205&#47;zma000725</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;zma000725</RefLink>
      </Reference>
      <Reference refNo="50">
        <RefAuthor>Kraus B</RefAuthor>
        <RefAuthor>Briem S</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Schrauth M</RefAuthor>
        <RefAuthor>Weyrich P</RefAuthor>
        <RefAuthor>Herzog W</RefAuthor>
        <RefAuthor>Zipfel S</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>Entwicklung und Evaluation eines Schulungsprogramms f&#252;r Studenten im Praktischen Jahr in der Inneren Medizin</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc70</RefPage>
        <RefTotal>Kraus B, Briem S, J&#252;nger J, Schrauth M, Weyrich P, Herzog W, Zipfel S, Nikendei C. Entwicklung und Evaluation eines Schulungsprogramms f&#252;r Studenten im Praktischen Jahr in der Inneren Medizin. GMS Z Med Ausbild. 2006;23(4):Doc70. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2006-23&#47;zma000289.shtml</RefTotal>
        <RefLink>http:&#47;&#47;www.egms.de&#47;static&#47;de&#47;journals&#47;zma&#47;2006-23&#47;zma000289.shtml</RefLink>
      </Reference>
      <Reference refNo="51">
        <RefAuthor>Yates J</RefAuthor>
        <RefTitle>Development of a &#34;toolkit&#34; to identify medical students at risk of failure to thrive on the course: an exploratory retrospective case study</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>95</RefPage>
        <RefTotal>Yates J. Development of a &#34;toolkit&#34; to identify medical students at risk of failure to thrive on the course: an exploratory retrospective case study. BMC Med Educ. 2011;11(1):95. DOI: 10.1186&#47;1472-6920-11-95</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1186&#47;1472-6920-11-95</RefLink>
      </Reference>
      <Reference refNo="52">
        <RefAuthor>Winston KA</RefAuthor>
        <RefAuthor>van der Vleuten CP</RefAuthor>
        <RefAuthor>Scherpbier AJ</RefAuthor>
        <RefTitle>Prediction and prevention of failure: An early intervention to assist at-risk medical students</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>25&#8211;31</RefPage>
        <RefTotal>Winston KA, van der Vleuten CP, Scherpbier AJ. Prediction and prevention of failure: An early intervention to assist at-risk medical students. Med Teach. 2014;36(1):25&#8211;31. DOI: 10.3109&#47;0142159X.2013.836270</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159X.2013.836270</RefLink>
      </Reference>
      <Reference refNo="53">
        <RefAuthor>Bosse HM</RefAuthor>
        <RefAuthor>Mohr J</RefAuthor>
        <RefAuthor>Buss B</RefAuthor>
        <RefAuthor>Krautter M</RefAuthor>
        <RefAuthor>Weyrich P</RefAuthor>
        <RefAuthor>Herzog W</RefAuthor>
        <RefAuthor>J&#252;nger J</RefAuthor>
        <RefAuthor>Nikendei C</RefAuthor>
        <RefTitle>The benefit of repetitive skills training and frequency of expert feedback in the early acquisition of procedural skills</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>22</RefPage>
        <RefTotal>Bosse HM, Mohr J, Buss B, Krautter M, Weyrich P, Herzog W, J&#252;nger J, Nikendei C. The benefit of repetitive skills training and frequency of expert feedback in the early acquisition of procedural skills. BMC Med Educ. 2015;15(1):22. DOI: 10.1186&#47;s12909-015-0286-5</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1186&#47;s12909-015-0286-5</RefLink>
      </Reference>
      <Reference refNo="54">
        <RefAuthor>Van Der Vleuten CP</RefAuthor>
        <RefAuthor>Schuwirth LW</RefAuthor>
        <RefTitle>Assessing professional competence: From methods to programmes</RefTitle>
        <RefYear>2005</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>309&#8211;317</RefPage>
        <RefTotal>Van Der Vleuten CP, Schuwirth LW. Assessing professional competence: From methods to programmes. Med Educ. 2005;39(3):309&#8211;317. DOI: 10.1111&#47;j.1365-2929.2005.02094.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;j.1365-2929.2005.02094.x</RefLink>
      </Reference>
      <Reference refNo="55">
        <RefAuthor>Epstein RM</RefAuthor>
        <RefTitle>Medical education - Assessment in medical education</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>N Engl J Med</RefJournal>
        <RefPage>387&#8211;396</RefPage>
        <RefTotal>Epstein RM. Medical education - Assessment in medical education. N Engl J Med. 2007;356(4):387&#8211;396. DOI: 10.1056&#47;NEJMra054784</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1056&#47;NEJMra054784</RefLink>
      </Reference>
      <Reference refNo="56">
        <RefAuthor>Norcini J</RefAuthor>
        <RefAuthor>Burch V</RefAuthor>
        <RefTitle>Workplace-based assessment as an educational tool: AMEE Guide No. 31</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>855&#8211;871</RefPage>
        <RefTotal>Norcini J, Burch V. Workplace-based assessment as an educational tool: AMEE Guide No. 31. Med Teach. 2007;29(9):855&#8211;871. DOI: 10.1080&#47;01421590701775453</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1080&#47;01421590701775453</RefLink>
      </Reference>
      <Reference refNo="57">
        <RefAuthor>Abadel FT</RefAuthor>
        <RefAuthor>Hattab AS</RefAuthor>
        <RefTitle>How does the medical graduates&#39; self-assessment of their clinical competency differ from experts&#39; assessment&#63; BMC Med Educ</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>24</RefPage>
        <RefTotal>Abadel FT, Hattab AS. How does the medical graduates&#39; self-assessment of their clinical competency differ from experts&#39; assessment&#63; BMC Med Educ. BMC Med Educ. 2013;13(1):24. DOI: 10.1186&#47;1472-6920-13-24</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1186&#47;1472-6920-13-24</RefLink>
      </Reference>
      <Reference refNo="58">
        <RefAuthor>Falchikov N</RefAuthor>
        <RefTitle>Student self-assessment in higher education: A meta-analysis</RefTitle>
        <RefYear>1989</RefYear>
        <RefJournal>Rev Educ Res</RefJournal>
        <RefPage>394&#8211;430</RefPage>
        <RefTotal>Falchikov N. Student self-assessment in higher education: A meta-analysis. Rev Educ Res. 1989;59(359):394&#8211;430. DOI: 10.3102&#47;00346543059004395</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3102&#47;00346543059004395</RefLink>
      </Reference>
      <Reference refNo="59">
        <RefAuthor>Davis DA</RefAuthor>
        <RefAuthor>Mazmanian PE</RefAuthor>
        <RefAuthor>Fordis M</RefAuthor>
        <RefAuthor>Van Harrison R</RefAuthor>
        <RefAuthor>Thorpe KE</RefAuthor>
        <RefAuthor>Perrier L</RefAuthor>
        <RefTitle>Accuracy of Physician Self-assessment Compared With Observed Measures of Competence</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>JAMA</RefJournal>
        <RefPage>1094</RefPage>
        <RefTotal>Davis DA, Mazmanian PE, Fordis M, Van Harrison R, Thorpe KE, Perrier L. Accuracy of Physician Self-assessment Compared With Observed Measures of Competence. JAMA. 2006;296(9):1094. DOI: 10.1001&#47;jama.296.9.1094</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1001&#47;jama.296.9.1094</RefLink>
      </Reference>
      <Reference refNo="60">
        <RefAuthor>Berner ES</RefAuthor>
        <RefAuthor>Graber ML</RefAuthor>
        <RefTitle>Overconfidence as a cause of diagnostic error in medicine</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>Am J Med</RefJournal>
        <RefPage>S2&#8211;23</RefPage>
        <RefTotal>Berner ES, Graber ML. Overconfidence as a cause of diagnostic error in medicine. Am J Med. 2008;121(5 Suppl):S2&#8211;23.</RefTotal>
      </Reference>
      <Reference refNo="61">
        <RefAuthor>Cavalcanti RB</RefAuthor>
        <RefAuthor>Sibbald M</RefAuthor>
        <RefTitle>Am I right when I am sure&#63; Data consistency influences the relationship between diagnostic accuracy and certainty</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>Acad Med</RefJournal>
        <RefPage>107&#8211;113</RefPage>
        <RefTotal>Cavalcanti RB, Sibbald M. Am I right when I am sure&#63; Data consistency influences the relationship between diagnostic accuracy and certainty. Acad Med. 2014;89(1):107&#8211;113. DOI: 10.1097&#47;ACM.0000000000000074</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1097&#47;ACM.0000000000000074</RefLink>
      </Reference>
      <Reference refNo="62">
        <RefAuthor>Verghese A</RefAuthor>
        <RefAuthor>Charlton B</RefAuthor>
        <RefAuthor>Kassirer JP</RefAuthor>
        <RefAuthor>Ramsey M</RefAuthor>
        <RefAuthor>Ioannidis JP</RefAuthor>
        <RefTitle>Inadequacies of Physical Examination as a Cause of Medical Errors and Adverse Events: A Collection of Vignettes</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Am J Med</RefJournal>
        <RefPage>1322-1324</RefPage>
        <RefTotal>Verghese A, Charlton B, Kassirer JP, Ramsey M, Ioannidis JP. Inadequacies of Physical Examination as a Cause of Medical Errors and Adverse Events: A Collection of Vignettes. Am J Med. 2015;128(12):1322-1324. DOI: 10.1016&#47;j.amjmed.2015.06.004</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1016&#47;j.amjmed.2015.06.004</RefLink>
      </Reference>
      <Reference refNo="63">
        <RefAuthor>Lane JL</RefAuthor>
        <RefAuthor>Gottlieb RP</RefAuthor>
        <RefTitle>Improving the interviewing and self-assessment skills of medical students: is it time to readopt videotaping as an educational tool&#63;</RefTitle>
        <RefYear>2004</RefYear>
        <RefJournal>Ambul Pediatr</RefJournal>
        <RefPage>244&#8211;248</RefPage>
        <RefTotal>Lane JL, Gottlieb RP. Improving the interviewing and self-assessment skills of medical students: is it time to readopt videotaping as an educational tool&#63; Ambul Pediatr. 2004;4(3):244&#8211;248. DOI: 10.1367&#47;A03-122R1.1</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1367&#47;A03-122R1.1</RefLink>
      </Reference>
      <Reference refNo="64">
        <RefAuthor>Hawkins SC</RefAuthor>
        <RefAuthor>Osborne A</RefAuthor>
        <RefAuthor>Schofield SJ</RefAuthor>
        <RefAuthor>Pournaras DJ</RefAuthor>
        <RefAuthor>Chester JF</RefAuthor>
        <RefTitle>Improving the accuracy of self-assessment of practical clinical skills using video feedback &#8211; The importance of including benchmarks</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>279&#8211;284</RefPage>
        <RefTotal>Hawkins SC, Osborne A, Schofield SJ, Pournaras DJ, Chester JF. Improving the accuracy of self-assessment of practical clinical skills using video feedback &#8211; The importance of including benchmarks. Med Teach. 2012;34(4):279&#8211;284. DOI: 10.3109&#47;0142159X.2012.658897</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159X.2012.658897</RefLink>
      </Reference>
      <Reference refNo="65">
        <RefAuthor>Eva KW</RefAuthor>
        <RefAuthor>Armson H</RefAuthor>
        <RefAuthor>Holmboe E</RefAuthor>
        <RefAuthor>Lockyer J</RefAuthor>
        <RefAuthor>Loney E</RefAuthor>
        <RefAuthor>Mann K</RefAuthor>
        <RefAuthor>Sargeant J</RefAuthor>
        <RefTitle>Factors influencing responsiveness to feedback: on the interplay between fear, confidence, and reasoning processes</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Adv Health Sci Educ Theory Pract</RefJournal>
        <RefPage>15&#8211;26</RefPage>
        <RefTotal>Eva KW, Armson H, Holmboe E, Lockyer J, Loney E, Mann K, Sargeant J. Factors influencing responsiveness to feedback: on the interplay between fear, confidence, and reasoning processes. Adv Health Sci Educ Theory Pract. 2012;17(1):15&#8211;26. DOI: 10.1007&#47;s10459-011-9290-7</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1007&#47;s10459-011-9290-7</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 1: Possible confounding factors: comparison of total score between various sub-groups</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 1: Untersuchung m&#246;glicher Einflussfaktoren auf das Pr&#252;fungsergebnis</Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>1</NoOfTables>
      </Tables>
      <Figures>
        <Figure format="png" height="439" width="547">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 1: Histogram of total score (4-station OSCEs)</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 1: Histogramm der Gesamt-Pr&#252;fungsleistung (jeweils 4 OSCE-Stationen)</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="481" width="661">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 2: Radar chart of total examination performance (expressed as exam mark) and average self-assessment (same scale)</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 2: Netzdiagramm der Gesamt-Pr&#252;fungsleistung und der durchschnittlichen Selbsteinsch&#228;tzung</Mark1></Pgraph></Caption>
        </Figure>
        <NoOfPictures>2</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <NoOfAttachments>0</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>