<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<!DOCTYPE GmsArticle SYSTEM "http://www.egms.de/dtd/2.0.34/GmsArticle.dtd">
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001499</Identifier>
    <IdentifierDoi>10.3205/zma001499</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0014999</IdentifierUrn>
    <ArticleType language="en">article</ArticleType>
    <ArticleType language="de">Artikel</ArticleType>
    <TitleGroup>
      <Title language="en">Palliative care in undergraduate medical education &#8211; consolidation of the learning contents of palliative care in the final academic year</Title>
      <TitleTranslated language="de">Palliativmedizin im Medizinstudium &#8211; Konsolidierung palliativmedizinischer Lerninhalte im Praktischen Jahr</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>Gerlach</Lastname>
          <LastnameHeading>Gerlach</LastnameHeading>
          <Firstname>Christina</Firstname>
          <Initials>C</Initials>
          <AcademicTitle>Dr. med.</AcademicTitle>
          <AcademicTitleSuffix>MSc (King&#39;s College London, UK)</AcademicTitleSuffix>
        </PersonNames>
        <Address language="en">Heidelberg University Hospital, Department of Palliative Care, Im Neuenheimer Feld 305, D-69120 Heidelberg, Germany, Phone: &#43;49 (0)66221&#47;56-310683<Affiliation>Johannes Gutenberg University Mainz, University Medical Center, III. Med. Clinic &#38; Polyclinic, Hematology, Oncology und Pneumology, Interdisciplinary Department of Palliative Care, Mainz, Germany</Affiliation><Affiliation>Heidelberg University Hospital, Department of Palliative Care, Heidelberg, Germany</Affiliation></Address>
        <Address language="de">Universit&#228;tsklinikum Heidelberg. Klinik f&#252;r Palliativmedizin, Im Neuenheimer Feld 305, 69120 Heidelberg, Deutschland, Tel.: &#43;49 (0)6221&#47;56-310683<Affiliation>Johannes Gutenberg-Universit&#228;t Mainz, Universit&#228;tsmedizin, III. Med. Klinik &#38; Poliklinik, H&#228;matologie, Internistische Onkologie und Pneumologie, Interdisziplin&#228;re Abteilung f&#252;r Palliativmedizin, Mainz, Deutschland</Affiliation><Affiliation>Universit&#228;tsklinikum Heidelberg. Klinik f&#252;r Palliativmedizin, Heidelberg, Deutschland</Affiliation></Address>
        <Email>christina.gerlach&#64;med.uni-heidelberg.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Mai</Lastname>
          <LastnameHeading>Mai</LastnameHeading>
          <Firstname>Sandra Stephanie</Firstname>
          <Initials>SS</Initials>
          <AcademicTitle>Dipl.-Psych.</AcademicTitle>
        </PersonNames>
        <Address language="en">
          <Affiliation>Johannes Gutenberg University Mainz, University Medical Center, III. Med. Clinic &#38; Polyclinic, Hematology, Oncology und Pneumology, Interdisciplinary Department of Palliative Care, Mainz, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Johannes Gutenberg-Universit&#228;t Mainz, Universit&#228;tsmedizin, III. Med. Klinik &#38; Poliklinik, H&#228;matologie, Internistische Onkologie und Pneumologie, Interdisziplin&#228;re Abteilung f&#252;r Palliativmedizin, Mainz, Deutschland</Affiliation>
        </Address>
        <Email>sandra.mai&#64;unimedizin-mainz.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Schmidtmann</Lastname>
          <LastnameHeading>Schmidtmann</LastnameHeading>
          <Firstname>Irene</Firstname>
          <Initials>I</Initials>
          <AcademicTitle>Dr. med.</AcademicTitle>
        </PersonNames>
        <Address language="en">
          <Affiliation>Johannes Gutenberg University Mainz, University Medical Center, Institute for Medical Biometry, Epidemiology and Informatics, Mainz, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Johannes Gutenberg-Universit&#228;t Mainz, Universit&#228;tsmedizin, Institut f&#252;r Medizinische Biometrie; Epidemiologie und Informatik, Mainz, Deutschland</Affiliation>
        </Address>
        <Email>irene.schmidtmann&#64;unimedizin-mainz.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Weber</Lastname>
          <LastnameHeading>Werber</LastnameHeading>
          <Firstname>Martin</Firstname>
          <Initials>M</Initials>
          <AcademicTitle>Univ.-Prof. Dr. med.</AcademicTitle>
        </PersonNames>
        <Address language="en">
          <Affiliation>Johannes Gutenberg University Mainz, University Medical Center, III. Med. Clinic &#38; Polyclinic, Hematology, Oncology und Pneumology, Interdisciplinary Department of Palliative Care, Mainz, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Johannes Gutenberg-Universit&#228;t Mainz, Universit&#228;tsmedizin, III. Med. Klinik &#38; Poliklinik, H&#228;matologie, Internistische Onkologie und Pneumologie, Interdisziplin&#228;re Abteilung f&#252;r Palliativmedizin, Mainz, Deutschland</Affiliation>
        </Address>
        <Email>martin.weber&#64;unimedizin-mainz.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">undergraduate medical education</Keyword>
      <Keyword language="en">palliative care</Keyword>
      <Keyword language="en">curriculum</Keyword>
      <Keyword language="en">educational measurement</Keyword>
      <Keyword language="en">Germany</Keyword>
      <Keyword language="de">medizinische Ausbildung im Grundstudium</Keyword>
      <Keyword language="de">Palliativmedizin</Keyword>
      <Keyword language="de">Curriculum</Keyword>
      <Keyword language="de">Bildungsmessung</Keyword>
      <Keyword language="de">Deutschland</Keyword>
      <SectionHeading language="en">palliative care</SectionHeading>
      <SectionHeading language="de">Palliativmedizin</SectionHeading>
    </SubjectGroup>
    <DateReceived>20201026</DateReceived>
    <DateRevised>20210426</DateRevised>
    <DateAccepted>20210517</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20210915</DatePublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>38</Volume>
        <Issue>6</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
      </Journal>
    </SourceGroup>
    <ArticleNo>103</ArticleNo>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph><Mark1>Hintergrund: </Mark1>Der demographische Wandel und der &#228;rztliche Anspruch Patientinnen und Patienten stets und auch bei zum Tode f&#252;hrenden Erkrankungen zu begleiten, erfordern gute palliativmedizinische Basiskenntnisse in weiten Teilen der &#196;rzteschaft. Mit Wirkung zum Sommersemester 2013 ist Palliativmedizin als &#8222;Querschnittbereich 13 (Q13)&#8220; als Pflichtfach in das Medizinstudium eingef&#252;hrt worden. W&#228;hrend Kurskonzepte zum Q13 bereits positiv evaluiert wurden, fehlt die Beurteilung der Konsolidierung und Praxisrelevanz der vermittelten Kenntnisse. </Pgraph><Pgraph><Mark1>Methode: </Mark1>Beurteilung der Konsolidierung der Lerninhalte aus Q13 nach dem Praktischen Jahr (PJ) mittels Befragung mit einem erprobten Fragebogen und integrierter qualitativer Freitextanalyse einer Kohorte von Medizinstudierenden (n&#61;176), die bereits an einer Evaluation vor und nach Q13 teilgenommen hatten. </Pgraph><Pgraph><Mark1>Ergebnis: </Mark1>Die R&#252;cklaufquote betrug 96&#37; nach Q13 und 45&#37; nach dem PJ. Der Unterricht wurde &#252;berwiegend als hilfreicher empfunden als das PJ (p&#60;0.001). Im Vergleich zum Stand nach Q13 sch&#228;tzten sich die Studierenden nach dem PJ in allen abgefragten Bereichen als weniger kompetent ein, einschlie&#223;lich der medikament&#246;sen Schmerztherapie (p&#61;0.0386). Auch die Sicherheit in der Aufkl&#228;rung von Patienten &#252;ber die Unheilbarkeit der Erkrankung nahm nach dem PJ signifikant ab (p&#61;0.0117), obgleich die Vorbereitung durch Q13 positiv hervorgehoben wurde.</Pgraph><Pgraph><Mark1>Schlussfolgerung: </Mark1>Die im Q13 erworbenen Kenntnisse konnten im PJ nicht verankert werden. Im Gegenteil wurden die Gespr&#228;chsf&#252;hrung bei schwerer Erkrankung und der Umgang mit eigener Unsicherheit in der Behandlung von Schwerkranken von den Studierenden nach erster Praxiserfahrung als herausfordernd erachtet. Strukturelle Faktoren zu Palliativmedizin im PJ sowie intrinsische Motive der Studierenden, wie z.B. Vorwissen oder Lernmotivation, sollten analysiert werden, um M&#246;glichkeiten zu erkennen, wie die L&#252;cke zwischen theoretischer und praktischer Ausbildung in der allgemeinen Palliativversorgung geschlossen werden kann. Um ausreichend repr&#228;sentative Stichproben zu generieren, sollten zuk&#252;nftige Studien zur Lehre f&#252;r Studierende leicht zug&#228;nglich sein und attraktive Evaluationsformen unter Einbeziehung elektronischer Verfahren und Social Media ber&#252;cksichtigen.</Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph><Mark1>Background: </Mark1>Demographic change and the medical imperative to accompany patients at all times and also in the case of illness leading to death require good basic knowledge of palliative care in large parts of the medical profession. Palliative care has been introduced into undergraduate medical education as a compulsory subject: &#8220;interdisciplinary subject 13 palliative care&#8221; (Q13). While course concepts for Q13 have already been positively evaluated, assessment of the consolidation and practical relevance of the knowledge taught is lacking.</Pgraph><Pgraph><Mark1>Methods: </Mark1>Assessment of the consolidation of the learning content from Q13 after the practical year (the &#8220;practical year&#8221; is the sixth and final year of undergraduate medical education in Germany) by means of a survey with a proven questionnaire and integrated qualitative free-text analysis of a cohort of medical students (n&#61;176) who had already participated in an evaluation before and after Q13.</Pgraph><Pgraph><Mark1>Results: </Mark1>The response rate was 96&#37; after Q13 and 45&#37; after the practical year (PY). Teaching was predominantly perceived as more helpful than the PY (p&#60;0.001). Compared to the status after Q13, students rated themselves as less competent after the PY in all areas surveyed, including drug-based pain therapy (p&#61;0.0386). The certainty in informing patients about the incurability of the disease also decreased significantly after the PY (p&#61;0.0117), although the preparation in Q13 was positively highlighted.</Pgraph><Pgraph><Mark1>Conclusion: </Mark1>The knowledge acquired in Q13 could not be anchored in the PY. On the contrary, after initial practical experiences, the students found it challenging to conduct conversations in cases of serious illness and to deal with their own uncertainty in the care of seriously ill patients. Structural factors regarding palliative care in the PY, as well as intrinsic motives of students, such as prior knowledge or motivation to learn, should be analyzed to identify ways to close the gap between theoretical and practical training in general palliative care. To generate samples that are sufficiently representative, future studies on teaching should be easily accessible to students and consider attractive forms of evaluation including electronic methods and social media.</Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="Introduction">
      <MainHeadline>Introduction</MainHeadline><Pgraph>The introduction of palliative care into the medical curriculum in the 2013 summer term was an important step toward meeting the needs of around 400,000 people in Germany each year facing chronic terminal diseases or frailty at the end of life <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>, <TextLink reference="4"></TextLink>. Whenever providing medical care it is necessary to sufficiently consider the stresses associated with severe disease and death that are experienced by patients and their relatives on physical, psychological, social and existential levels. Alongside the development and expansion of structures to provide competent and dignified care to palliative patients and those at the end of life, a solid basic education in palliative care for all physicians with regard for existing staff resources is also important. For years now palliative care education has undergone continual development <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>, <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>. The initial evaluation results of Q13 show improvement in palliative care education in the medical curriculum <TextLink reference="11"></TextLink>, <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>. However, it remains open as to how effectively the acquired knowledge is consolidated in practice <TextLink reference="9"></TextLink>. The consolidation of learning content in medical education is understood to be processes leading to long-term reproducibility of knowledge and skills <TextLink reference="14"></TextLink>.</Pgraph><Pgraph>The interdisciplinary subject palliative care (Q13), implemented in Mainz in the 2012 winter term, begins with an introductory lecture for all attendees and then goes on to cover five major topics in smaller groups (see figure 1 <ImgLink imgNo="1" imgType="figure"/>). The multiprofessional course design pursues the goal described in the literature of counteracting the inadequate confidence felt by students when interacting with the most severely ill <TextLink reference="15"></TextLink>. All of the medical students in a semester were surveyed repeatedly to evaluate the course. The change in the students&#8217; perceived level of confidence in different domains of palliative care (symptom control, psychosocial, ethical and spiritual aspects) was defined as the outcome and measured using questionnaires in the same cohort in a cross-sectional analysis before and after Q13 and again after the practical year (PY). The pre-post analysis before and immediately after Q13 has been previously published <TextLink reference="11"></TextLink>. This study uses quantitative and qualitative methods to analyze the evaluation of Q13, attitudes and knowledge, self-confidence regarding palliative care and its related topics in students after Q13 and again in the same students after they had completed the PY.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Einleitung">
      <MainHeadline>Einleitung</MainHeadline><Pgraph>Die Einf&#252;hrung der palliativmedizinischen Lehre zum Sommersemester 2013 war eine wichtige Ma&#223;nahme, um den Bed&#252;rfnissen der j&#228;hrlich etwa 400.000 Menschen in Deutschland gerecht zu werden, die am Ende ihres Lebens an chronischen, zum Tode f&#252;hrenden Erkrankungen oder Gebrechlichkeit leiden <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>, <TextLink reference="4"></TextLink>. Nicht nur gegenw&#228;rtig m&#252;ssen die mit schwerer Erkrankung und Tod verbundenen Belastungen von Patienten und ihren Angeh&#246;rigen auf k&#246;rperlicher, seelischer, sozialer wie existentieller Ebene ausreichend in der medizinischen Versorgung ber&#252;cksichtigt werden. Neben dem Ausbau von Strukturen zur kompetenten und w&#252;rdevollen Versorgung von Palliativpatienten und Menschen am Lebensende, ist eine gute palliativmedizinische Grundausbildung aller &#196;rztinnen und &#196;rzte auch im Hinblick auf die vorhandenen personellen Ressourcen wichtig. Seit Jahren befindet sich die palliativmedizinische Ausbildung in best&#228;ndigem Ausbau <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>, <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>. Erste Evaluationsergebnisse des Q13 zeigen eine Verbesserung der palliativmedizinischen Ausbildung im Medizinstudium <TextLink reference="11"></TextLink>, <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>. Dagegen ist offen, wie sich die Anwendung des Erlernten i.S. einer Konsolidierung in der Praxis bew&#228;hrt <TextLink reference="9"></TextLink>. Als Konsolidierung von Lerninhalten werden in der Medizindidaktik Prozesse zur langfristigen Reproduzierbarkeit von Kenntnissen und F&#228;higkeiten verstanden <TextLink reference="14"></TextLink>. </Pgraph><Pgraph>Das in Mainz seit dem Wintersemester 2012 implementierte Querschnittsfach Q13 Palliativmedizin vermittelt den Studierenden nach einer gemeinsamen Einf&#252;hrungsveranstaltung f&#252;nf thematische Unterrichtseinheiten in Kleingruppen (siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>). Das multiprofessionelle Kurskonzept verfolgt das Ziel, dem in der Literatur beschriebenen unzureichenden Sicherheitsgef&#252;hl Studierender im Umgang mit Schwerstkranken entgegenzuwirken <TextLink reference="15"></TextLink>. Zur Bewertung des Kurses wurden alle Medizinstudierenden eines Semesters wiederholt befragt. Als Ziel wurde die Ver&#228;nderung des Sicherheitsgef&#252;hls in den verschiedenen Dimensionen von Palliativmedizin gew&#228;hlt (Symptomkontrolle, psychosoziale, ethische und spirituelle Aspekte) und in derselben Kohorte in einer Querschnittserhebung vor und nach Q13 sowie nach dem Praktischen Jahr (PJ) mittels Fragebogen gemessen. Die pr&#228;-post-Analyse vor Beginn des Unterrichts und unmittelbar nach Q13 ist an anderer Stelle publiziert &#91;11&#93;. In der hier vorliegenden Arbeit werden die Bewertung des Q13, Einstellung und Kenntnisse, das Sicherheitsgef&#252;hl in und die Ber&#252;hrung mit palliativmedizinischen Themen bei den Studierenden nach Q13 mit denen nach dem PJ mittels quantitativer und qualitativer Methodik untersucht.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Materials und methods">
      <MainHeadline>Materials und methods</MainHeadline><SubHeadline2>Study design</SubHeadline2><Pgraph>Descriptive prospective cohort study with a pre-post comparison of two data points (first immediately after Q13 and second after the PY) using quantitative (electronic) questionnaires and supplementary qualitative content-based analysis of the free-text comments. The influence of Q13 and the PY were analyzed for students&#8217; sense of self-confidence in various dimensions of palliative care (anamnesis, content &#38; basic knowledge, psychological aspects, pain medication, symptom control, communication, explaining change of therapeutic aim, explaining incurability, accompaniment of a dying patient, spiritual aspects).</Pgraph><SubHeadline2>Setting and sample</SubHeadline2><Pgraph>During the Q13 implementation phase at the University of Mainz, all of the tenth-semester students attending the compulsory course (N&#61;176) were included. These students were asked to fill out a questionnaire prior to the start of Q13 and again at the conclusion of Q13 &#91;11&#93;. Over the course of the longitudinal analysis, this sample was surveyed a third time at the conclusion of the PY. This paper compares the data collected after Q13 and after the PY.</Pgraph><SubHeadline2>Measuring instruments</SubHeadline2><Pgraph>The questionnaire before and immediately after Q13 contains 17 questions to self-assess one&#8217;s own skills, evaluate Q13 in general, and the option to voice comments (see attachment 1 <AttachmentLink attachmentNo="1"/>: questionnaire post-Q13 <TextLink reference="15"></TextLink>). After the PY, students were additionally asked to what extent they found Q13 and&#47;or the PY to be helpful in regard to the different categories (see attachment 2 <AttachmentLink attachmentNo="2"/>: questionnaire post-PY). </Pgraph><SubHeadline2>Data collection</SubHeadline2><Pgraph>The surveys were conducted during the introductory lecture (pre-Q13) and right after the written exam (post-Q13). The post-PY survey took place after completion of the PY but prior to the state medical examination. The pre-post questionnaires were filled out using pencil and paper during the Q13 course; the post-PY survey was electronic. Exactly one year after the post-Q13 survey the students were invited to participate in the post-PY survey via the e-learning platform ILIAS (Integriertes Lern-, Informations- und Arbeitskooperations-System) of the Center for Data Processing at the University of Mainz. The link to the online survey served not only to match that survey with the pre-post Q13 questionnaires, but also to explicitly anonymize the participants. At all three of the survey time points the students were asked to give a uniquely individual standardized code.</Pgraph><Pgraph>To reduce any potential selection bias toward particularly interested students with positive attitudes, the importance of critical feedback from the students was explicitly emphasized. In a bid to motivate as many students as possible to participation a third time in the Q13 survey during the learning phase, all of the participants were given access to final exam questions for the purpose of preparing for the state medical examination in return for their participation in the post-PY survey.</Pgraph><SubHeadline2>Statistical analysis of the quantitative data</SubHeadline2><Pgraph>The questions about self-confidence in regard to each of the Q13 topics are summarized by giving the absolute and relative frequencies for answers to single items. Scores for the somatic, psychological, spiritual, and knowledge dimensions, as well as total scores, were obtained from these 10 items. High values correspond with a high level of self-confidence. The scores are reported as the median and interquartile range (IQR). Comparisons between the survey time points are presented by giving the frequency of the changes (increases, decreases, no change) and the sign test.</Pgraph><Pgraph>The responses about how helpful Q13 and the PY were in regard to the topics in palliative care are also summarized using the absolute and relative frequencies for answers to single items. Comparisons between Q13 and the PY are made using Bowker&#8217;s test of symmetry <TextLink reference="16"></TextLink>.</Pgraph><Pgraph>In order to recognize any biases resulting from the different response rates for the three different survey time points, the participants&#8217; answers were divided per survey. The participants in the survey after Q13 (post-Q13) were divided into those who had also participated in the survey after the PY (post-PY) and those who could not be matched with a post-PY questionnaire. The results of these groups were compared. Likewise, the participants of the post-PY survey were divided into two groups: those with matched questionnaires from the post-Q13 survey and those without. The frequency distributions were juxtaposed and compared using the Mann-Whitney test. The data analysis was carried out using SAS 9.4.</Pgraph><SubHeadline2>Content-based analysis of the qualitative data</SubHeadline2><Pgraph>The free-text comments submitted by the students after the 2011&#47;12 winter term as part of the post-Q13 survey were qualitatively analyzed for content based on Mayring <TextLink reference="17"></TextLink>. The main research questions were: How do students rate Q13&#63; How confident do students feel dealing with topics in palliative care&#63; The author (S.M.), a psychologist, and a doctoral candidate in medicine independently developed inductive categories that represent the core content of the statements. When assigning statements to the categories, consensus was found for statements that had been coded differently. This system of categorization was based on the free-text responses from the post-PY online survey and augmented to include categories appropriate to the research question about perceptions of palliative care during the PY and, in particular, the level of self-confidence when dealing with topics in palliative care. Following this, the categories for the first sample were coded by a third and independent research assistant (S.G., sociologist). Main categories were then developed from the inductively formed categories in the final step.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Material und Methodik">
      <MainHeadline>Material und Methodik</MainHeadline><SubHeadline2>Studiendesign</SubHeadline2><Pgraph>Deskriptive prospektive Kohortenstudie mit einem Pr&#228;-Post-Vergleich zu zwei Erhebungszeitpunkten (erstens unmittelbar nach Q13 und zweitens nach dem PJ) durch quantitative Erhebung mittels (elektronischem) Fragebogen und erg&#228;nzender qualitativer Inhaltsanalyse der Freitextkommentare. Untersucht wurden der Einfluss des Querschnittfachs Q13 sowie der des Praktischen Jahrs auf das Sicherheitsgef&#252;hl der Studierenden zu verschiedenen Dimensionen der Palliativmedizin (Anamneseerhebung, Inhalte &#38; Grundlagen, Psychologische Grundlagen, medikament&#246;se Schmerztherapie, Symptombehandlung, Kommunikation, Gespr&#228;che &#252;ber Therapiezielwechsel, Aufkl&#228;rung &#252;ber Unheilbarkeit, Begleitung eines Sterbenden, spirituelle Aspekte).</Pgraph><SubHeadline2>Setting und Stichprobe</SubHeadline2><Pgraph>In der Q13-Implementierungsphase der Universit&#228;t Mainz wurden alle an der Pflichtveranstaltung teilnehmenden Studierenden des 10. Semesters eingeschlossen (N&#61;176). Die Studierenden wurden gebeten, sowohl vor Beginn als auch nach Beendigung des Q13 einen Fragebogen auszuf&#252;llen <TextLink reference="11"></TextLink>. Im weiteren Verlauf der longitudinalen Untersuchung wurde diese Stichprobe im Anschluss an das PJ ein drittes Mal befragt. In der vorliegenden Publikation werden die Erhebungen nach Q13 und nach PJ verglichen.</Pgraph><SubHeadline2>Messinstrumente </SubHeadline2><Pgraph>Der Fragebogen vor und unmittelbar nach Q13 enth&#228;lt 17 Fragen zur Selbsteinsch&#228;tzung eigener F&#228;higkeiten und zur Bewertung des Q13 insgesamt, sowie die M&#246;glichkeit zur freien Kommentierung (siehe Anhang 1 <AttachmentLink attachmentNo="1"/>: Fragebogen Post Q13 <TextLink reference="15"></TextLink>). Nach dem PJ wurden die Studierenden zus&#228;tzlich gefragt, inwiefern sie Q13 bzw. das PJ in Bezug auf die jeweilige Kategorie als hilfreich empfanden (siehe Anhang 2 <AttachmentLink attachmentNo="2"/>: Fragebogen Post PJ). </Pgraph><SubHeadline2>Datenerhebung</SubHeadline2><Pgraph>Die Befragungen erfolgten w&#228;hrend der Eingangsvorlesung (Pr&#228;-Q13) und im Anschluss an die schriftliche Pr&#252;fung (Post-Q13). Die Post-PJ-Befragung fand nach Beendigung des PJ, aber vor dem Staatsexamen statt. Die Pr&#228;-Post-Frageb&#246;gen wurden w&#228;hrend des Q13 Unterrichts per Papier und Stift ausgef&#252;llt, die Post-PJ-Befragung erfolgte elektronisch. Zur Teilnahme an der Post-PJ-Befragung wurden die Studierenden genau 1 Jahr nach der Post-Q13-Umfrage &#252;ber die e-Learning Plattform ILIAS (Integriertes Lern-, Informations- und Arbeitskooperations-System) des Zentrums f&#252;r Datenverarbeitung der Universit&#228;t Mainz eingeladen. Der Link zur elektronischen Umfrage diente, neben der Verbindung zu den Pr&#228;-Post-Q13-Frageb&#246;gen, der expliziten Anonymisierung der Teilnehmenden. Zu allen drei Befragungszeitpunkten wurden die Studierenden um die Angabe eines individuell identischen standardisierten Codes gebeten.</Pgraph><Pgraph>Zur Reduktion eines m&#246;glichen Selektionsbias aus besonders interessierten und positiv eingestellten Studierenden, wurde explizit die besondere Bedeutung auch kritischer R&#252;ckmeldungen der Studierenden hervorgehoben. F&#252;r die Befragung Post-PJ wurden allen Teilnehmenden die Fragen aus der Abschlussklausur zu &#220;bungszwecken f&#252;r das Staatsexamen zur Verf&#252;gung gestellt, um m&#246;glichst viele Studierende in der Lernphase zu motivieren, nochmals an der Q13 Befragung teilzunehmen.</Pgraph><SubHeadline2>Statistische Auswertung der quantitativen Daten </SubHeadline2><Pgraph>Die Fragen nach dem Sicherheitsempfinden im Hinblick auf die verschiedenen in Q13 bearbeiteten Themen werden mittels Angabe der absoluten und relativen H&#228;ufigkeiten der einzelnen Antworten beschrieben. Aus diesen 10 Items werden Summenscores f&#252;r die somatische, psychologische, spirituelle und Wissensdimension gebildet sowie ein Gesamtscore. Hohe Werte entsprechen einem hohen Sicherheitsempfinden. Die Scores werden mittels Median und Interquartilabstand (IQR) beschrieben. Vergleiche zwischen den Befragungszeitpunkten erfolgen durch Angabe der H&#228;ufigkeit von Ver&#228;nderungen (Zunahmen, Abnahme, keine Ver&#228;nderung) sowie dem Vorzeichentest.</Pgraph><Pgraph>Die Angaben, wie hilfreich Q13 und das PJ im Hinblick auf die palliativmedizinischen Themen waren, werden ebenfalls mittels absoluter und relativer H&#228;ufigkeit der einzelnen Antworten beschrieben. Vergleiche zwischen Q13 und PJ erfolgen mittels Bowker-Test auf Symmetrie <TextLink reference="16"></TextLink>.</Pgraph><Pgraph>Um eventuelle Verzerrungen durch unterschiedliche Antwortraten zu den drei Erhebungszeitpunkten zu erkennen, werden die Teilnehmerantworten pro Befragung aufgeteilt. Die Teilnehmenden der Befragung nach Q13 (Post Q13) wurden in solche unterteilt, die auch an der Befragung nach dem PJ (Post PJ) teilnahmen und diejenigen, bei denen kein Fragebogen Post PJ zugeordnet werden konnte. Die Ergebnisse dieser Gruppen werden verglichen. Ebenso werden die Teilnehmer der Post-PJ-Befragung in zwei Gruppen aufgeteilt: mit zugeordnetem Fragebogen aus der Post-Q13-Befragung oder ohne. Die H&#228;ufigkeitsverteilungen werden gegen&#252;bergestellt und mittels Mann-Whitney-Test verglichen. Die statistische Auswertung erfolgte mittels SAS 9.4. </Pgraph><SubHeadline2>Inhaltsanalytische Auswertung der qualitativen Daten </SubHeadline2><Pgraph>Die nach dem Wintersemester 2011&#47;12 im Rahmen der Befragung Post-Q13 abgegebenen Freitextantworten der Studierenden wurden einer qualitativen Inhaltsanalyse nach Mayring unterzogen <TextLink reference="17"></TextLink>. Leitende Forschungsfragen waren: Wie bewerten die Studierenden Q13&#63; Wie sicher f&#252;hlen sich die Studierenden im Umgang mit palliativmedizinischen Themen&#63; Die Autorin (S.M.), Diplom-Psychologin, sowie eine Medizinpromovendin entwickelten unabh&#228;ngig voneinander induktiv Kategorien. Diese bildeten den zentralen Inhalt der Zitate ab. Bei der Zusammenf&#252;hrung der zugeordneten Kategorien wurde f&#252;r nicht &#252;bereinstimmend kodierte Zitate ein Konsens gefunden. Dieses Kategoriensystem wurde den Freitextantworten der online-Umfrage nach dem PJ zugrunde gelegt, und um Kategorien gem&#228;&#223; der Forschungsfrage nach der Wahrnehmung der Palliativmedizin im PJ und insbesondere der Selbstsicherheit im Umgang mit palliativmedizinischen Themen erg&#228;nzt. Anschlie&#223;end wurden die Kategorien der ersten Stichprobe von einer dritten unabh&#228;ngigen wissenschaftlichen Mitarbeiterin (S.G., Soziologin) kodiert. Im letzten Arbeitsschritt wurden aus den induktiv gebildeten Kategorien Hauptkategorien entwickelt. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Results">
      <MainHeadline>Results</MainHeadline><SubHeadline2>Sample</SubHeadline2><Pgraph>Of the 176 students in the 2011&#47;12 winter term, 165 (96&#37;) filled out the questionnaire after Q13 and 79 (45&#37;) after the PY. One dataset was excluded because the questions had been answered without actually completing the PY. Thirty-five questionnaires (20&#37;) from the post-PY survey could be matched with post-Q13 questionnaires. The students whose questionnaires from the post-PY survey were matched with questionnaires from the post-Q13 survey did not differ statistically from those students whose questionnaires could not be matched.</Pgraph><SubHeadline2>Comparison of self-confidence post-Q13 and Post-PY</SubHeadline2><Pgraph>There were statistically noticeable changes in perceptions of confidence regarding drug-based pain therapy (p&#61;0.0386) and explaining incurability to a patient (p&#61;0.0117) (see figure 2 <ImgLink imgNo="2" imgType="figure"/>).</Pgraph><Pgraph>The vast majority of the 35 students whose responses could be matched to both surveys felt themselves to be (rather) confident immediately after Q13 and the PY in taking medical histories (80&#37; post-Q13 and 91&#37; post-PY), content and basic knowledge of palliative care (91&#37; and 86&#37;), pain medication (83&#37; and 77&#37;), symptom control (86&#37; and 83&#37;) and communication (77&#37; for each respectively). In regard to psychological aspects, 74&#37; and 60&#37; felt themselves to be (rather) confident, 74&#37; and 60&#37; in terms of spiritual aspects, 54&#37; and 40&#37; about explaining the incurability of a disease to a patient, 63&#37; and 54&#37; about explaining changes in therapeutic aims to a patient, and 60&#37; and 54&#37; in accompanying the dying.</Pgraph><Pgraph>For the summative items on a ten-point Likert scale, 49&#37; of the students rated their knowledge of palliative care after the PY lower than directly after Q13; only 17&#37; rated it higher (p&#61;0.0347) (see figure 3 <ImgLink imgNo="3" imgType="figure"/>).</Pgraph><SubHeadline2>Subgroup analysis</SubHeadline2><Pgraph>There were hardly any differences regarding the learning content of the Q13 course in the statements on the post-Q13 survey by students whose questionnaires were matched to post-PY questionnaires and those for whom a match was not possible. Only for the topic of communication did students with paired post-PY questionnaires indicate a higher level of confidence (77&#37; vs. 61&#37;, p&#61;0.0327). Immediately after Q13, these students reported more confidence in interacting with dying patients (p&#61;0.0375) and claimed to be more interested in palliative care (p&#61;0.0067) than after the PY.</Pgraph><SubHeadline2>Comparison of the benefit of Q13 and the PY</SubHeadline2><Pgraph>The students found the Q13 course to be definitively more educational than the internship year not only in terms of theory, but also practice. This affected not just topics pertaining to communication, psychology, and existential&#47;spiritual aspects, which are actually only taught as part of palliative care, but also pain and symptom control (see table 1 <ImgLink imgNo="1" imgType="table"/>).</Pgraph><SubHeadline2>Qualitative data</SubHeadline2><Pgraph>From 61 free-text comments on the post-Q13 survey in the 2011&#47;12 winter term and 29 free-text comments after the PY, it was possible to categorize 122 and 78 statements, respectively.</Pgraph><Pgraph>In reference to the research question, the three categories, <Mark2>general evaluation of the course &#8211; preparation for practice, self-confidence, und palliative care in the PY</Mark2>, were identified during the qualitative content analysis as relevant main topics in the students&#8217; free-text responses. It was possible to deductively apply and confirm inductively developed categories for the free-text analysis post-Q13 to the post-PY free-text responses. Table 2 <ImgLink imgNo="2" imgType="table"/> presents an overview of the frequencies with which these main topics are mentioned by the students. The complete category system is presented in attachment 3 <AttachmentLink attachmentNo="3"/>.</Pgraph><SubHeadline2>Evaluation of the course &#8211; preparation for practice</SubHeadline2><Pgraph>The <Mark2>practical preparation</Mark2> was especially highlighted in the course evaluation: &#8220;an excellently organized practicum, very practice-based&#8221; &#91;post-Q13; student 10&#93;. &#8220;In particular, Q13 helped me very much in conversing with patients and their family members&#8221; &#91;post-PY; student 63&#93;. The students explicitly mentioned the implementation of Q13 as making sense and rated the course as important: &#8220;I am glad that this topic has now finally found a way into medical study and has caught public attention. Death is part of life&#33;&#8221; &#91;post-PY; student 31&#93;. The students&#8217; statements generally support the result that they found the teaching in the Q13 course to be definitively more helpful than the PY in all regards. &#8220;Q13 helped me a lot in gathering experience with diagnostic and therapeutic measures to care for the dying or the terminally ill. I especially found the spiritual aspects and communication skills to be significant aids when interacting with such patients. I still see a need for improvement in my own development when making decisions in individual cases about discontinuing, or not starting, curative measures and when communicating diagnostic results&#8221; &#91;post-PY; student 80&#93;.</Pgraph><SubHeadline2>Self-confidence</SubHeadline2><Pgraph>After Q13 one student described a persisting lack of confidence with the words: &#8220;One cannot feel certain prior to entering clinical practice and, above all, in interacting with the dying&#33;&#8221;. Several participants also reported a lingering lack of confidence that they felt was normal after the PY. This feeling of uncertainty after the PY when explaining the incurability of a disease to a patient is illustrated by this example statement: &#8220;The role playing &#91;in Q13&#93; was good. I think that the course provided good preparation for patient interaction in palliative care during the PY. However, despite this, I repeatedly felt uncertain during the PY when confronted with real patients in real palliative situations. I think this is normal&#8221; &#91;post-PY; student 72&#93;. Uncertainty was perceived as &#8220;normal&#8221; during the PY. The first practical experiences come during the PY for which teaching in general, regardless of instruction on palliative care, cannot prepare a person: &#8220;It is difficult to evaluate if one feels generally confident in the care of a dying or most severely ill patient if one has never ever done it before&#33; For this reason the teaching could have been as good as possible, which it was, and I still would have filled this questionnaire out the same as I have here. Ask me if I feel confident in treating a typical case of pneumonia: even here I must unfortunately respond in the negative because I may have an idea but I have not yet been able to put it into practice. Nevertheless, this subject has made a very important contribution to medical education...and should never be removed from the curriculum&#8221; &#91;post-PY; student 74&#93;.</Pgraph><SubHeadline2>Palliative care in the PY</SubHeadline2><Pgraph>Much of the feedback after the PY refers explicitly to palliative care during the PY. Several students stated that they had no points of contact with palliative medicine during the PY: &#8220;Unfortunately, I did not have much contact with palliative care so that I was not able to sufficiently apply the knowledge that I had learned&#8221; &#91;post-PY; student 15&#93;. Despite the recognizable need for palliative care, the needs of patients are not responded to due to a lack of time: &#8220;Unfortunately this topic did receive anywhere near enough attention during the PY and it disturbed me how little patients were responded to for reasons of time&#8221; &#91;post-PY; student 22&#93;. Of course, positive experiences were also recounted: &#8220;During my practical year I experienced several patients in palliative situations. Some were very well cared for and it was interesting to see how palliative measures can very strongly influence the quality of life in a positive way during the final days&#8221; &#91;post-PY; student 70&#93;.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Ergebnisse">
      <MainHeadline>Ergebnisse</MainHeadline><SubHeadline2>Stichprobe</SubHeadline2><Pgraph>Von 176 Studierenden des Wintersemesters 2011&#47;12 beantworteten 165 (96&#37;) den Fragebogen nach Q13 und 79 (45&#37;) den Fragebogen nach PJ. Ein Datensatz wurde ausgeschlossen, da die Fragen beantwortet wurden, ohne dass das PJ tats&#228;chlich absolviert wurde. 35 Frageb&#246;gen (20&#37;) aus der Befragung nach dem PJ konnten Frageb&#246;gen direkt nach Q13 zugordnet werden. In der Befragung nach dem PJ unterschieden sich die Studierenden, denen Frageb&#246;gen aus der Post-Q13-Befragung zuzuordnen waren, nicht statistisch auff&#228;llig von denen, bei denen dies nicht m&#246;glich war.</Pgraph><SubHeadline2>Vergleich des Sicherheitsgef&#252;hls nach Q13-Unterricht und nach dem Praktischem Jahr</SubHeadline2><Pgraph>Bei der medikament&#246;sen Schmerztherapie (p&#61;0.0386) und bei der Aufkl&#228;rung eines Patienten &#252;ber die Unheilbarkeit seiner Erkrankung (p&#61;0.0117) ergaben sich statistisch auff&#228;llige &#196;nderungen im Sicherheitsempfinden (siehe Abbildung 2 <ImgLink imgNo="2" imgType="figure"/>).</Pgraph><Pgraph>Die &#252;berwiegende Mehrheit der 35 Studierenden, deren Antworten aus beiden Befragungen zugeordnet werden konnten, f&#252;hlte sich sowohl direkt nach Q13 als auch nach dem PJ (eher) sicher in der Anamneseerhebung (80&#37; nach Q13 bzw. 91&#37; nach PJ), Inhalten und Grundlagen der Palliativmedizin (91&#37; bzw. 86&#37;), Medikament&#246;sen Schmerztherapie (83&#37; bzw. 77&#37;), Behandlung von Symptomen (86&#37; bzw. 83&#37;) und Kommunikation (je 77&#37;). Im Hinblick auf psychologische Aspekte f&#252;hlten sich 74&#37; bzw. 60&#37; (eher) sicher, bei spirituellen Aspekten 60&#37; bzw. 46&#37;, bei der Aufkl&#228;rung eines Patienten &#252;ber die Unheilbarkeit seiner Erkrankung 54&#37; bzw. 40&#37;, beim Gespr&#228;ch mit Patienten &#252;ber den Wechsel des Therapieziels 63&#37; bzw. 54&#37; und in der Begleitung Sterbender 60&#37; bzw. 54&#37;. </Pgraph><Pgraph>Bei den summarischen Fragen auf einer zehnstufigen Skala sch&#228;tzten 49&#37; der Studierenden ihr palliativmedizinisches Wissen nach dem PJ als geringer ein als direkt nach Q13, nur 17&#37; h&#246;her (p&#61;0.0347) (siehe Abbildung 3 <ImgLink imgNo="3" imgType="figure"/>). </Pgraph><SubHeadline2>Subgruppenanalyse </SubHeadline2><Pgraph>Zu den Lerninhalten des Q13-Kurses gab es kaum Unterschiede in den Aussagen der Befragung direkt nach Q13 zwischen den Studierenden, denen sich Frageb&#246;gen aus der Befragung nach dem PJ zuordnen lie&#223;en, und denen, bei denen dies nicht m&#246;glich war. Lediglich in der Kommunikation gaben die Studierenden mit zuordenbaren PJ-Frageb&#246;gen h&#246;heres Sicherheitsempfinden an (77&#37; vs 61&#37;, p&#61;0.0327). Direkt nach Q13 bezeichneten sich diese Studierenden sicherer im Umgang mit sterbenden Patienten (p&#61;0.0375) und interessierter an Palliativmedizin (p&#61;0.0067) als nach dem PJ. </Pgraph><SubHeadline2>Vergleich der N&#252;tzlichkeit von Unterricht und Praktischem Jahr</SubHeadline2><Pgraph>Nicht nur in theoretischen, sondern auch in praktischen Belangen empfanden die Studierenden den Q13-Unterricht als deutlich lehrreicher als das PJ. Dies betraf nicht nur kommunikative, psychologische und existentiell-spirituelle Themen, in deren Vermittlung die Palliativmedizin als Lehrfach eher alleinstehend ist, sondern auch Schmerz- und Symptomkontrolle (siehe Tabelle 1 <ImgLink imgNo="1" imgType="table"/>).</Pgraph><SubHeadline2>Qualitative Daten</SubHeadline2><Pgraph>Aus 61 Freitextantworten nach Q13 im Wintersemester 2011&#47;12 und 29 Freitextantworten nach Ende des PJ konnten 122 und 78 Zitate kategorisiert werden.</Pgraph><Pgraph>Mit Blick auf die Forschungsfrage wurden bei der qualitativen Inhaltsanalyse die drei Kategorien Allgemeine Bewertung des Kurses - Praxisvorbereitung, Sicherheitsgef&#252;hl und Palliativmedizin im PJ als relevante Schwerpunktthemen in den Freitexten der Studierenden identifiziert. Induktiv entwickelte Kategorien der Freitextanalyse nach Q13 konnten deduktiv auf die post-PJ-Freitextantworten angewendet und best&#228;tigt werden. Tabelle 2 <ImgLink imgNo="2" imgType="table"/> gibt einen &#220;berblick &#252;ber die H&#228;ufigkeiten dieser von den Studierenden selbst genannten Schwerpunkte. Das vollst&#228;ndige Kategoriensystem kann als Anhang 3 <AttachmentLink attachmentNo="3"/> abgerufen werden. </Pgraph><SubHeadline2>Bewertung des Kurses &#8211; Praxisvorbereitung</SubHeadline2><Pgraph>Die Praxisvorbereitung wurde bei der Bewertung des Kurses besonders hervorgehoben &#8222;Ein sehr toll organisiertes Praktikum, sehr praxisnah.&#8220; &#91;Post Q13; Stud. 10.&#93;. &#8222;Insbesondere im Gespr&#228;ch mit Patienten und Angeh&#246;rigen hat mir Q13 sehr geholfen.&#8220; &#91;Post PJ; Stud. 63&#93;. Die Studierenden benennen die Einf&#252;hrung von Q13 explizit als sinnvoll und beurteilen den Kurs als wichtig &#8222;freue mich dass diese Themen nun endlich den Weg ins Studium bzw. auch in die &#214;ffentlichkeit gefunden haben. Der Tod geh&#246;rt zum Leben&#33;&#8220; &#91;Post PJ; Stud. 31&#93;. Die Aussagen der Studierenden st&#252;tzen insgesamt den Befund, dass sie in allen Belangen den Unterricht des Q13 deutlich hilfreicher fanden als das PJ. &#8222;Q13 hat mir sehr geholfen, diagnostische und therapeutische Ma&#223;nahmen im Umgang mit sterbenden oder schwerstkranken Menschen zu erfahren. Insbesondere die Aspekte Spiritualit&#228;t und Kommunikation empfand ich als entscheidende Hilfsmittel im Umgang mit solchen Patienten. In der Einzelfallentscheidung &#252;ber den Abbruch oder das Nichtbeginnen kurativer Ma&#223;nahmen, sowie der Diagnosemitteilung sehe ich noch pers&#246;nlichen Entwicklungsbedarf.&#8220; &#91;Post PJ; Stud. 80&#93;.</Pgraph><SubHeadline2>Sicherheitsgef&#252;hl</SubHeadline2><Pgraph>Nach Q13 beschreibt eine Studentin ein bleibendes Unsicherheitsgef&#252;hl mit den Worten: &#8222;Man kann sich vor dem Eintritt ins praktische klinische Leben und v.a. im Umgang mit Sterbenden nicht sicher sein&#33;&#8220;. Einige Teilnehmer berichten zudem &#252;ber ein bleibendes, als normal empfundenes Unsicherheitsgef&#252;hl nach dem PJ. Das gewachsene Unsicherheitsgef&#252;hl nach dem PJ im Bereich der Aufkl&#228;rung &#252;ber die Unheilbarkeit einer Erkrankung findet sich beispielhaft in diesem Zitat wieder: &#8222;Die Rollenspiele &#91;in Q13&#93; waren gut. Ich denke, dass der Kurs den Kontakt mit der Palliativmedizin im PJ gut vorbereitet hat. Im PJ allerdings, mit realen Patienten in reellen palliativen Situationen, war ich trotzdem immer wieder unsicher. Das ist, denke ich, normal.&#8220; &#91;Post PJ; Stud. 72&#93;. Unsicherheit wurde im PJ als &#8222;normal&#8220; empfunden. Im PJ w&#252;rden erste praktische Erfahrungen gemacht, auf die Unterricht generell, also unabh&#228;ngig von palliativmedizinischen Inhalten, nicht vorbereiten k&#246;nne: &#8222;Es ist schwer zu beurteilen, ob man sich insgesamt in der Betreuung eines sterbenden oder schwerstkranken Patienten sicher f&#252;hlt, wenn man es noch nie&#33;&#33;&#33; gemacht hat. Daher h&#228;tte der Unterricht noch so gut sein k&#246;nnen, was er auch war&#33;, und ich h&#228;tte diese Umfrage dennoch niemals anders ausgef&#252;llt. Fragen Sie mich danach, ob ich mich sicher f&#252;hle eine typische Pneumonie zu therapieren: Auch diesbez&#252;glich muss ich leider &#34;nein&#34; antworten, da ich zwar eine Vorstellung habe, aber sie noch nie (&#8230;) anwenden konnte. Dennoch hat das Fach einen sehr wichtigen Beitrag zur &#228;rztlichen Ausbildung geliefert, (&#8230;) und darf nie wieder aus dem Ausbildungskatalog entfernt werden.&#8220; &#91;Post PJ; Stud. 74&#93;</Pgraph><SubHeadline2>Palliativmedizin im PJ</SubHeadline2><Pgraph>Viele R&#252;ckmeldungen nach dem PJ beziehen sich explizit auf Palliativmedizin im PJ. Einige Studierende gaben an, w&#228;hrend des PJ keine Ber&#252;hrungspunkte zur Palliativmedizin gehabt zu haben: &#8222;Leider hatte ich im PJ wenig Ber&#252;hrungspunkte mit der Palliativmedizin, so dass ich mein erlerntes Wissen nur unzureichend anwenden konnte.&#8220; &#91;Post PJ; Stud. 15&#93;. Trotz erkennbarem Bedarf an Palliativversorgung werde aufgrund von Zeitmangel nicht auf die Bed&#252;rfnisse der Patienten eingegangen &#8222;Im PJ kam dieses Thema leider viel zu kurz und es hat mich im Alltag erschreckt, wie wenig aufgrund von Zeitgr&#252;nden darauf im Sinne des Patienten eingegangen wurde.&#8220; &#91;Post PJ; Stud. 22&#93;, doch es wurden auch positive Erfahrungen kommuniziert: &#8222;W&#228;hrend meines PJs habe ich mehrere Patienten in palliativer Situation erlebt. Einige waren sehr gut betreut und es war interessant zu erleben, wie palliative Ma&#223;nahmen die Lebensqualit&#228;t der letzten Tage stark positiv beeinflussen konnten.&#8220; &#91;Post PJ; Stud. 70&#93;. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Discussion">
      <MainHeadline>Discussion</MainHeadline><Pgraph>The consolidation of learning content from the interdisciplinary subject palliative care during the practical year was investigated in a cohort of medical students. The comparison of the data collected after Q13 and after the PY showed that the majority of the students felt confident regarding palliative care. Exceptions to this are drug-based pain therapy and explaining the incurability of a disease. In terms of these two aspects students felt more uncertain after the PY than directly after Q13. This uncertainty was corroborated by an integrated qualitative analysis. Almost 50&#37; of the participants felt that they had less knowledge of palliative care after the PY compared to the survey conducted after Q13; only 17&#37; reported a subjective knowledge gain as a result of the PY. Overall, the Q13 course was evaluated by students as being more helpful for the development of their expertise and skills in palliative care than the PY.</Pgraph><Pgraph>This is the first study to longitudinally evaluate the compulsory palliative care education in Germany. There is an expectation in the international literature that as a result of including palliative care in the medical curriculum patient care will improve <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>. The consolidation of the knowledge taught using the teaching concept evaluated here has until now been little studied and focuses on structural features such as the teaching content <TextLink reference="19"></TextLink>, <TextLink reference="21"></TextLink>. Direct proof of an improvement in palliative care for patients according to established evaluation models would be desirable. With this investigation of the level of self-confidence felt by future physicians it has been possible to focus in more closely on pertinent topics in palliative medicine <TextLink reference="22"></TextLink>, <TextLink reference="23"></TextLink>.</Pgraph><Pgraph>The strengths of this study stand in opposition to its limitations in that while a nonvalidated questionnaire was used, it had, however, already been proven in other studies <TextLink reference="24"></TextLink>, <TextLink reference="25"></TextLink>, and the validity of the survey results presented in this paper are supported by a supplementary qualitative analysis.</Pgraph><Pgraph>All the same, course evaluations as a way to ensure the quality of university teaching are disputed due to various risks of distortion <TextLink reference="26"></TextLink>; because, for instance, the content analysis of the Q13 course in Mainz could have been positively influenced by the perceived dedication and motivation of the lecturers <TextLink reference="27"></TextLink>. The remark of one student concerning recall bias <TextLink reference="28"></TextLink> deserves attention given the survey time points in the longitudinal study: &#8220;I don&#8217;t know anymore how I responded a year ago&#8221; &#91;post-PY; student 73&#93;. Both of these biases skew in the same direction in reference to the difference in the evaluation of palliative care education assuming that the post-Q13 course evaluation is more positive than would be expected from the learning effect and that it involves a recall bias after the completion of the PY. Potential confounders and influencing variables of the effect include parameters of participant loyalty such as selection bias and non-response bias. Contradicting this is that the results of the paired questionnaires of students who participated post-Q13 (96&#37; participation rate) and post- PY (45&#37; participation rate) did not differ significantly from the students without matched questionnaires (participation traced only to one of the survey time points).</Pgraph><Pgraph>This study does not provide an answer to the question, whether or not the measured differences in perceived self-confidence are objectifiable or stem from mature perceptions of future physicians. However, the trend toward a decrease in perceived self-confidence and self-assessed knowledge across the entire cohort is striking.</Pgraph><SubHeadline2>Generalizability</SubHeadline2><Pgraph>The phenomenon of decreasing self-assessed confidence and knowledge has been described previously <TextLink reference="11"></TextLink>, <TextLink reference="29"></TextLink> and backs the assumption that the results for the participants reflect those for the total population. The higher level of self-confidence measured for communication skills in students with matched questionnaires suggests a bias more toward students with better social skills and the corresponding ability to engage in self-criticism. The Dunning-Kruger effect describes the tendency to overestimate one&#8217;s ability to apply new learning content, a tendency to which competent people are less susceptible <TextLink reference="27"></TextLink>. This could, however, also involve a bias toward students who are more open to palliative medicine and for that reason lean toward giving more positive evaluations <TextLink reference="30"></TextLink>, meaning that it is possibly overestimated how much more helpful Q13 is compared to the PY.</Pgraph><Pgraph>In an analogous survey of students in G&#246;ttingen and Mainz prior to and after the PY, which in this case had been completed before implementation of Q13, substantial deficits were seen in perceived self-confidence and medical expertise regarding typical palliative care issues that had not improved during the PY <TextLink reference="25"></TextLink>. In a US study, one year after taking the course only 45&#37; of the students reported having good communication skills when it came to death and dying and advance directives, including DNR <TextLink reference="31"></TextLink>. By contrast, the baseline level from which the cohort presented here started is higher, but even the generation of students with compulsory courses in palliative care had little opportunity during the PY to gather experience with treating palliative patients or to expand and deepen their knowledge.</Pgraph><Pgraph>What all of the studies share in common is a low participation rate &#8211; here 45&#37;; in Weber et al. 29&#37; <TextLink reference="22"></TextLink>; in Parikh et al. 66&#37; <TextLink reference="31"></TextLink> &#8211; which, at least in part, can be linked to the difficultly in reaching students after they have graduated. Approaches to improve the participation rate could use social media or require participation in course evaluations.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Diskussion">
      <MainHeadline>Diskussion</MainHeadline><Pgraph>In einer Kohorte Medizinstudierender wurde die Konsolidierung der Lehrinhalte des Querschnittbereiches Palliativmedizin im PJ gepr&#252;ft. Der Vergleich der Erhebungen nach Q13 und nach dem PJ zeigte, dass sich die Mehrheit der Studierenden sicher f&#252;hlt mit palliativmedizinischen Inhalten. Ausnahmen sind Schmerztherapie und die Aufkl&#228;rung &#252;ber eine terminale Erkrankung. Hier f&#252;hlen sich die Studierenden nach dem PJ unsicherer als direkt nach Q13. Diese Unsicherheit wurde durch eine integrierte qualitative Analyse best&#228;tigt. Fast 50&#37; der Teilnehmenden empfanden, dass sie nach dem PJ &#252;ber weniger palliativmedizinisches Wissen verf&#252;gten im Vergleich zur Befragung nach Q13, nur 17&#37; gaben einen subjektiven Wissenszuwachs durch das PJ an. Insgesamt wurde Q13 von den Studierenden als hilfreicher f&#252;r die Entwicklung ihrer palliativmedizinischen Kenntnisse und F&#228;higkeiten bewertet als das PJ.</Pgraph><Pgraph>Dies ist die erste Studie zur longitudinalen Evaluation der verpflichtenden palliativmedizinischen Lehre in Deutschland. In der internationalen Literatur findet sich die Erwartung, dass sich durch Palliativmedizin im Studium die Patientenversorgung verbessere <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>. Die Sicherung des vermittelten Wissens evaluierter Unterrichtskonzepte ist bislang wenig untersucht und orientiert sich bisher an strukturellen Merkmalen wie den Unterrichtsinhalten <TextLink reference="19"></TextLink>, <TextLink reference="21"></TextLink>. Nach etablierten Evaluationsmodellen w&#228;re ein unmittelbarer Nachweis der Verbesserung der Versorgungsqualit&#228;t von Palliativpatienten w&#252;nschenswert, mit der &#220;berpr&#252;fung des Sicherheitsempfindens angehender &#196;rztinnen und &#196;rzte ist eine Ann&#228;herung an palliativmedizinische Themen gelungen <TextLink reference="22"></TextLink>, <TextLink reference="23"></TextLink>.</Pgraph><Pgraph>Den St&#228;rken dieser Studie stehen Limitationen gegen&#252;ber. So wurde ein nicht validierter Fragebogen eingesetzt, der allerdings bereits in mehreren Studien erprobt wurde <TextLink reference="24"></TextLink>, <TextLink reference="25"></TextLink>, und die Validit&#228;t der Umfrageergebnisse wurde in der vorliegenden Studie durch eine erg&#228;nzende qualitative Analyse abgesichert.</Pgraph><Pgraph>Dennoch ist Lehrevaluation als qualit&#228;tssichernde Ma&#223;nahme universit&#228;rer Lehre wegen verschiedener Verzerrungsrisiken umstritten <TextLink reference="26"></TextLink>, weil z.B. die inhaltliche Bewertung des Mainzer Q13 von dem wahrgenommenen Dozentenengagement positiv beeinflusst worden sein k&#246;nnte <TextLink reference="27"></TextLink>. Mit Blick auf die Messzeitpunkte der longitudinalen Untersuchung verdient die Methodenkritik eines einzelnen Teilnehmers zur Erinnerungsverzerrung (recall bias) <TextLink reference="28"></TextLink> Aufmerksamkeit: &#8222;Ich wei&#223; nicht mehr wie ich vor einem Jahr (&#8230;) abgestimmt habe.&#8220; &#91;Post PJ; Stud. 73&#93;. In Bezug auf den Bewertungsunterschied des palliativmedizinischen Unterrichtes im Studium gingen aber unter der Annahme, dass die Lehrevaluation post Q13 positiver als vom Lerneffekt zu erwarten w&#228;re, und es sich post PJ um eine Erinnerungsverzerrung handelt, beide Verzerrungen in dieselbe Richtung.  Potentielle St&#246;rfaktoren und Einflussgr&#246;&#223;en des Effektes sind Parameter der Teilnahmetreue wie Selektionsbias und non-response-bias. Dem steht entgegen, dass sich die Ergebnisse der gepaarten Frageb&#246;gen von Studierenden, die sowohl nach Q13 (96&#37; Teilnahmequote) als auch nach dem PJ teilnahmen (45&#37; Teilnahmequote) nicht wesentlich von den ungepaarten (Teilnahme nur zu einem der Befragungszeitpunkte zuzuordnen) unterschieden. </Pgraph><Pgraph>Ob die gemessenen Unterschiede des Sicherheitsgef&#252;hls objektivierbar sind oder auf eine gereifte Wahrnehmung der angehenden &#196;rztinnen und &#196;rzte zur&#252;ckzuf&#252;hren sind, l&#228;sst die vorliegende Studie offen. Auffallend ist jedoch der Trend zu einer Abnahme von empfundener Sicherheit und der selbst eingesch&#228;tzten Kenntnisse in der gesamten Kohorte. </Pgraph><SubHeadline2>Generalisierbarkeit</SubHeadline2><Pgraph>Das Ph&#228;nomen abnehmender selbsteingesch&#228;tzter Sicherheit und Kenntnisse wurde bereits fr&#252;her beschrieben <TextLink reference="11"></TextLink>, <TextLink reference="29"></TextLink> und st&#252;tzt die Annahme, dass die Ergebnisse der Teilnehmenden die der Gesamtpopulation widerspiegeln. Die h&#246;here gemessene Sicherheit in kommunikativen F&#228;higkeiten bei Studierenden mit zuzuordnenden Frageb&#246;gen l&#228;sst auf eine Verzerrung eher zu Studierenden mit h&#246;herer Sozialkompetenz und entsprechender Selbstkritik schlie&#223;en. Der Dunning-Kruger-Effekt beschreibt die Neigung zu Selbst&#252;bersch&#228;tzung bei der Anwendung neuer Lerninhalte, f&#252;r die Leistungstr&#228;ger weniger empf&#228;nglich sind <TextLink reference="27"></TextLink>. Es kann sich aber auch um einen Bias zu Studierenden hin handeln, die der Palliativmedizin gegen&#252;ber offener sind und daher eher zu positiver Bewertung neigen <TextLink reference="30"></TextLink>, d. h. m&#246;glicherweise wird &#252;bersch&#228;tzt, um wieviel hilfreicher Q13 im Vergleich zum PJ ist. </Pgraph><Pgraph>In einer analogen Befragung von Studierenden aus G&#246;ttingen und Mainz vor und nach dem PJ, die vor Einf&#252;hrung des Q13 durchgef&#252;hrt worden war, zeigten sich erhebliche Defizite im Sicherheitsgef&#252;hl und Fachwissen zu typischen palliativmedizinischen Fragestellungen, die sich nicht w&#228;hrend des PJ verbesserten <TextLink reference="25"></TextLink>. Ein Jahr nach dem Unterricht gaben nur 45&#37; der Studierenden einer US-Studie an, &#252;ber gute kommunikative F&#228;higkeiten hinsichtlich Tod und Sterben bzw. vorausschauender Versorgungsplanung inkl. DNR zu verf&#252;gen <TextLink reference="31"></TextLink>. Demgegen&#252;ber ist das Ausgangsniveau in der hier vorgestellten Kohorte besser, aber auch die Generation der Studierenden mit verpflichtender Lehre in Palliativmedizin hatte im PJ wenig M&#246;glichkeiten, Erfahrungen in der Behandlung von Palliativpatienten zu sammeln oder ihr Wissen zu erweitern und zu vertiefen. </Pgraph><Pgraph>Allen Studien gemeinsam ist die niedrige Teilnahmequote, hier 45&#37;; bei Weber et al. 29&#37; <TextLink reference="22"></TextLink>; bei Parikh et al 66&#37; <TextLink reference="31"></TextLink>, die zumindest zum Teil mit der erschwerten Erreichbarkeit der Studierenden bei Abschluss des Studiums in Zusammenhang stehen k&#246;nnte. Ans&#228;tze zur Verbesserung der Teilnahmequote k&#246;nnten der Zugang &#252;ber Social-Media-Kan&#228;le sein oder die verpflichtende Teilnahme an Lehrevaluationen.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Conclusion">
      <MainHeadline>Conclusion</MainHeadline><Pgraph>Our data show that future physicians are interested in topics pertaining to the care of the terminally ill and dying; however, the learned content from the interdisciplinary course in palliative care is seldom deepened during the practical year.</Pgraph><SubHeadline2>Practical implications</SubHeadline2><Pgraph>The clear demand by students for more palliative care during the PY signalizes a need for action. Students value good teaching strategies and preparation for medical practice. This wish for more courses on holding conversations should certainly be satisfied in the practical preparation for the PY <TextLink reference="11"></TextLink>&#93;. It is precisely in providing care to terminally ill patients that uncertainties arise which cannot be sufficiently countered by merely strengthening theoretical knowledge in future physicians. Just as is the case in other disciplines, it is necessary to enable practical application of the knowledge learned, as intended during this phase of study. In view of demographic developments and medical advancements, it is therefore desirable that palliative care be given greater importance in the PY.</Pgraph><SubHeadline2>Research implications</SubHeadline2><Pgraph>The students in both groups (post-Q13&#47;post-PY) did not differ at the different time points in their self-assessed self-confidence, but they did differ in the topics mentioned in the free-text comments. This finding supports the use of a mixed-methods approach in the evaluation of university teaching.</Pgraph><Pgraph>The perception of one&#8217;s own insecurity can be a mirror for an important learning objective in palliative care: working in a self-reflective manner, the effect of which on patient-centered communication and physicians&#8217; satisfaction with their work could be a further topic for research. The change in self-confidence over the course of medical study and the possible difference in perception of uncertainty in newly qualified physicians following graduation from medical school in comparison to other disciplines are yet more research questions that arise from this study.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Schlussfolgerung">
      <MainHeadline>Schlussfolgerung</MainHeadline><Pgraph>Es konnte gezeigt werden, dass angehende &#196;rztinnen und &#196;rzte an Themen der Versorgung Schwerstkranker und Sterbender interessiert sind, jedoch die gelernten Inhalte aus dem Querschnittfach Palliativmedizin im praktischen Jahr selten vertieft wurden. </Pgraph><SubHeadline2>Praktische Implikationen</SubHeadline2><Pgraph>Die deutliche Forderung der Studierenden nach mehr Palliativmedizin im PJ signalisiert Handlungsbedarf. Sie wertsch&#228;tzen ein gutes didaktisches Konzept, sowie die Praxisvorbereitung. Dem Wunsch nach mehr Kursen zur Gespr&#228;chsf&#252;hrung sollte in der Vorbereitung auf das PJ unbedingt entsprochen werden <TextLink reference="11"></TextLink>. Gerade in der Betreuung von unheilbar erkrankten Patienten bestehen im Krankheitsverlauf Unsicherheiten, denen alleine durch St&#228;rkung der theoretischen Kenntnisse der angehenden &#196;rztinnen und &#196;rzte nur unzureichend begegnet werden kann. Wie f&#252;r andere Disziplinen auch, besteht die Notwendigkeit das erlernte Wissen praktisch anwenden zu k&#246;nnen, wie es f&#252;r diesen Studienabschnitt vorgesehen ist. Angesichts der demographischen Entwicklung und des medizinischen Fortschrittes ist es daher w&#252;nschenswert der Palliativmedizin im PJ mehr Bedeutung zu geben.</Pgraph><SubHeadline2>Wissenschaftliche Implikationen</SubHeadline2><Pgraph>Die Studierenden beider Gruppen (Post-Q13&#47;Post-PJ) unterscheiden sich zu den verschiedenen Zeitpunkten nicht in der Selbsteinsch&#228;tzung zum Sicherheitsgef&#252;hl, wohl aber in den Themen, die freitextlich berichtet werden. Dieser Befund spricht f&#252;r die Anwendung von mixed-methods in der Evaluation studentischer Lehre.</Pgraph><Pgraph>Die Wahrnehmung eigener Unsicherheit kann Spiegel eines wichtigen Lernzieles in der Palliativmedizin sein: das selbstreflektierte Arbeiten, dessen Effekt auf die patientenzentrierte Kommunikation und die &#228;rztliche Arbeitszufriedenheit zu erforschen w&#228;re. Die Ver&#228;nderung des Sicherheitsgef&#252;hls im Verlauf des Studiums und der m&#246;gliche Unterschied im Empfinden von Unsicherheit bei Berufsanf&#228;ngern nach dem Medizinstudium im Vergleich zu anderen Disziplinen sind weitere Forschungsfragen, die sich aus dieser Untersuchung ergeben.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Authors">
      <MainHeadline>Authors</MainHeadline><Pgraph>Dr. Gerlach and Dipl.-Psych. Mai contributed equally to this work.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Autoren">
      <MainHeadline>Autoren</MainHeadline><Pgraph>Dr. Gerlach und Dipl.-Psych. Mai teilen sich die Erstautorenschaft.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Acknowledgements">
      <MainHeadline>Acknowledgements</MainHeadline><Pgraph>We wish to thank all of the students for their valuable input on the Q13 evaluation and their participation in the survey, our colleagues who served as instructors, and Harald Affeldt (e-learning) from the Dept. of Research &#38; Education at the Medical School of the University of Mainz for the technical support to create the e-survey and Clara Ma&#223;en and Swantje Goebel for their support in the qualitative analysis.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Danksagung">
      <MainHeadline>Danksagung</MainHeadline><Pgraph>Wir bedanken uns bei allen Studierenden f&#252;r den wertvollen Input zur Evaluation von Q13, den sie durch ihre Teilnahme an der Befragung geleistet haben, bei unseren Kollegen im Dozententeam, bei Herrn Harald Affeldt (e-Learning) vom Ressort Forschung &#38; Lehre der Universit&#228;tsmedizin Mainz f&#252;r die technische Unterst&#252;tzung bei der Erstellung der e-Befragung und Clara Ma&#223;en sowie Swantje Goebel f&#252;r Unterst&#252;tzung bei der qualitativen Analyse.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>CG received project funding for innovative teaching from the Gutenberg-Lehrkolleg (Gutenberg Teaching Council) at the Johannes Gutenberg University Mainz.</Pgraph><Pgraph>The other authors declare that they have no competing interests.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>CG erh&#228;lt eine Projektf&#246;rderung f&#252;r Innovative Lehre des Gutenberg-Lehrkollegs (GLK) der Johannes Gutenberg-Universit&#228;t Mainz.</Pgraph><Pgraph>Die anderen Autoren erkl&#228;ren, dass keine Interessenskonflikte bestehen. </Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>World Health Organization</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2014</RefYear>
        <RefBookTitle>Strengthening of palliative care as a component of comprehensive care throughout the life course</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>World Health Assembly. Strengthening of palliative care as a component of comprehensive care throughout the life course. Geneva: World Health Organization; 2014. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;apps.who.int&#47;iris&#47;handle&#47;10665&#47;162863</RefTotal>
        <RefLink>https:&#47;&#47;apps.who.int&#47;iris&#47;handle&#47;10665&#47;162863</RefLink>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Deutscher Bundestag</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2009</RefYear>
        <RefBookTitle>&#196;nderung der AeApproO mit Einfuehrung des QB 13 &#34;Palliativmedizin&#34; als Pr&#252;fungsfach. Drucksache 573&#47;2&#47;09</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Deutscher Bundestag. &#196;nderung der AeApproO mit Einfuehrung des QB 13 &#34;Palliativmedizin&#34; als Pr&#252;fungsfach. Drucksache 573&#47;2&#47;09. Berlin: Bundesrat; 2009. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.umwelt-online.de&#47;PDFBR&#47;2009&#47;0573&#95;2D2&#95;2D09.pdf</RefTotal>
        <RefLink>http:&#47;&#47;www.umwelt-online.de&#47;PDFBR&#47;2009&#47;0573&#95;2D2&#95;2D09.pdf</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Elsner F</RefAuthor>
        <RefTitle>Das neue DGP-Curriculum f&#252;r Studierende</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Z Palliativmed</RefJournal>
        <RefPage>182</RefPage>
        <RefTotal>Elsner F. Das neue DGP-Curriculum f&#252;r Studierende. Z Palliativmed. 2009;10(04):182. DOI: 10.1055&#47;s-0029-1244880</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1055&#47;s-0029-1244880</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>Statistisches Bundesamt</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>Gesundheitsberichterstattung der L&#228;nder</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Statistisches Bundesamt. Gesundheitsberichterstattung der L&#228;nder. Wiesbaden: Statistisches Bundesamt; 2015. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.gbe-bund.de&#47;gbe10&#47;ergebnisse.prc&#95;tab&#63;fid&#61;22301&#38;suchstring&#61;&#38;query&#95;id&#61;&#38;sprache&#61;D&#38;fund&#95;typ&#61;LIT&#38;methode&#61;&#38;vt&#61;&#38;verwandte&#61;1&#38;page&#95;ret&#61;0&#38;seite&#61;1&#38;p&#95;lfd&#95;nr&#61;4&#38;p&#95;news&#61;&#38;p&#95;sprachkz&#61;D&#38;p&#95;uid&#61;gast&#38;p&#95;aid&#61;60765787&#38;hlp&#95;nr&#61;2&#38;p&#95;janein&#61;J</RefTotal>
        <RefLink>http:&#47;&#47;www.gbe-bund.de&#47;gbe10&#47;ergebnisse.prc&#95;tab&#63;fid&#61;22301&#38;suchstring&#61;&#38;query&#95;id&#61;&#38;sprache&#61;D&#38;fund&#95;typ&#61;LIT&#38;methode&#61;&#38;vt&#61;&#38;verwandte&#61;1&#38;page&#95;ret&#61;0&#38;seite&#61;1&#38;p&#95;lfd&#95;nr&#61;4&#38;p&#95;news&#61;&#38;p&#95;sprachkz&#61;D&#38;p&#95;uid&#61;gast&#38;p&#95;aid&#61;60765787&#38;hlp&#95;nr&#61;2&#38;p&#95;janein&#61;J</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Dickinson GE</RefAuthor>
        <RefTitle>A 40-Year History of End-of-Life Offerings in US Medical Schools: 1975-2015</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>Am J Hosp Palliat Care</RefJournal>
        <RefPage>559-565</RefPage>
        <RefTotal>Dickinson GE. A 40-Year History of End-of-Life Offerings in US Medical Schools: 1975-2015. Am J Hosp Palliat Care. 2017;34(6):559-565. DOI: 10.1177&#47;1049909116638071</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1177&#47;1049909116638071</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>Schiessl C</RefAuthor>
        <RefAuthor>Walshe M</RefAuthor>
        <RefAuthor>Wildfeuer S</RefAuthor>
        <RefAuthor>Larkin P</RefAuthor>
        <RefAuthor>Voltz R</RefAuthor>
        <RefAuthor>Juenger J</RefAuthor>
        <RefTitle>Undergraduate curricula in palliative medicine: a systematic analysis based on the palliative education assessment tool</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>J Palliat Med</RefJournal>
        <RefPage>20-30</RefPage>
        <RefTotal>Schiessl C, Walshe M, Wildfeuer S, Larkin P, Voltz R, Juenger J. Undergraduate curricula in palliative medicine: a systematic analysis based on the palliative education assessment tool. J Palliat Med. 2013;16(1):20-30. DOI: 10.1089&#47;jpm.2012.0281</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1089&#47;jpm.2012.0281</RefLink>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Ilse B</RefAuthor>
        <RefAuthor>Hildebrandt J</RefAuthor>
        <RefAuthor>Posselt J</RefAuthor>
        <RefAuthor>Laske A</RefAuthor>
        <RefAuthor>Dietz I</RefAuthor>
        <RefAuthor>Borasio GD</RefAuthor>
        <RefAuthor>Kopf A</RefAuthor>
        <RefAuthor>Nauck F</RefAuthor>
        <RefAuthor>Elsner F</RefAuthor>
        <RefAuthor>Wedding U</RefAuthor>
        <RefAuthor>Alt-Epping B</RefAuthor>
        <RefTitle>Palliative Care teaching in Germany - concepts and future developments</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc47</RefPage>
        <RefTotal>Ilse B, Hildebrandt J, Posselt J, Laske A, Dietz I, Borasio GD, Kopf A, Nauck F, Elsner F, Wedding U, Alt-Epping B. Palliative Care teaching in Germany - concepts and future developments. GMS Z Med Ausbild. 2012;29(3):Doc47. DOI: 10.3205&#47;zma00817</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma00817</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Centeno C</RefAuthor>
        <RefAuthor>Rodr&#237;guez-N&#250;&#241;ez A</RefAuthor>
        <RefTitle>The contribution of undergraduate palliative care education: does it influence the clinical patient&#39;s care&#63;</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Curr Opin Support Palliat Care</RefJournal>
        <RefPage>375-391</RefPage>
        <RefTotal>Centeno C, Rodr&#237;guez-N&#250;&#241;ez A. The contribution of undergraduate palliative care education: does it influence the clinical patient&#39;s care&#63; Curr Opin Support Palliat Care. 2015;9(4):375-391. DOI: 10.1097&#47;SPC.0000000000000169</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1097&#47;SPC.0000000000000169</RefLink>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>DeCoste-Lopez J</RefAuthor>
        <RefAuthor>Madhok J</RefAuthor>
        <RefAuthor>Harman S</RefAuthor>
        <RefTitle>Curricular innovations for medical students in palliative and end-of-life care: a systematic review and assessment of study quality</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>J Palliat Med</RefJournal>
        <RefPage>338-349</RefPage>
        <RefTotal>DeCoste-Lopez J, Madhok J, Harman S. Curricular innovations for medical students in palliative and end-of-life care: a systematic review and assessment of study quality. J Palliat Med. 2015;18(4):338-349. DOI: 10.1089&#47;jpm.2014.0270</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1089&#47;jpm.2014.0270</RefLink>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Ilse B</RefAuthor>
        <RefAuthor>Alt-Epping B</RefAuthor>
        <RefAuthor>Kiesewetter I</RefAuthor>
        <RefAuthor>Elsner F</RefAuthor>
        <RefAuthor>Hildebrandt J</RefAuthor>
        <RefAuthor>Laske A</RefAuthor>
        <RefAuthor>Scherg A</RefAuthor>
        <RefAuthor>Schiessl C</RefAuthor>
        <RefAuthor> Working Group on Medical Education of the German Society of Palliative Medicine (AG Bildung der DGP)</RefAuthor>
        <RefTitle>Undergraduate education in palliative medicine in Germany: a longitudinal perspective on curricular and infrastructural development</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>151</RefPage>
        <RefTotal>Ilse B, Alt-Epping B, Kiesewetter I, Elsner F, Hildebrandt J, Laske A, Scherg A, Schiessl C; Working Group on Medical Education of the German Society of Palliative Medicine (AG Bildung der DGP). Undergraduate education in palliative medicine in Germany: a longitudinal perspective on curricular and infrastructural development. BMC Med Educ. 2015;15:151. DOI: 10.1186&#47;s12909-015-0439-6</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;s12909-015-0439-6</RefLink>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Gerlach C</RefAuthor>
        <RefAuthor>Mai S</RefAuthor>
        <RefAuthor>Schmidtmann I</RefAuthor>
        <RefAuthor>Massen C</RefAuthor>
        <RefAuthor>Reinholz U</RefAuthor>
        <RefAuthor>Laufenberg-Feldmann R</RefAuthor>
        <RefAuthor>Weber M</RefAuthor>
        <RefTitle>Does interdisciplinary and multiprofessional undergraduate education increase students&#39; self-confidence and knowledge toward palliative care&#63; Evaluation of an undergraduate curriculum design for palliative care at a German academic hospital</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>J Palliat Med</RefJournal>
        <RefPage>513-519</RefPage>
        <RefTotal>Gerlach C, Mai S, Schmidtmann I, Massen C, Reinholz U, Laufenberg-Feldmann R, Weber M. Does interdisciplinary and multiprofessional undergraduate education increase students&#39; self-confidence and knowledge toward palliative care&#63; Evaluation of an undergraduate curriculum design for palliative care at a German academic hospital. J Palliat Med. 2015;18(6):513-519. DOI: 10.1089&#47;jpm.2014.0337</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1089&#47;jpm.2014.0337</RefLink>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>Schulz C</RefAuthor>
        <RefAuthor>Moller MF</RefAuthor>
        <RefAuthor>Seidler D</RefAuthor>
        <RefAuthor>Schnell MW</RefAuthor>
        <RefTitle>Evaluating an evidence-based curriculum in undergraduate palliative care education: piloting a phase II exploratory trial for a complex intervention</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>1</RefPage>
        <RefTotal>Schulz C, Moller MF, Seidler D, Schnell MW. Evaluating an evidence-based curriculum in undergraduate palliative care education: piloting a phase II exploratory trial for a complex intervention. BMC Med Educ. 2013;13:1. DOI: 10.1186&#47;1472-6920-13-1</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;1472-6920-13-1</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Schulz C</RefAuthor>
        <RefAuthor>Wenzel-Meyburg U</RefAuthor>
        <RefAuthor>Karger A</RefAuthor>
        <RefAuthor>Scherg A</RefAuthor>
        <RefAuthor>In der Schmitten J</RefAuthor>
        <RefAuthor>Trapp T</RefAuthor>
        <RefAuthor>Paling A</RefAuthor>
        <RefAuthor>Bakus S</RefAuthor>
        <RefAuthor>Schatte G</RefAuthor>
        <RefAuthor>Rudolf E</RefAuthor>
        <RefAuthor>Decking U</RefAuthor>
        <RefAuthor>Ritz-Timme S</RefAuthor>
        <RefAuthor>Gr&#252;newald M</RefAuthor>
        <RefAuthor>Schmitz A</RefAuthor>
        <RefTitle>Implementation of palliative care as a mandatory cross-disciplinary subject (QB13) at the Medical Faculty of the Heinrich-Heine-University D&#252;sseldorf, Germany</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>GMS Z Med Ausbild</RefJournal>
        <RefPage>Doc6</RefPage>
        <RefTotal>Schulz C, Wenzel-Meyburg U, Karger A, Scherg A, In der Schmitten J, Trapp T, Paling A, Bakus S, Schatte G, Rudolf E, Decking U, Ritz-Timme S, Gr&#252;newald M, Schmitz A. Implementation of palliative care as a mandatory cross-disciplinary subject (QB13) at the Medical Faculty of the Heinrich-Heine-University D&#252;sseldorf, Germany. GMS Z Med Ausbild. 2015;32(1):Doc6. DOI: 10.3205&#47;zma000948</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3205&#47;zma000948</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Dahmer J</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2007</RefYear>
        <RefBookTitle>Didaktik der Medizin: professonielles Lehren f&#246;rdert effektives Lernen</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Dahmer J. Didaktik der Medizin: professonielles Lehren f&#246;rdert effektives Lernen. Stuttgart: Schattauer GmbH; 2007.</RefTotal>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>Weber M</RefAuthor>
        <RefAuthor>Schmiedel S</RefAuthor>
        <RefAuthor>Nauck F</RefAuthor>
        <RefAuthor>Alt-Epping B</RefAuthor>
        <RefTitle>Knowledge and attitude of final - year medical students in Germany towards palliative care - an interinstitutional questionnaire-based study</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>BMC Palliat Care</RefJournal>
        <RefPage>19</RefPage>
        <RefTotal>Weber M, Schmiedel S, Nauck F, Alt-Epping B. Knowledge and attitude of final - year medical students in Germany towards palliative care - an interinstitutional questionnaire-based study. BMC Palliat Care. 2011;10:19. DOI: 10.1186&#47;1472-684X-10-19</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;1472-684X-10-19</RefLink>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>Bowker AH</RefAuthor>
        <RefTitle>A test for symmetry in contingency tables</RefTitle>
        <RefYear>1948</RefYear>
        <RefJournal>J Am Stat Assoc</RefJournal>
        <RefPage>572-574</RefPage>
        <RefTotal>Bowker AH. A test for symmetry in contingency tables. J Am Stat Assoc. 1948;43(244):572-574. DOI: 10.1080&#47;01621459.1948.10483284</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1080&#47;01621459.1948.10483284</RefLink>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>Mayring P</RefAuthor>
        <RefTitle>Qualitative Inhaltsanalyse</RefTitle>
        <RefYear>2010</RefYear>
        <RefBookTitle>Handbuch Qualitative Forschung in der Psychologie</RefBookTitle>
        <RefPage>601-613</RefPage>
        <RefTotal>Mayring P. Qualitative Inhaltsanalyse. In: Mey G, Mruck K, editors. Handbuch Qualitative Forschung in der Psychologie. Wiesbaden: VS Verlag f&#252;r Sozialwissenschaften; 2010. p.601-613. DOI: 10.1007&#47;978-3-531-92052-8&#95;42</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;978-3-531-92052-8&#95;42</RefLink>
      </Reference>
      <Reference refNo="18">
        <RefAuthor>Linklater GT</RefAuthor>
        <RefAuthor>Bowden J</RefAuthor>
        <RefAuthor>Pope L</RefAuthor>
        <RefAuthor>McFatter F</RefAuthor>
        <RefAuthor>Hutchison SM</RefAuthor>
        <RefAuthor>Carragher PJ</RefAuthor>
        <RefAuthor>Walley J</RefAuthor>
        <RefAuthor>Fallon M</RefAuthor>
        <RefAuthor>Murray SA</RefAuthor>
        <RefAuthor> Scottish Palliative Medicine Curriculum Development Group</RefAuthor>
        <RefTitle>Developing learning outcomes for medical students and foundation doctors in palliative care: a national consensus-seeking initiative in Scotland</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>441-446</RefPage>
        <RefTotal>Linklater GT, Bowden J, Pope L, McFatter F, Hutchison SM, Carragher PJ, Walley J, Fallon M, Murray SA; Scottish Palliative Medicine Curriculum Development Group. Developing learning outcomes for medical students and foundation doctors in palliative care: a national consensus-seeking initiative in Scotland. Med Teach. 2014;36(5):441-446. DOI: 10.3109&#47;0142159X.2014.889289</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3109&#47;0142159X.2014.889289</RefLink>
      </Reference>
      <Reference refNo="19">
        <RefAuthor>Walker S</RefAuthor>
        <RefAuthor>Gibbins J</RefAuthor>
        <RefAuthor>Barclay S</RefAuthor>
        <RefAuthor>Adams A</RefAuthor>
        <RefAuthor>Paes P</RefAuthor>
        <RefAuthor>Chandratilake M</RefAuthor>
        <RefAuthor>Gishen F</RefAuthor>
        <RefAuthor>Lodge P</RefAuthor>
        <RefAuthor>Wee B</RefAuthor>
        <RefTitle>Progress and divergence in palliative care education for medical students: A comparative survey of UK course structure, content, delivery, contact with patients and assessment of learning</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Palliat Med</RefJournal>
        <RefPage>834-842</RefPage>
        <RefTotal>Walker S, Gibbins J, Barclay S, Adams A, Paes P, Chandratilake M, Gishen F, Lodge P, Wee B. Progress and divergence in palliative care education for medical students: A comparative survey of UK course structure, content, delivery, contact with patients and assessment of learning. Palliat Med. 2016;30(9):834-842. DOI: 10.1177&#47;0269216315627125</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1177&#47;0269216315627125</RefLink>
      </Reference>
      <Reference refNo="20">
        <RefAuthor>Gamondi C</RefAuthor>
        <RefAuthor>Larkin P</RefAuthor>
        <RefAuthor>Payne S</RefAuthor>
        <RefTitle>Core competencies in palliative care: An EAPC white paper on palliative care education - Part 1</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>Eur J Palliat Care</RefJournal>
        <RefPage>86-91</RefPage>
        <RefTotal>Gamondi C, Larkin P, Payne S. Core competencies in palliative care: An EAPC white paper on palliative care education - Part 1. Eur J Palliat Care. 2013;20:86-91.</RefTotal>
      </Reference>
      <Reference refNo="21">
        <RefAuthor>Dickinson GE</RefAuthor>
        <RefTitle>Thirty-five years of end-of-life issues in US medical schools</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Am J Hosp Palliat Care</RefJournal>
        <RefPage>412-417</RefPage>
        <RefTotal>Dickinson GE. Thirty-five years of end-of-life issues in US medical schools. Am J Hosp Palliat Care. 2011;28(6):412-417. DOI: 10.1177&#47;1049909110397608</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1177&#47;1049909110397608</RefLink>
      </Reference>
      <Reference refNo="22">
        <RefAuthor>Kirkpatrick DL</RefAuthor>
        <RefTitle>Techniques for Evaluation Training Programs</RefTitle>
        <RefYear>1959</RefYear>
        <RefJournal>J Am Soc Dir</RefJournal>
        <RefPage>21-26</RefPage>
        <RefTotal>Kirkpatrick DL. Techniques for Evaluation Training Programs. J Am Soc Dir. 1959;13:21-26.</RefTotal>
      </Reference>
      <Reference refNo="23">
        <RefAuthor>Phillips JJ</RefAuthor>
        <RefAuthor>Schirmer FC</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2008</RefYear>
        <RefBookTitle>Return on Investment in der Personalentwicklung : Der 5-Stufen-Evaluationsprozess</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Phillips JJ, Schirmer FC. Return on Investment in der Personalentwicklung : Der 5-Stufen-Evaluationsprozess. 2nd ed. Berlin, Heidelberg: Springer; 2008.</RefTotal>
      </Reference>
      <Reference refNo="24">
        <RefAuthor>Ostgathe C</RefAuthor>
        <RefAuthor>Voltz R</RefAuthor>
        <RefAuthor>Nauck F</RefAuthor>
        <RefAuthor>Klaschik E</RefAuthor>
        <RefTitle>Undergraduate training in palliative medicine in Germany: what effect does a curriculum without compulsory palliative care have on medical students&#39; knowledge, skills and attitudes&#63;</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>Palliat Med</RefJournal>
        <RefPage>155-1556</RefPage>
        <RefTotal>Ostgathe C, Voltz R, Nauck F, Klaschik E. Undergraduate training in palliative medicine in Germany: what effect does a curriculum without compulsory palliative care have on medical students&#39; knowledge, skills and attitudes&#63; Palliat Med. 2007;21(2):155-1556. DOI: 10.1177&#47;0269216306075543</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1177&#47;0269216306075543</RefLink>
      </Reference>
      <Reference refNo="25">
        <RefAuthor>Weber M</RefAuthor>
        <RefAuthor>Schmiedel S</RefAuthor>
        <RefAuthor>Nauck F</RefAuthor>
        <RefAuthor>Alt-Epping B</RefAuthor>
        <RefTitle>Wissen und Selbsteinsch&#228;tzung in Bezug auf palliativmedizinische Fragestellungen bei Medizinstudierenden</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Schmerz</RefJournal>
        <RefPage>279-285</RefPage>
        <RefTotal>Weber M, Schmiedel S, Nauck F, Alt-Epping B. Wissen und Selbsteinsch&#228;tzung in Bezug auf palliativmedizinische Fragestellungen bei Medizinstudierenden. Schmerz. 2016;30(3):279-285. DOI: 10.1007&#47;s00482-015-0055-8</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;s00482-015-0055-8</RefLink>
      </Reference>
      <Reference refNo="26">
        <RefAuthor>Ziegler M</RefAuthor>
        <RefAuthor>Weis S</RefAuthor>
        <RefTitle>Lehrevaluation als Mittel zur Erfassung und Verbesserung universit&#228;rer Lehre&#63; Methodische, diagnostische und inhaltliche Aspekte</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Diagnostica</RefJournal>
        <RefPage>113-115</RefPage>
        <RefTotal>Ziegler M, Weis S. Lehrevaluation als Mittel zur Erfassung und Verbesserung universit&#228;rer Lehre&#63; Methodische, diagnostische und inhaltliche Aspekte. Diagnostica. 2015;61(3):113-115. DOI: 10.1026&#47;0012-1924&#47;a000145</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1026&#47;0012-1924&#47;a000145</RefLink>
      </Reference>
      <Reference refNo="28">
        <RefAuthor>Prince M</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2012</RefYear>
        <RefBookTitle>Core Psychiatry</RefBookTitle>
        <RefPage>115-129</RefPage>
        <RefTotal>Prince M. Core Psychiatry. 3rd Edition. London: Elsevier Ltd.; 2012. p.115-129. DOI: 10.1016&#47;B978-0-7020-3397-1.00009-4</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;B978-0-7020-3397-1.00009-4</RefLink>
      </Reference>
      <Reference refNo="29">
        <RefAuthor>Morrison LJ</RefAuthor>
        <RefAuthor>Thompson BM</RefAuthor>
        <RefAuthor>Gill AC</RefAuthor>
        <RefTitle>A required third-year medical student palliative care curriculum impacts knowledge and attitudes</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>J Palliat Med</RefJournal>
        <RefPage>784-789</RefPage>
        <RefTotal>Morrison LJ, Thompson BM, Gill AC. A required third-year medical student palliative care curriculum impacts knowledge and attitudes. J Palliat Med. 2012;15(7):784-789. DOI: 10.1089&#47;jpm.2011.0482</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1089&#47;jpm.2011.0482</RefLink>
      </Reference>
      <Reference refNo="27">
        <RefAuthor>Schl&#246;sser T</RefAuthor>
        <RefAuthor>Dunning D</RefAuthor>
        <RefAuthor>Johnson KL</RefAuthor>
        <RefAuthor>Kruger J</RefAuthor>
        <RefTitle>How unaware are the unskilled&#63; Empirical tests of the &#34;signal extraction&#34; counterexplanation for the Dunning-Kruger effect in self-evaluation of performance</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>J Econ Psychol</RefJournal>
        <RefPage>85-100</RefPage>
        <RefTotal>Schl&#246;sser T, Dunning D, Johnson KL, Kruger J. How unaware are the unskilled&#63; Empirical tests of the &#34;signal extraction&#34; counterexplanation for the Dunning-Kruger effect in self-evaluation of performance. J Econ Psychol. 2013;39:85-100. DOI: 10.1016&#47;j.joep.2013.07.004</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.joep.2013.07.004</RefLink>
      </Reference>
      <Reference refNo="30">
        <RefAuthor>Fondel E</RefAuthor>
        <RefAuthor>Lischetzke T</RefAuthor>
        <RefAuthor>Weis S</RefAuthor>
        <RefAuthor>Gollwitzer M</RefAuthor>
        <RefTitle>Zur Validit&#228;t von studentischen Lehrveranstaltungsevaluationen</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Diagnostica</RefJournal>
        <RefPage>124-135</RefPage>
        <RefTotal>Fondel E, Lischetzke T, Weis S, Gollwitzer M. Zur Validit&#228;t von studentischen Lehrveranstaltungsevaluationen. Diagnostica. 2015;61(3):124-135. DOI: 10.1026&#47;0012-1924&#47;a000141</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1026&#47;0012-1924&#47;a000141</RefLink>
      </Reference>
      <Reference refNo="31">
        <RefAuthor>Parikh PP</RefAuthor>
        <RefAuthor>White MT</RefAuthor>
        <RefAuthor>Buckingham L</RefAuthor>
        <RefAuthor>Tchorz KM</RefAuthor>
        <RefTitle>Evaluation of palliative care training and skills retention by medical students</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>J Surg Res</RefJournal>
        <RefPage>172-177</RefPage>
        <RefTotal>Parikh PP, White MT, Buckingham L, Tchorz KM. Evaluation of palliative care training and skills retention by medical students. J Surg Res. 2017;211:172-177. DOI: 10.1016&#47;j.jss.2016.11.006</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.jss.2016.11.006</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 1: Student survey after the PY (N&#61;78) on the benefit of the Q13 course and the PY in regard to palliative care topics; p&#60;0.001 </Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 1: Befragung der Studierenden nach dem PJ (N&#61;78) zur N&#252;tzlichkeit von Q13 Unterricht und PJ in Bezug auf palliativmedizinische Handlungsinhalte; p&#60;0.001</Mark1></Pgraph></Caption>
        </Table>
        <Table format="png">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 2: Categories for the free-text comments of the participating students (stud.) post-Q13 winter term 2011&#47;12 and post-PY (N&#61;90)</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 2: Kategorien der Freitextantworten der teilnehmenden Studierenden (Stud.) Post Q13 WS 11-12 und Post PJ (N&#61;90)</Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>2</NoOfTables>
      </Tables>
      <Figures>
        <Figure format="png" height="466" width="737">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 1: The multiprofessional course design for Q13 at the Medical School of the University of Mainz</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 1: Das multiprofessionelle Kurskonzept des Q13 der Universit&#228;tsmedizin Mainz</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="490" width="858">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 2: Changes in self-confidence when dealing with palliative care topics after the PY compared to after Q13.</Mark1><LineBreak></LineBreak><Mark1>p-values from the sign test; horizontal bars are shortened in the case of missing values.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 2: Ver&#228;nderung im Sicherheitsgef&#252;hl mit palliativmedizinischen Themen nach dem PJ im Vergleich zu nach Q13.</Mark1><LineBreak></LineBreak><Mark1>p-Werte aus dem Vorzeichentest; gestapelte Balken sind verk&#252;rzt bei fehlenden Werten. </Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="245" width="858">
          <MediaNo>3</MediaNo>
          <MediaID language="en">3en</MediaID>
          <MediaID language="de">3de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 3: Changes in the summative data on one&#8217;s own knowledge of and interest in palliative care, self-confidence in interacting with the dying, and the assessment if working on a palliative care ward could be satisfying medically, after the PY compared to after Q13.</Mark1><LineBreak></LineBreak><Mark1>p-values from the sign test; horizontal bars are shortened in the case of missing values.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 3: Ver&#228;nderung in den summarischen Angaben zu eigenem palliativmedizinischem Wissen und Interesse, Sicherheitsgef&#252;hl im Umgang mit Sterbenden und der Einsch&#228;tzung, ob die T&#228;tigkeit auf einer Palliativstation eine befriedigende &#228;rztliche T&#228;tigkeit sein kann, nach dem PJ im Vergleich zu nach Q13.</Mark1><LineBreak></LineBreak><Mark1>p-Werte aus dem Vorzeichentest; gestapelte Balken sind verk&#252;rzt bei fehlenden Werten. </Mark1></Pgraph></Caption>
        </Figure>
        <NoOfPictures>3</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <Attachment>
          <MediaNo>1</MediaNo>
          <MediaID filename="zma001499.a1en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment&#95;1.pdf" size="111917" url="">1en</MediaID>
          <MediaID filename="zma001499.a1de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang&#95;1.pdf" size="118351" url="">1de</MediaID>
          <AttachmentTitle language="en">Voluntary anonymous survey at the end of interdisciplinary subject Q13</AttachmentTitle>
          <AttachmentTitle language="de">Fragebogen Querschnittsbereich Q13</AttachmentTitle>
        </Attachment>
        <Attachment>
          <MediaNo>2</MediaNo>
          <MediaID filename="zma001499.a2en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment&#95;2.pdf" size="111221" url="">2en</MediaID>
          <MediaID filename="zma001499.a2de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang&#95;2.pdf" size="132173" url="">2de</MediaID>
          <AttachmentTitle language="en">Questionnaire PJ</AttachmentTitle>
          <AttachmentTitle language="de">Fragebogen nach PJ Online-Umfrage zur Qualit&#228;tssicherung des Unterrichts Q13, Palliativmedizin</AttachmentTitle>
        </Attachment>
        <Attachment>
          <MediaNo>3</MediaNo>
          <MediaID filename="zma001499.a3en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment&#95;3.pdf" size="140207" url="">3en</MediaID>
          <MediaID filename="zma001499.a3de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang&#95;3.pdf" size="90764" url="">3de</MediaID>
          <AttachmentTitle language="en">Complete category system for the free-text comments submitted by the participating students (stud.) post-Q13 winter term 2011&#47;12 and post-PY (N&#61;90)</AttachmentTitle>
          <AttachmentTitle language="de">Vollst&#228;ndiges Kategoriensystem der Freitextantworten der teilnehmenden Studierenden (Stud.) Post Q13 WS 11-12 und Post PJ (N&#61;90)</AttachmentTitle>
        </Attachment>
        <NoOfAttachments>3</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>