<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<!DOCTYPE GmsArticle SYSTEM "http://www.egms.de/dtd/2.0.34/GmsArticle.dtd">
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001525</Identifier>
    <IdentifierDoi>10.3205/zma001525</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0015250</IdentifierUrn>
    <ArticleType language="en">article</ArticleType>
    <ArticleType language="de">Artikel</ArticleType>
    <TitleGroup>
      <Title language="en">Perception of journal club seminars by medical doctoral students: results from five years of evaluation</Title>
      <TitleTranslated language="de">Wahrnehmung von Journal-Club-Seminaren durch medizinische Promotionsstudierende: Ergebnisse aus f&#252;nf Jahren Evaluation</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>Taverna</Lastname>
          <LastnameHeading>Taverna</LastnameHeading>
          <Firstname>Mara</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Bucher</Lastname>
          <LastnameHeading>Bucher</LastnameHeading>
          <Firstname>Julian Nicolaus</Firstname>
          <Initials>JN</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Weniger</Lastname>
          <LastnameHeading>Weniger</LastnameHeading>
          <Firstname>Maximilian</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Gropp</Lastname>
          <LastnameHeading>Gropp</LastnameHeading>
          <Firstname>Roswitha</Firstname>
          <Initials>R</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Lee</Lastname>
          <LastnameHeading>Lee</LastnameHeading>
          <Firstname>Serene M. L.</Firstname>
          <Initials>SM</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Mayer</Lastname>
          <LastnameHeading>Mayer</LastnameHeading>
          <Firstname>Barbara</Firstname>
          <Initials>B</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Werner</Lastname>
          <LastnameHeading>Werner</LastnameHeading>
          <Firstname>Jens</Firstname>
          <Initials>J</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Bazhin</Lastname>
          <LastnameHeading>Bazhin</LastnameHeading>
          <Firstname>Alexandr V.</Firstname>
          <Initials>AV</Initials>
        </PersonNames>
        <Address language="en">Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, D-81377 Munich, Germany, Phone: &#43;49 (0)89&#47;4400-0, Fax: &#43;49 (0)89&#47;4400-76433<Affiliation>Ludwig-Maximilians-University Munich, Department of General, Visceral, and Transplant Surgery, Munich, Germany</Affiliation></Address>
        <Address language="de">Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, 81377 M&#252;nchen, Deutschland, Tel.: &#43;49 (0)89&#47;4400-0, Fax: &#43;49 (0)89&#47;4400-76433<Affiliation>Ludwig-Maximilians-Universit&#228;t M&#252;nchen, Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie, M&#252;nchen, Deutschland</Affiliation></Address>
        <Email>alexandr.bazhin&#64;med.uni-muenchen.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">journal club</Keyword>
      <Keyword language="en">research paper</Keyword>
      <Keyword language="en">critical thinking</Keyword>
      <Keyword language="en">post-graduate education</Keyword>
      <Keyword language="de">Journal Club</Keyword>
      <Keyword language="de">Forschungsarbeit</Keyword>
      <Keyword language="de">kritisches Denken</Keyword>
      <Keyword language="de">Postgraduiertenausbildung</Keyword>
      <SectionHeading language="en">journal clubs</SectionHeading>
      <SectionHeading language="de">Journal Clubs</SectionHeading>
    </SubjectGroup>
    <DateReceived>20200727</DateReceived>
    <DateRevised>20210719</DateRevised>
    <DateAccepted>20211207</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20220215</DatePublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>39</Volume>
        <Issue>1</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
      </Journal>
    </SourceGroup>
    <ArticleNo>4</ArticleNo>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph><Mark1>Zielsetzung: </Mark1>Journal Clubs sind eine etablierte und weit verbreitete Methode der Postgraduiertenausbildung. Das Ziel dieser Arbeit war es zu untersuchen, wie die Teilnehmenden Journal Clubs insgesamt wahrnehmen und wie sie ihren pers&#246;nlichen Prozess der Aneignung neuen wissenschaftlichen Wissens sowie die Entwicklung ihrer Soft Skills als unverzichtbare Voraussetzung f&#252;r lebenslanges Lernen bewerten.</Pgraph><Pgraph><Mark1>Projektbeschreibung: </Mark1>Bei dieser Studie handelt es sich um eine Befragungsauswertung zur Untersuchung der Wahrnehmung von Journal-Club-Seminaren durch medizinische Promotionsstudierende. Dazu wurden eine Checkliste f&#252;r die Vorbereitung von Journal Clubs sowie ein Fragebogen f&#252;r die Evaluation der Journal-Club-Sitzung durch die Teilnehmenden erarbeitet, um zu ermitteln, ob die Ziele des Journal Clubs erreicht wurden. Die Daten wurden durch Zusammenfassung aller Antworten auf jede Frage des Fragebogens f&#252;r jede Sitzung erhoben. Qualitative Daten aus einem f&#252;nfj&#228;hrigen Evaluationszeitraum wurden zusammengef&#252;hrt und ausgewertet. </Pgraph><Pgraph><Mark1>Ergebnisse: </Mark1>Die Journal-Club-Checkliste diente bei der Vorbereitung der Journal-Club-Sitzungen sowie des Evaluationsfragebogens mit 24 Items als Leitfaden. Diese Arbeit liefert Belege daf&#252;r, dass Journal-Club-Seminare von den Teilnehmenden positiv wahrgenommen werden. Dar&#252;ber hinaus empfand ein hoher Prozentsatz der Teilnehmenden die Arbeitsatmosph&#228;re als konstruktiv und die Teilnahme an den Sitzungen als wertvoll. Die Themen der Pr&#228;sentationen wurden positiv bewertet, auch wenn nur wenige Teilnehmende angaben, dass die Themen des Journal Club Bezug zu ihrem eigenen spezifischen Forschungsthema hatten. Es konnte gezeigt werden, dass eine Verteilung des Zeitschriftenartikels eine Woche vor der Journal-Club-Sitzung ausreichend Zeit zur Vorbereitung bot. Die Auswertung ergab, dass zwei Drittel der Teilnehmenden die Diskussionen w&#228;hrend der Sitzungen bereichernd und fruchtbar fanden. Die Motivation f&#252;r kritischeres Denken stieg w&#228;hrend der Journal-Club-Sitzungen. Gest&#252;tzt auf diese Arbeit ist es evident, dass sich die Soft Skills der Vortragenden in der Wahrnehmung der Teilnehmenden mit zunehmender &#220;bung verbesserten. Schlie&#223;lich konnte ein eindeutiger positiver Trend bei der Wahrnehmung des Nutzens von Journal-Club-Sitzungen vom Beginn bis zum Ende des Evaluationszeitraums nachgewiesen werden. </Pgraph><Pgraph><Mark1>Schlussfolgerung: </Mark1>Auf Grundlage der ausgewerteten Evaluationen kann geschlussfolgert werden, dass Journal-Club-Seminare von den Teilnehmenden sehr gesch&#228;tzt werden und eine sinnvolle M&#246;glichkeit f&#252;r die Entwicklung bestimmter Soft Skills sind.      </Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph><Mark1>Objectives: </Mark1>A journal club is one of the well-established and popular methods of post-graduate education. In this work, we were interested to understand how the participants perceive journal club as a whole and how they evaluate their personal process of acquiring new scientific knowledge and development of soft-skills as an indispensable prerequisite of the lifelong learning.</Pgraph><Pgraph><Mark1>Project description:</Mark1> This study is a survey analysis examining perception of journal club sessions by post-graduate medical students. A checklist for journal club preparation as well as a questionnaire for evaluation of the journal club session by participants has been developed to determine if the journal club had met its aims. Data were collected by summing up all answers to each question of the questionnaire for each session. Qualitative data from a five-year evaluation period were compiled and analyzed. </Pgraph><Pgraph><Mark1>Results:</Mark1> The journal club checklist served as a guideline for the preparation of a journal club session as well as an evaluation questionnaire containing 24 items. Our work presents evidence that journal club seminars are well perceived by participants. Furthermore, a high percentage of participants deemed the working atmosphere to be constructive and found it worthwhile to participate in the sessions. The topics of the presentations have been positively evaluated, however only a minority of participants found that the topics of the journal club was related to their own specific research topic. Concerning the distribution of the journal article, we could show that distributing the paper one week before the journal club event provided sufficient time for preparation. Our evaluation revealed that two-thirds of the participants found discussions during journal club sessions rich and productive. The motivation to think more critically increased during journal club sessions. From our work, it is evident that the participants perceived the speakers&#180; soft-skills to have improved with the practice. Finally, we show a clear trend of improved perception of the value of journal club sessions from beginning to the end of the evaluation time. </Pgraph><Pgraph><Mark1>Conclusion: </Mark1>Based on the analyzed evaluations, we can conclude that journal club events are highly valued by participants and could be a good option for the development of certain soft-skills.      </Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="Introduction">
      <MainHeadline>Introduction</MainHeadline><Pgraph>The authors of this paper define the term &#8220;journal club&#8221; as a regular meeting of individuals to discuss a research paper published in a scientific journal. A journal club (JC) is one of the well-established and popular methods of graduate and post-graduate education with about two hundred years of history <TextLink reference="1"></TextLink>. Originally, its purpose was to achieve a better dissemination of scientific information in a low-cost manner <TextLink reference="2"></TextLink>. With time, JCs became accepted as an educational intervention <TextLink reference="3"></TextLink> with attendance becoming part of requirements to be fulfilled to obtain a doctoral degree. In some universities, a JC is anchored in curricula of their structured doctoral programs <TextLink reference="4"></TextLink>. A JC is primarily a face-to-face interaction. However, with the immense influence of internet these days, there is a trend to carry out JCs in an on-line format or even to use social media <TextLink reference="1"></TextLink>, <TextLink reference="5"></TextLink>. With the advent of the COVID-19 pandemic in 2020, there has been a huge impetus to this trend due to the high importance of physical distancing <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>, <TextLink reference="8"></TextLink>.  </Pgraph><Pgraph>Many aims can be achieved by participants during JC sessions. The first and oldest aim is the spreading of scientific information and knowledge transfer, so that the participants are keeping up to date with the literature <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>. The second aim is to help develop the ability to critically appraise the literature <TextLink reference="11"></TextLink> as well as to develop critical thinking or analytical skills in general <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>. In the case of MD students, it is believed that JC sessions may improve their knowledge of evidence-based medicine and help them translate this process to clinical practice <TextLink reference="14"></TextLink>, <TextLink reference="15"></TextLink>. Moreover, generic (interdisciplinary) skills or so-called soft-skills such as communication, leadership, teamwork, moderation, discussion, time-management, critical thinking and debating can also be improved by JC <TextLink reference="13"></TextLink>, <TextLink reference="16"></TextLink>. Depending on the purpose and criteria, the evaluation of the success of a JC can be carried out in different ways. The number of participants which normally ranges from 12 to 135 participants <TextLink reference="17"></TextLink>, would be for example the easiest way to evaluate a JC success &#91;4&#93;. A complicated approach would be to evaluate the development of critical appraisal of the literature or assess learning outcome pre- and post-test or in a randomized trial with control and experimental groups <TextLink reference="17"></TextLink>. </Pgraph><Pgraph>We can categorize research to date on JC as an education tool into three major groups: </Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">JC as a cognitive tool to improve critical thinking <TextLink reference="12"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>, <TextLink reference="21"></TextLink> and evidence-based skills <TextLink reference="22"></TextLink>, <TextLink reference="23"></TextLink>, <TextLink reference="24"></TextLink>, <TextLink reference="25"></TextLink>, <TextLink reference="26"></TextLink>, <TextLink reference="27"></TextLink>; </ListItem><ListItem level="1" levelPosition="2" numString="2.">strategies to improve the effectiveness of JC <TextLink reference="28"></TextLink>, <TextLink reference="29"></TextLink>, <TextLink reference="30"></TextLink>, <TextLink reference="31"></TextLink>, <TextLink reference="32"></TextLink>; and </ListItem><ListItem level="1" levelPosition="3" numString="3.">new approaches to carry out JC <TextLink reference="8"></TextLink>, <TextLink reference="33"></TextLink>, <TextLink reference="34"></TextLink>, <TextLink reference="35"></TextLink>, <TextLink reference="36"></TextLink>, <TextLink reference="37"></TextLink>, <TextLink reference="38"></TextLink>. </ListItem></OrderedList></Pgraph><Pgraph>When it comes to the role of JC in the development of soft-skills, research on this topic is very scant. In our work, the main aim was to understand how the participants perceived JC as a whole and how they evaluated their personal progress in acquiring new scientific knowledge and soft-skills.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Einleitung">
      <MainHeadline>Einleitung</MainHeadline><Pgraph>Im Rahmen dieser Arbeit wird &#8222;Journal Club&#8220; als regelm&#228;&#223;ige Zusammenkunft von Menschen definiert, die in wissenschaftlichen Fachzeitschriften ver&#246;ffentlichte Forschungsarbeiten besprechen. Journal Clubs (JC) sind eine etablierte und weit verbreitete Methode der Postgraduiertenausbildung, die auf eine etwa zweihundertj&#228;hrige Geschichte zur&#252;ckblickt <TextLink reference="1"></TextLink>. Deren Zweck bestand urspr&#252;nglich darin, eine bessere Verbreitung wissenschaftlicher Informationen zu niedrigen Kosten zu erzielen <TextLink reference="2"></TextLink>. Im Laufe der Zeit entwickelten sie sich zu einer anerkannten Ausbildungsma&#223;nahme <TextLink reference="3"></TextLink> mit verpflichtender Teilnahme f&#252;r die Erlangung des Doktorgrades. An einigen Universit&#228;ten ist ein JC in den Curricula ihrer strukturierten Promotionsprogramme verankert <TextLink reference="4"></TextLink>. Bei JC handelt es sich in erster Linie um Veranstaltungen mit direkter Interaktion. Der enorme Einfluss, den das Internet heute aus&#252;bt, f&#252;hrt dazu, dass JC zunehmend online oder gar mit Nutzung sozialer Medien abgehalten werden <TextLink reference="1"></TextLink>, <TextLink reference="5"></TextLink>. Der Beginn der COVID-19-Pandemie 2020 verst&#228;rkte diesen Trend durch die gro&#223;e Wichtigkeit der physischen Distanzierung erheblich <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>, <TextLink reference="8"></TextLink>.  </Pgraph><Pgraph>JC-Sitzungen haben f&#252;r die Teilnehmenden viele Nutzen. Erstes und &#228;ltestes Ziel ist die Verbreitung wissenschaftlicher Informationen und die Wissens&#252;bermittlung. So bleiben die Teilnehmenden stets auf dem neuesten Stand der Literatur <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>. Das zweite Ziel betrifft die Entwicklung der F&#228;higkeit, die Literatur kritisch zu reflektieren <TextLink reference="11"></TextLink> und kritisch zu denken oder allgemein analytisch zu arbeiten <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>. Es wird davon ausgegangen, dass Medizinstudierende durch JC-Sitzungen ihr Wissen im Feld der evidenzbasierten Medizin erweitern k&#246;nnen und sie ihnen helfen, diesen Prozess in die klinische Praxis zu &#252;bertragen <TextLink reference="14"></TextLink>, <TextLink reference="15"></TextLink>. Dar&#252;ber hinaus k&#246;nnen allgemeine (interdisziplin&#228;re) Kompetenzen oder sogenannte Soft Skills beispielsweise in den Bereichen Kommunikation, F&#252;hrung, Teamarbeit, Leitung, Diskussion, Zeitmanagement, kritisches Denken und Debattieren mithilfe des JC verbessert werden <TextLink reference="13"></TextLink>, <TextLink reference="16"></TextLink>. Die Bewertung des Erfolgs eines JC kann abh&#228;ngig vom Zweck und den Kriterien auf verschiedene Weise vorgenommen werden. So ist beispielsweise die Anzahl der Teilnehmenden, die normalerweise zwischen 12 und 135 Teilnehmenden liegt <TextLink reference="17"></TextLink>, die einfachste Kennzahl f&#252;r die Erfolgsbewertung <TextLink reference="4"></TextLink>. Eine komplexere Herangehensweise ist die Bewertung der Entwicklung von F&#228;higkeiten zur kritischen Auseinandersetzung mit der Literatur oder die Bewertung der Lernergebnisse vor und nach Tests bzw. im Rahmen randomisierter Studien mit Experimental- und Kontrollgruppen <TextLink reference="17"></TextLink>. </Pgraph><Pgraph>Die bisher zu JC als Ausbildungsinstrument durchgef&#252;hrte Forschung l&#228;sst sich in drei Hauptkategorien einteilen: </Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">JC als kognitives Werkzeug zur Verbesserung des kritischen Denkens <TextLink reference="12"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="20"></TextLink>, <TextLink reference="21"></TextLink> und der F&#228;higkeiten im Feld der evidenzbasierten Medizin <TextLink reference="22"></TextLink>, <TextLink reference="23"></TextLink>, <TextLink reference="24"></TextLink>, <TextLink reference="25"></TextLink>, <TextLink reference="26"></TextLink>, <TextLink reference="27"></TextLink>, </ListItem><ListItem level="1" levelPosition="2" numString="2.">Strategien zur Erh&#246;hung der Effektivit&#228;t von JC <TextLink reference="28"></TextLink>, <TextLink reference="29"></TextLink>, <TextLink reference="30"></TextLink>, <TextLink reference="31"></TextLink>, <TextLink reference="32"></TextLink> und </ListItem><ListItem level="1" levelPosition="3" numString="3.">neue Ans&#228;tze f&#252;r die Durchf&#252;hrung von JC <TextLink reference="8"></TextLink>, <TextLink reference="33"></TextLink>, <TextLink reference="34"></TextLink>, <TextLink reference="35"></TextLink>, <TextLink reference="36"></TextLink>, <TextLink reference="37"></TextLink>, <TextLink reference="38"></TextLink>. </ListItem></OrderedList></Pgraph><Pgraph>Zur Rolle von JC bei der Entwicklung von Soft Skills wurde bisher kaum geforscht. Das Ziel dieser Arbeit war es zu untersuchen, wie die Teilnehmenden JC insgesamt wahrnahmen und wie sie ihren pers&#246;nlichen Fortschritt bei der Aneignung neuen wissenschaftlichen Wissens sowie der Entwicklung ihrer Soft Skills bewerteten.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Project description">
      <MainHeadline>Project description</MainHeadline><SubHeadline2>The study and participants </SubHeadline2><Pgraph>This study is based on a survey analysis that explored the perception of JC by post-graduate medical students who performed their MD thesis at the Department of General, Visceral and Transplant Surgery of the Ludwig-Maximilians-University (LMU) Munich. The JC evaluation was started in the winter semester of 2014 and ended in the summer semester of 2019. Forty doctoral students attended JC sessions on a regular basis and all attendees filled out an evaluation form after each session. JC sessions were carried out every second week of the academic year, starting from October and ending in July of the following year. Participation in the JC sessions was semi-obligatory, that means the students have to attend 50&#37; of all sessions and have to be a speaker at least once during their doctorate. Therefore, the group was open and the constellation of participants was not the same during the whole time under observation. In addition, some but not all of the students participated in JC sessions up to 3 years from the beginning of their doctoral degree. According to our local ethics commission from the Medical Faculty of LMU Munich, this study did not need any formal ethical approval. All data were completely anonymized. The agreement (signed consent form) for usage of the evaluation results for scientific purposes has been collected from the participants.  </Pgraph><SubHeadline2>Preparation and carrying out of JC sessions </SubHeadline2><Pgraph>The first JC session of each academic year was presented by an experienced scientist (one of the authors; MT, RG, SL, BM or AVB). They not only provided an example of how the students should perform their JC session, but also presented and discussed the aims of a JC and the hallmarks of a successful JC for both the presenter and the attendees. Our JC format is a didactic mixture of the classic and flipped classroom forms <TextLink reference="39"></TextLink>. Speakers chose papers for presentation (after consulting their supervisor, if necessary). While there were no strict rules for the choice of papers, the students have to follow a provided checklist (see figure 1 <ImgLink imgNo="1" imgType="figure"/>) for preparation of a JC session. The paper to be discussed had to be distributed to the other participants at least one week before the JC session to allow participants sufficient time for critical reading. The presentation format was left open, but usage of PowerPoint for presentation was not recommended in order to avoid projecting the feel of a lecture. After presentation of the paper (15-20 min), a discussion was initiated and moderated by the presenter (15-20 min). An experienced scientist with additional didactic background (MT or AVB) attended every session and helped the speaker, if required, to moderate the discussion (learning by example). After each JC session, the participants had to fill up a questionnaire anonymously. The data from the questionnaires were analyzed after each session by MT. The last JC session, moderated by the corresponding author (AVB) has been devoted to the discussion of the anonymous evaluation results to identify possible problems and make changes, where appropriate, for the next academic year.</Pgraph><SubHeadline2>Preparation of a checklist </SubHeadline2><Pgraph>A checklist with guidelines for preparing the JC was developed during a workshop attended by the authors of the paper and students in autumn 2014. The corresponding author (AVB), who has a strong background in adult learning theory and high school didactics, moderated the workshop. After AVB&#8217;s presentation of current literature on the efficacy of JC mentioned above <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>, <TextLink reference="4"></TextLink>, <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>, <TextLink reference="11"></TextLink>, <TextLink reference="12"></TextLink>, <TextLink reference="14"></TextLink>, <TextLink reference="15"></TextLink>, <TextLink reference="16"></TextLink>, <TextLink reference="17"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="22"></TextLink>, <TextLink reference="28"></TextLink>, <TextLink reference="29"></TextLink>, <TextLink reference="40"></TextLink> and the desired learning objectives, the workshop participants worked in small groups to brainstorm and elaborate on the content of the checklist. The JC checklist (see figure 1 <ImgLink imgNo="1" imgType="figure"/>) served as a guideline for the preparation of a journal club session by the designated speaker. The checklist was presented at the first introductory JC session each year and discussed thoroughly with participants.</Pgraph><SubHeadline2>Preparation of a questionnaire </SubHeadline2><Pgraph>A questionnaire for JC evaluation by participants was developed by the authors of the paper (SL, BM and AVB) in a topic-centered workshop based on literature cited in the previous paragraph. The results of the workshop have been judged to be conforming to the quality management standards of our ISO 9001:2015-certified Department. The developed evaluation questionnaire (see table 1 <ImgLink imgNo="1" imgType="table"/>) consists of six groups of questions (levels of evaluation, see table 1 <ImgLink imgNo="1" imgType="table"/>) which correspond to sub-goals of the project, evaluating </Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">the JC as a whole, </ListItem><ListItem level="1" levelPosition="2" numString="2.">topic of the presentation, </ListItem><ListItem level="1" levelPosition="3" numString="3.">process of a JC session, </ListItem><ListItem level="1" levelPosition="4" numString="4.">participants&#8217; perception of their learning process, </ListItem><ListItem level="1" levelPosition="5" numString="5.">assessment of speaker&#8217;s soft-skills during the presentation, </ListItem><ListItem level="1" levelPosition="6" numString="6.">perception of participation of colleagues in the JC session. </ListItem></OrderedList></Pgraph><Pgraph>Each group of questions in the questionnaire comprised of three to seven questions. In total, 24 items have been included (see table 1 <ImgLink imgNo="1" imgType="table"/>) ranging from 1 (&#8220;does not apply&#8221;) to 5 (&#8220;true&#8221;) on the Likert scale. Reliability of the internal consistency of the questionnaire has been assessed by Cronbach&#8217;s correlation analysis. Next, the questionnaire was assessed for face (subjective assessments of relevance, reasonability and unambiguity) and content (an exhaustive literature review to extract the related items) validity before circulation <TextLink reference="41"></TextLink>.    </Pgraph><Pgraph>A questionnaire was distributed to each student at every JC session. All answers to each question of the questionnaire were summed up for each session. For each question, the number of participants who checked a positive, negative or neutral category from the Likert scale was tallied up separately. Answers of &#8220;does not apply&#8221; and &#8220;does rather not apply&#8221; were merged, as well as answers of &#8220;rather apply&#8221; and &#8220;true&#8221;. The merging of the two &#8220;positive&#8221; categories and the two &#8220;negative&#8221; categories is usually done to get a cleaner picture of the results from a Likert scale without losing information. Graphics and analyses were done using GraphPad Prism 5 (GraphPad Software, Inc.).</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Projektbeschreibung">
      <MainHeadline>Projektbeschreibung</MainHeadline><SubHeadline2>Studie und Teilnehmende </SubHeadline2><Pgraph>Diese Studie beruht auf der Auswertung einer Befragung, anhand der die Wahrnehmung von JC durch Medizindoktorandinnen und -doktoranden untersucht wurde, die an der Klinik f&#252;r Allgemein-, Viszeral- und Transplantationschirurgie der Ludwig-Maximilians-Universit&#228;t (LMU) M&#252;nchen promovierten. Die Evaluation des JC begann im Wintersemester 2014 und endete im Sommersemester 2019. Insgesamt 40 Promotionsstudierende nahmen regelm&#228;&#223;ig an JC-Sitzungen teil und f&#252;llten nach jeder Sitzung einen Evaluationsbogen aus. Die Sitzungen fanden w&#228;hrend des akademischen Jahres zwischen Oktober und Juli des darauffolgenden Jahres zweiw&#246;chentlich statt. Die Teilnahme an den Sitzungen war halb verpflichtend, das hei&#223;t, die Promotionsstudierenden mussten an 50&#37; der Sitzungen teilnehmen und mindestens einmal w&#228;hrend ihrer Promotion eine Pr&#228;sentation halten. Daher waren die Gruppe offen und die Zusammensetzung der Teilnehmenden w&#228;hrend des gesamten Beobachtungszeitraums unterschiedlich. Au&#223;erdem besuchten einige die JC-Sitzungen bis zu drei Jahre lang ab dem Beginn der Promotion. Laut Einsch&#228;tzung der lokalen Ethikkommission der Medizinischen Fakult&#228;t der LMU M&#252;nchen war f&#252;r diese Studie keine f&#246;rmliche ethische Zustimmung erforderlich. Alle Daten wurden vollst&#228;ndig anonymisiert. Von den Teilnehmenden wurde die Zustimmung (unterschriebene Einverst&#228;ndniserkl&#228;rung) f&#252;r die Nutzung der Evaluationsergebnisse f&#252;r wissenschaftliche Zwecke eingeholt.  </Pgraph><SubHeadline2>Vorbereitung und Durchf&#252;hrung von JC-Sitzungen </SubHeadline2><Pgraph>Die Pr&#228;sentation der jeweils ersten Sitzung jedes akademischen Jahres wurde von einer erfahrenen Wissenschaftlerin oder einem erfahrenen Wissenschaftler gehalten (eine Autorin oder ein Autor dieser Arbeit; MT, RG, SL, BM oder AVB). Diese dienten den Promotionsstudierenden als Beispiel f&#252;r die Gestaltung ihrer JC-Sitzung. Dabei wurden dar&#252;ber hinaus die Ziele eines JC und die Merkmale eines erfolgreichen JC sowohl f&#252;r die Vortragenden als auch die Anwesenden vorgestellt und er&#246;rtert. Das hier angewendete JC-Format ist eine didaktische Mischung aus klassischem und umgedrehtem Unterricht (flipped classroom) <TextLink reference="39"></TextLink>. Die Vortragenden w&#228;hlten die Artikel f&#252;r die Pr&#228;sentation selbst aus (nach R&#252;cksprache mit der Betreuerin oder dem Betreuer, falls notwendig). Bei der Auswahl der Artikel gab es keine strengen Vorgaben; zur Vorbereitung der JC-Sitzung mussten die Teilnehmenden jedoch eine bereitgestellte Checkliste (siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>) abarbeiten. Der Artikel, der besprochen wurde, musste den anderen Teilnehmenden mindestens eine Woche vor der Sitzung bereitgestellt werden, sodass diese gen&#252;gend Zeit f&#252;r das kritische Lesen des Textes hatten. Die Pr&#228;sentationsform konnte frei gew&#228;hlt werden; die Nutzung von PowerPoint wurde jedoch nicht empfohlen, um zu vermeiden, dass die Pr&#228;sentation wie eine Vorlesung wirkt. Im Anschluss an die Pr&#228;sentation des Artikels (15&#8211;20 min) wurde eine Diskussion angesto&#223;en und vom Vortragenden geleitet (15&#8211;20 min). Eine erfahrene Wissenschaftlerin oder ein erfahrener Wissenschaftler mit zus&#228;tzlichem didaktischem Hintergrund (MT oder AVB) nahm an jeder Sitzung teil und unterst&#252;tzte die vortragende Person bei der Moderation der Diskussion (Lernen am Modell). Nach jeder Sitzung mussten die Teilnehmenden anonym einen Fragebogen ausf&#252;llen. Die Angaben aus den Frageb&#246;gen wurden nach jeder Sitzung von MT ausgewertet. Die letzte JC-Sitzung wurde vom korrespondierenden Autor (AVB) geleitet und diente der Er&#246;rterung der Ergebnisse der anonymen Evaluation mit dem Ziel, m&#246;gliche Probleme herauszustellen und gegebenenfalls Ver&#228;nderungen f&#252;r das n&#228;chste akademische Jahr vorzunehmen.</Pgraph><SubHeadline2>Vorbereitung der Checkliste </SubHeadline2><Pgraph>Es wurde im Rahmen eines Workshops eine Checkliste mit Richtlinien f&#252;r die Vorbereitung des JC erarbeitet, an dem die Autorinnen und Autoren sowie Doktorandinnen und Doktoranden im Herbst 2014 teilnahmen. Der korrespondierende Autor (AVB), der &#252;ber einen fundierten Hintergrund in der Erwachsenenbildung und Hochschuldidaktik verf&#252;gt, leitete den Workshop. Er stellte die oben bereits genannte aktuelle Literatur zur Effektivit&#228;t von Journal Clubs <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>, <TextLink reference="4"></TextLink>, <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>, <TextLink reference="11"></TextLink>, <TextLink reference="12"></TextLink>, <TextLink reference="14"></TextLink>, <TextLink reference="15"></TextLink>, <TextLink reference="16"></TextLink>, <TextLink reference="17"></TextLink>, <TextLink reference="18"></TextLink>, <TextLink reference="19"></TextLink>, <TextLink reference="22"></TextLink>, <TextLink reference="28"></TextLink>, <TextLink reference="29"></TextLink>, <TextLink reference="40"></TextLink> sowie die angestrebten Lernziele vor. Danach arbeiteten die Workshop-Teilnehmenden in kleinen Gruppen zusammen und er&#246;rterten die Inhalte der Checkliste. Die JC-Checkliste (siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>) diente als Leitfaden f&#252;r die Vorbereitung einer Journal-Club-Sitzung durch die vortragende Person. Die Checkliste wurde bei der ersten einf&#252;hrenden JC-Sitzung in jedem Jahr vorgestellt und eingehend mit den Teilnehmenden besprochen.</Pgraph><SubHeadline2>Vorbereitung des Fragebogens </SubHeadline2><Pgraph>Der Fragebogen f&#252;r die JC-Evaluation durch die Teilnehmenden wurde von den Autorinnen und Autoren dieser Arbeit (SL, BM und AVB) im Rahmen eines themenspezifischen Workshops auf Grundlage der im vorangegangenen Abschnitt genannten Literatur erarbeitet. Die Ergebnisse des Workshops wurden als den Qualit&#228;tsmanagementnormen, gem&#228;&#223; ISO 9001:2015 zertifizierten Klinik entsprechend erkl&#228;rt. Der erstellte Evaluationsfragebogen (siehe Tabelle 1 <ImgLink imgNo="1" imgType="table"/>) besteht aus sechs Fragengruppen (Evaluationsebenen, siehe Tabelle 1 <ImgLink imgNo="1" imgType="table"/>), die den Teilzielen des Projekts entsprechen. Bewertet werden dabei </Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">JC insgesamt, </ListItem><ListItem level="1" levelPosition="2" numString="2.">Thema der Pr&#228;sentation, </ListItem><ListItem level="1" levelPosition="3" numString="3.">Verlauf einer JC-Sitzung, </ListItem><ListItem level="1" levelPosition="4" numString="4.">Wahrnehmung der Teilnehmenden ihres Lernprozesses, </ListItem><ListItem level="1" levelPosition="5" numString="5.">Bewertung der Soft Skills der vortragenden Person w&#228;hrend der Pr&#228;sentation, </ListItem><ListItem level="1" levelPosition="6" numString="6.">Wahrnehmung der Beteiligung des Kollegiums an der JC-Sitzung. </ListItem></OrderedList></Pgraph><Pgraph>Jede Fragengruppe des Fragebogens umfasste drei bis sieben Fragen. Insgesamt wurden 24 Items formuliert (siehe Tabelle 1 <ImgLink imgNo="1" imgType="table"/>), die mit 1 (&#8222;trifft nicht zu&#8220;) bis 5 (&#8222;trifft zu&#8220;) auf der Likert-Skala bewertet werden sollten. Die Reliabilit&#228;t der internen Konsistenz des Fragebogens wurde mithilfe der Korrelationsanalyse nach Cronbach bewertet. Nachfolgend wurden die Augenscheinvalidit&#228;t (Beurteilung der subjektiven Relevanz, Angemessenheit und Unzweideutigkeit) sowie die Inhaltsvalidit&#228;t (umfassende Literaturrecherche, um die zugeh&#246;rigen Items herauszuarbeiten) vor der Verwendung bewertet <TextLink reference="41"></TextLink>.    </Pgraph><Pgraph>Alle Promotionsstudierenden erhielten bei jeder JC-Sitzung einen Fragebogen. Alle Antworten auf jede Frage des Fragebogens wurden f&#252;r jede Sitzung summiert. F&#252;r jede Frage wurde die Anzahl der Teilnehmenden, die eine positive, eine negative oder eine neutrale Kategorie auf der Likert-Skala ankreuzten, separat zusammengez&#228;hlt. Die Antworten &#8222;trifft nicht zu&#8220; und &#8222;trifft eher nicht zu&#8220; sowie die Antworten &#8222;trifft eher zu&#8220; und &#8222;trifft zu&#8220; wurden zusammengef&#252;hrt. Diese Zusammenf&#252;hrung der beiden &#8222;positiven&#8220; sowie der beiden &#8222;negativen&#8220; Kategorien wird &#252;blicherweise durchgef&#252;hrt, um ein deutlicheres Bild der Ergebnisse einer Likert-Skala zu zeichnen, ohne dass Informationen verloren gehen. Grafiken und Analysen wurden mit GraphPad Prism 5 (GraphPad Software, Inc.) erstellt.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Results">
      <MainHeadline>Results</MainHeadline><SubHeadline2>General evaluation of questionnaire development, JC sessions and participants</SubHeadline2><Pgraph>The internal consistency of the questionnaire is high as indicated by a Cronbach alpha coefficient of 0.97. The number of JC sessions and participants each year is summarized in table 2 <ImgLink imgNo="2" imgType="table"/>. It should be noted that the evaluation of the JC sessions in the first year was only done during the summer semester and not during both summer and winter semesters as for the other years. Therefore, the number of evaluated JC sessions in the first year of observation was lower than in the following years. However, the number of participants in the first year was higher than in the next ones and was relative stable in the following years (see table 2 <ImgLink imgNo="2" imgType="table"/>).</Pgraph><SubHeadline2>General evaluation of the JC sessions  </SubHeadline2><Pgraph>First, the participants had to evaluate the JC session as a whole (i.e. organization, comprehensibility and a general judgment about the value of this event). In general, the JC as a whole has been perceived positively (&#8220;rather apply&#8221; or &#8220;fully applies&#8221; was checked by more as 70&#37; of all participants). It should be stressed that a tendency to more favorable perception of the JC started from 2017 and the perception was increasingly favorable and then remained stable during the next years of evaluation (see figure 2 <ImgLink imgNo="2" imgType="figure"/>). </Pgraph><Pgraph>The comprehensibility of the JC structure should be reflective of the JC checklist mentioned above. At the beginning of the observation period (years 2015-2016), the percentage of participants who evaluated the JC structure as comprehensible was about 80&#37; and increased at least to 95&#37; in the following years (see figure 2 <ImgLink imgNo="2" imgType="figure"/>).</Pgraph><Pgraph>Also at the beginning of the evaluation, the percentage of participants who answered with &#8220;rather or fully apply&#8221; to the statement &#8220;it is worthwhile to participate in this meeting&#8221; was in the range of 70-80&#37;. However, in the next years this percentage increased and reached maximum of 95&#37; of the participants in the year 2016 (see figure 2 <ImgLink imgNo="2" imgType="figure"/>).    </Pgraph><SubHeadline2>Evaluation of topic of the presentation</SubHeadline2><Pgraph>A good choice of the paper for discussion is a prerequisite of a successful JC session <TextLink reference="13"></TextLink>. The next group of questions served to evaluate the chosen topic to be discussed during the JC. More than 75&#37; of the participants recognized that the JC sessions had a recurring theme (see figure 3 <ImgLink imgNo="3" imgType="figure"/>). However, the relevance of this topic to their own research was low, especially in 2015 to 2016 (see <TextGroup><PlainText>figure 3 </PlainText></TextGroup><ImgLink imgNo="3" imgType="figure"/>), which could be partially explained by heterogeneity in the scientific projects of participants. At the beginning of the JC evaluation (2015-2016), only about 50&#37; of participants agreed with the statement that the JC has given input to their scientific everyday life. However, from the third year of evaluation, more participants (about 80&#37; of participants) agreed with the statement above (see <TextGroup><PlainText>figure 3 </PlainText></TextGroup><ImgLink imgNo="3" imgType="figure"/>). </Pgraph><SubHeadline2>Evaluation of a JC session as a process</SubHeadline2><SubHeadline3>Timely distribution of the paper</SubHeadline3><Pgraph>An important requirement for a successful JC session is the timeline behind the distribution of the paper <TextLink reference="17"></TextLink>. When a paper is distributed in time, participants have sufficient time to read the paper conscientiously, understand the paper to the best of their ability and pinpoint sections where they feel require further discussion to meet their learning objectives. The evaluation revealed that in most cases the papers have been distributed in time (see figure 4 <ImgLink imgNo="4" imgType="figure"/>). To ensure that the process of the JC is successful, it is important that the working atmosphere is constructive <TextLink reference="12"></TextLink>. Indeed, about 100&#37; of the participants in the JC from 2017 found the working atmosphere constructive. In contrast, only 80&#37; of the participants answered with &#8220;rather or fully applies&#8221; in 2016 (see figure 4 <ImgLink imgNo="4" imgType="figure"/>).        </Pgraph><SubHeadline3>Constructive discussions during JC sessions</SubHeadline3><Pgraph>Discussion during a session is also an important part of the JC process <TextLink reference="17"></TextLink>. Therefore, we asked participants to rate the discussions during the JC to indicate whether or not the discussion was rich. The evaluation results were heterogeneous: about 75 to 80&#37; percent of participants found the discussions sufficient in the years 2015, 2016, 2018 and 2019. However, in the year 2017 more than 90&#37; of the participants found that the discussion during the JC was rich (see figure 4 <ImgLink imgNo="4" imgType="figure"/>). A rating of abundant discussion does not indicate to us that the discussions were productive. Therefore, ratings on the productivity of the discussions during JC sessions have also been recorded. The evaluation of the responses revealed that the result had the same trend as the responses to the previous question on whether or not the discussions were rich and positive responses were at a maximum in year 2017 (see figure 4 <ImgLink imgNo="4" imgType="figure"/>). </Pgraph><SubHeadline2>Evaluation of the learning process</SubHeadline2><SubHeadline3>Learning objectives reached</SubHeadline3><Pgraph>Regarding the learning process, it was important for us to understand how students evaluate their own learning process due to participation in the JC. Since interest seems to be an important factor of learning <TextLink reference="40"></TextLink>, we asked participants whether the JC presentation can deliver interesting learning objectives. The evaluation revealed that at the beginning of carrying out our JC project in years 2015 and 2015, only about 55&#37; of the participants think that the presentation indeed brings them interesting material for learning (see figure 5 <ImgLink imgNo="5" imgType="figure"/>). However, from 2017 another tendency has been observed: more than 80&#37; of the participants found that the JC can bring interesting learning objectives. This trend stayed nearly the same throughout the following years (see figure 5 <ImgLink imgNo="5" imgType="figure"/>). </Pgraph><SubHeadline3>Motivated to think critically</SubHeadline3><Pgraph>In this study, we did not analyze the influence of participation in a JC on development of critical thinking of our students. Nevertheless, we aimed to understand, how our participants evaluated their motivation to think more critically about the issue discussed in the JC. In the first two years, the perception that they were motivated to think more critically was evaluated as &#8220;rather or fully applies&#8221; by around 75&#37; of the participants. From 2017, this percentage was increased until it reached a maximum 95&#37; (see <TextGroup><PlainText>figure 5 </PlainText></TextGroup><ImgLink imgNo="5" imgType="figure"/>). </Pgraph><SubHeadline3>Appropriate amount of information for learning</SubHeadline3><Pgraph>The amount of supplied information to be learned has an impact on learning process. Therefore, we asked our participants if the amount of information in each JC session was appropriate. In the first years that JC sessions were evaluated, about 75&#37; of participants found that the amount of information shared in the JC was appropriate. This percentage was increased in the next years to a maximum of 95&#37; of the participants in 2017 (see <TextGroup><PlainText>figure 5 </PlainText></TextGroup><ImgLink imgNo="5" imgType="figure"/>).   </Pgraph><SubHeadline2>Evaluation of the speaker&#39;s soft-skills during the presentation    </SubHeadline2><Pgraph>A JC is recognized to be platform for the development of certain soft-skills (presentation, moderation, debate, time-management, leadership etc) <TextLink reference="42"></TextLink>, which are no doubt important for scientific employability. Therefore, participants have evaluated the speakers&#8217; soft skills after JC sessions. In general, the participants (95&#37; in year 2015 and up to 100&#37; in the last two years of observation) found that the speakers were well prepared (see figure 6 <ImgLink imgNo="6" imgType="figure"/>). However, in the first years that JC sessions were carried out, only 70 to 75&#37; of the participants stated that the speaker had caught their attention. However, this percentage increased to 95&#37; of the participants in the following years of observation. This result is reflected in the next questions on whether the speaker gave a take-home message and whether the content was clearly presented (see figure 6 <ImgLink imgNo="6" imgType="figure"/>), underscoring the importance of presentation skills. Presentation techniques were perceived to be good by 70 to 75&#37; of the participants at the beginning of evaluation period. The percentage then continued to increase from 2017 and it stayed stably high in the last years of observation (see figure 6 <ImgLink imgNo="6" imgType="figure"/>). </Pgraph><Pgraph>The importance of discussion has been already mentioned above. To leave enough time for discussion is also an important soft-skill related to moderation, time-management and leadership. A minimum of 95&#37; of participants replied to the statement &#8220;the speaker left enough time for discussion&#8221; with &#8220;rather apply or true&#8221; through all the years of observation (see figure 6). Cooperation can be recognized to be a trait of leadership that is also important in JC settings <TextLink reference="13"></TextLink>. Indeed, nearly all participants found that the speakers were cooperative during JC sessions (see figure 6 <ImgLink imgNo="6" imgType="figure"/>).</Pgraph><SubHeadline3>Evaluation of the participant&#39;s perception of other participants attending the JC sessions</SubHeadline3><Pgraph>Lastly, we were curious to find out how the participants perceive their colleagues attending the JC sessions. In 2016, only about 60&#37; of participants had the feeling that the paper distributed before the JC session had been read. In contrast, 85&#37; of participants in 2015 felt that papers have been read (see figure 7 <ImgLink imgNo="7" imgType="figure"/>). Practically the same percentage distribution was recorded for the statement &#8220;the participants act attentive and interest&#8221; and &#8220;the participants ask concrete and relevant question&#8221; (see figure 7 <ImgLink imgNo="7" imgType="figure"/>). </Pgraph><Pgraph>Positive feedback provides extrinsic motivation and builds self-esteem <TextLink reference="43"></TextLink>. In the context of a JC, this is a strong motivation to be a speaker and more importantly be a good speaker. Therefore, we monitored whether the participants gave the speakers feedback during his or her JC session. At the beginning of the evaluation period, only about 50&#37; of participants felt that the speaker obtained feedback. From 2017, this situation changed and 75 to 90&#37; of the participants responded that speakers indeed received feedback from their colleagues. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Ergebnisse">
      <MainHeadline>Ergebnisse</MainHeadline><Pgraph>Allgemeine Auswertung der Fragebogenentwicklung, JC-Sitzungen und Teilnehmenden</Pgraph><Pgraph>Die interne Konsistenz des Fragebogens ist hoch, wie ein Cronbachs-Alpha-Koeffizient von 0,97 zeigt. Die Anzahl der JC-Sitzungen sowie der Teilnehmenden jedes Jahr ist in Tabelle 2 <ImgLink imgNo="2" imgType="table"/> zusammengefasst. Es ist zu beachten, dass die Evaluation der JC-Sitzungen im ersten Jahr nur w&#228;hrend des Sommersemesters und nicht, wie in den anderen Jahren, w&#228;hrend des Sommer- und des Wintersemesters durchgef&#252;hrt wurde. Daher ist die Anzahl der evaluierten JC-Sitzungen im ersten Beobachtungsjahr geringer als in den folgenden Jahren. Die Anzahl der Teilnehmenden war jedoch im ersten Jahr h&#246;her als in den Jahren darauf und war dann relativ stabil (siehe Tabelle 2 <ImgLink imgNo="2" imgType="table"/>).</Pgraph><SubHeadline2>Allgemeine Evaluation der JC-Sitzungen  </SubHeadline2><Pgraph>Zun&#228;chst sollten die Teilnehmenden die JC-Sitzung insgesamt evaluieren (d. h. Organisation, Verst&#228;ndlichkeit und allgemeine Einsch&#228;tzung des Nutzens der Veranstaltung). Der JC allgemein wurde insgesamt positiv wahrgenommen (&#8222;trifft eher zu&#8220; oder &#8222;trifft zu&#8220; wurde von mehr als 70&#37; aller Teilnehmenden angekreuzt). Hier sei darauf hingewiesen, dass eine Tendenz zu einer positiveren Wahrnehmung des JC ab 2017 begann, die Wahrnehmung zunehmend positiver wurde und dann in den folgenden Evaluationsjahren stabil blieb (siehe Abbildung 2 <ImgLink imgNo="2" imgType="figure"/>). </Pgraph><Pgraph>Die oben erw&#228;hnte JC-Checkliste sollte sich in der Verst&#228;ndlichkeit der JC-Struktur widerspiegeln. Zu Beginn des Beobachtungszeitraums (Jahre 2015&#8211;2016) bewerteten 80&#37; der Teilnehmenden die JC-Struktur als verst&#228;ndlich. In den folgenden Jahren stieg dieser Anteil auf mindestens 95&#37; (siehe Abbildung 2 <ImgLink imgNo="2" imgType="figure"/>).</Pgraph><Pgraph>Ebenfalls zu Beginn der Evaluation lag der prozentuale Anteil der Teilnehmenden, die die Aussage &#8222;Die Teilnahme an den Sitzungen ist wertvoll.&#8220; mit &#8222;trifft eher zu&#8220; oder &#8222;trifft zu&#8220; beantworteten, bei 70&#8211;80&#37;. In den folgenden Jahren stieg dieser Anteil jedoch und erreichte ein Maximum von 95&#37; der Teilnehmenden im Jahr 2016 (siehe Abbildung 2 <ImgLink imgNo="2" imgType="figure"/>).    </Pgraph><SubHeadline2>Evaluation des Themas der Pr&#228;sentation</SubHeadline2><Pgraph>Die richtige Auswahl des Artikels f&#252;r die Diskussion ist f&#252;r eine erfolgreiche JC-Sitzung unerl&#228;sslich <TextLink reference="13"></TextLink>. Die n&#228;chste Fragengruppe diente der Evaluation des Themas, das f&#252;r die Diskussion w&#228;hrend der Sitzung gew&#228;hlt wurde. Mehr als 75&#37; der Teilnehmenden waren der Meinung, dass die JC-Sitzungen aktuelle Themen behandelten (siehe Abbildung 3 <ImgLink imgNo="3" imgType="figure"/>). Die Relevanz dieser Themen f&#252;r ihre eigene Forschung empfanden sie jedoch als gering. Dies war vor allem in den Jahren 2015 bis 2016 der Fall (siehe Abbildung 3 <ImgLink imgNo="3" imgType="figure"/>), was teilweise mit der Heterogenit&#228;t der wissenschaftlichen Projekte der Teilnehmenden zu erkl&#228;ren ist. Zu Beginn der JC-Evaluation (2015&#8211;2016) stimmten nur etwa 50&#37; der Teilnehmenden mit der Aussage &#252;berein, dass der JC Anregungen f&#252;r ihren wissenschaftlichen Alltag lieferte. Ab dem dritten Evaluationsjahr allerdings stimmten hier mehr teilnehmende Personen (etwa 80&#37; der Teilnehmenden) zu (siehe Abbildung 3 <ImgLink imgNo="3" imgType="figure"/>). </Pgraph><SubHeadline2>Evaluation des Verlaufs einer JC-Sitzung</SubHeadline2><SubHeadline3>Rechtzeitige Verteilung des Artikels</SubHeadline3><Pgraph>F&#252;r den Erfolg der JC-Sitzung ist der Zeitplan der Verteilung des Artikels wesentlich <TextLink reference="17"></TextLink>. Wird der Artikel rechtzeitig an die Teilnehmenden weitergeleitet, haben sie gen&#252;gend Zeit, den Artikel sorgf&#228;ltig zu lesen, so gut wie m&#246;glich zu verstehen und Abschnitte zu bestimmen, die sie zum Erreichen ihrer Lernziele eingehender er&#246;rtern m&#246;chten. Die Evaluation zeigte, dass die Artikel in den meisten F&#228;llen rechtzeitig verteilt wurden (siehe <TextGroup><PlainText>Abbildung 4 </PlainText></TextGroup><ImgLink imgNo="4" imgType="figure"/>). Damit der Verlauf des JC erfolgreich ist, muss die Arbeitsatmosph&#228;re konstruktiv sein <TextLink reference="12"></TextLink>. Tats&#228;chlich empfanden etwa 100&#37; der Teilnehmenden des JC im Jahr 2017 die Arbeitsatmosph&#228;re als konstruktiv. Demgegen&#252;ber antworteten im Jahr 2016 nur 80 &#37; der teilnehmenden Personen mit &#8222;trifft eher zu&#8220; oder &#8222;trifft zu&#8220; (siehe Abbildung 4 <ImgLink imgNo="4" imgType="figure"/>).        </Pgraph><SubHeadline3>Konstruktive Diskussionen w&#228;hrend JC-Sitzungen</SubHeadline3><Pgraph>Ein wichtiger Teil des JC-Verlaufs sind die Diskussionen w&#228;hrend der Sitzungen <TextLink reference="17"></TextLink>. Daher wurden die Teilnehmenden gebeten, diese Diskussionen zu bewerten, mit dem Ziel festzustellen, ob sie bereichernd waren. Die Evaluationsergebnisse waren heterogen: In den Jahren 2015, 2016, 2018 und 2019 fanden etwa 75&#8211;80&#37; der Teilnehmenden, dass die Diskussionen w&#228;hrend der JC-Sitzungen hinreichend waren. Im Jahr 2017 hingegen empfanden sie mehr als 90&#37; der teilnehmenden Personen als bereichernd (siehe Abbildung 4 <ImgLink imgNo="4" imgType="figure"/>). Dass die Diskussionen ausgiebig waren, bedeutet nicht zwangsl&#228;ufig, dass sie auch fruchtbar waren. Daher wurde au&#223;erdem die Bewertung der Fruchtbarkeit der w&#228;hrend der JC-Sitzungen gef&#252;hrten Diskussionen erfasst. Die Auswertung der Antworten zeigte, dass das Ergebnis dem gleichen Trend folgte wie die Antworten auf die vorherige Frage nach der Bereicherung durch die Diskussionen, und die positiven Antworten erreichten im Jahr 2017 ihr Maximum (siehe Abbildung 4 <ImgLink imgNo="4" imgType="figure"/>).  </Pgraph><SubHeadline2>Evaluation des Lernprozesses</SubHeadline2><SubHeadline3>Erreichen der Lernziele</SubHeadline3><Pgraph>Hinsichtlich des Lernprozesses war es wichtig zu erfahren, wie die Promotionsstudierenden ihren eigenen Lernprozess bewerteten, den sie w&#228;hrend ihrer Teilnahme am JC durchliefen. Da Interesse ein ma&#223;geblicher Faktor beim Lernen zu sein scheint <TextLink reference="40"></TextLink>, wurden die Teilnehmenden gefragt, ob die JC-Pr&#228;sentationen ihnen interessante Lernziele boten. Die Auswertung ergab, dass zu Beginn des JC-Projekts in den Jahren 2015 und 2016 nur etwa 55&#37; der Teilnehmenden der Meinung waren, dass die Pr&#228;sentationen ihnen interessantes Lernmaterial liefern (siehe Abbildung 5 <ImgLink imgNo="5" imgType="figure"/>). Ab 2017 zeigte sich jedoch ein anderer Trend: Mehr als 80&#37; der teilnehmenden Personen fanden, dass der JC ihnen interessante Lerninhalte vermittelte. Dieser Trend setzte sich in den folgenden Jahren nahezu stabil fort (siehe Abbildung 5 <ImgLink imgNo="5" imgType="figure"/>). </Pgraph><SubHeadline3>Motivation f&#252;r kritisches Denken</SubHeadline3><Pgraph>In dieser Studie wurde nicht untersucht, wie sich die Teilnahme an einem JC auf die Entwicklung des kritischen Denkens der Promotionsstudierenden auswirkt. Dennoch sollte herausgestellt werden, wie die Teilnehmenden ihre Motivation f&#252;r kritischeres Denken &#252;ber das im JC besprochene Thema beurteilten. In den ersten beiden Jahren antworteten etwa 75&#37; der Teilnehmenden auf die Frage danach, ob sie motiviert waren kritischer zu denken, mit &#8222;trifft eher zu&#8220; oder &#8222;trifft zu&#8220;. Dieser prozentuale Anteil stieg ab 2017 und erreichte ein Maximum von 95&#37; (siehe Abbildung 5 <ImgLink imgNo="5" imgType="figure"/>). </Pgraph><SubHeadline3>Angemessener Informationsumfang zum Lernen</SubHeadline3><Pgraph>Der Umfang der bereitgestellten Informationen, die gelernt werden sollen, beeinflusst den Lernprozess. Daher wurden die Teilnehmenden gefragt, ob die Informationsmenge in jeder JC-Sitzung angemessen war. In den ersten Jahren der Evaluation der JC-Sitzungen gaben etwa 75&#37; der teilnehmenden Personen an, dass der Informationsumfang des JC angemessen war. Dieser Prozentsatz stieg in den folgenden Jahren auf ein Maximum von 95&#37; der Teilnehmenden im Jahr 2017 (siehe Abbildung 5 <ImgLink imgNo="5" imgType="figure"/>).   </Pgraph><SubHeadline2>Evaluation der Soft Skills der vortragenden Person w&#228;hrend der Pr&#228;sentation    </SubHeadline2><Pgraph>JC sind eine anerkannte Plattform f&#252;r die Entwicklung bestimmter Soft Skills (in den Bereichen Pr&#228;sentation, Leitung, Diskussion, Zeitmanagement, F&#252;hrung usw.) <TextLink reference="42"></TextLink>, die f&#252;r die wissenschaftliche Arbeitsf&#228;higkeit zweifelsohne bedeutsam sind. Daher evaluierten die Teilnehmenden die Soft Skills der vortragenden Person nach den JC-Sitzungen. Die Teilnehmenden waren im Allgemei<TextGroup><PlainText>n</PlainText></TextGroup>en der Meinung (95&#37; im Jahr 2015 und bis zu 100&#37; in den letzten beiden Beobachtungsjahren), dass die Vortragenden gut vorbereitet waren (siehe Abbildung 6 <ImgLink imgNo="6" imgType="figure"/>). Demgegen&#252;ber gaben nur 70&#8211;75&#37; der Teilnehmenden in den ersten Jahren, in denen der JC stattfand, an, dass die vortragende Person ihr Interesse weckte. Dieser prozentuale Anteil stieg jedoch in den folgenden Beobachtungsjahren auf 95&#37;. Das Ergebnis spiegelt sich auch in den n&#228;chsten Fragen wider. Diese lauteten, ob die vortra<TextGroup><PlainText>g</PlainText></TextGroup>ende Person ihnen eine Erkenntnis vermittelte und ob der Inhalt nachvollziehbar dargelegt wurde (siehe <TextGroup><PlainText>Abbildung 6 </PlainText></TextGroup><ImgLink imgNo="6" imgType="figure"/>). Dies unterstreicht die Bedeutung der Vortragsf&#228;higkeiten. Die Pr&#228;sentationsmethoden wurden zu Beginn des Evaluationszeitraums von 70&#8211;75&#37; der Teilnehmenden als gut empfunden. Ab 2017 stieg dieser Wert und blieb in den letzten Beobachtungsjahren stabil hoch (siehe Abbildung 6 <ImgLink imgNo="6" imgType="figure"/>). </Pgraph><Pgraph>Die Bedeutung der Diskussion wurde oben bereits dargelegt. Daf&#252;r gen&#252;gend Zeit einzur&#228;umen ist ebenfalls ein wichtiger Soft Skill, der den Bereichen Leitung, Zeitmanagement und F&#252;hrung zugeordnet werden kann. In allen Beobachtungsjahren beantworteten mindestens 95&#37; der Teilnehmenden die Aussage &#8222;Die vortragende Person lie&#223; gen&#252;gend Zeit f&#252;r Diskussion.&#8220; mit &#8222;trifft eher zu&#8220; und &#8222;trifft zu&#8220; (siehe Abbildung 6 <ImgLink imgNo="6" imgType="figure"/>). Dar&#252;ber hinaus ist Kollegialit&#228;t als Teil von F&#252;hrungsqualit&#228;t im Rahmen von JC wichtig <TextLink reference="13"></TextLink>. So empfanden fast alle Teilnehmenden die Vortragenden w&#228;hrend der JC-Sitzungen als kollegial (siehe Abbildung 6 <ImgLink imgNo="6" imgType="figure"/>).</Pgraph><SubHeadline2>Evaluation der Wahrnehmung der anderen Teilnehmenden der JC-Sitzungen durch ihre Kolleginnen und Kollegen</SubHeadline2><Pgraph>Schlie&#223;lich sollte herausgestellt werden, wie die Teilnehmenden ihre Kolleginnen und Kollegen wahrnahmen, die mit ihnen an den JC-Sitzungen teilnahmen. Im Jahr 2016 hatten nur etwa 60&#37; der Teilnehmenden den Eindruck, dass der vor der JC-Sitzung verteilte Artikel gelesen wurde; 2015 waren es demgegen&#252;ber 85&#37; (siehe Abbildung 7 <ImgLink imgNo="7" imgType="figure"/>). Fast die gleiche prozentuale Verteilung wurde f&#252;r die Aussagen &#8222;Die Teilnehmenden wirken aufmerksam und interessiert.&#8220; und &#8222;Die Teilnehmenden stellen konkrete und relevante Fragen.&#8220; verzeichnet (siehe Abbildung 7 <ImgLink imgNo="7" imgType="figure"/>). </Pgraph><Pgraph>Positives Feedback motiviert extrinsisch und f&#246;rdert das Selbstwertgef&#252;hl <TextLink reference="43"></TextLink>. Im Kontext eines JC ist Feedback ein starker Motivator vorzutragen und vor allem gut vorzutragen. Daher wurde gepr&#252;ft, ob die Vortragenden w&#228;hrend der JC-Sitzung von den Teilnehmenden Feedback erhielten. Zu Beginn des Evaluationszeitraums nahmen nur etwa 50&#37; der teilnehmenden Personen wahr, dass die Vortragenden Feedback erhielten. Doch ab 2017 &#228;nderte sich dies und 75&#8211;90&#37; der Teilnehmenden gaben ab, dass die vortragenden Personen tats&#228;chlich Feedback von ihren Kolleginnen und Kollegen bekamen.        </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Discussion">
      <MainHeadline>Discussion</MainHeadline><Pgraph>JC seminars are becoming more and more important not only in the context of spreading scientific information but also in the field of education. As such, this seminar format is increasingly popular for training post-graduate students especially in structured post-graduated curricula. As mentioned before, the number of participants can be a criterion to measure JC effectiveness. However, this measure can only be used when JC seminars are not compulsory to attend. We know from the systematic review of Deenadayalan and colleagues <TextLink reference="17"></TextLink> that the number of participants can vary in the range of 12 to 135. In the case of our JC events, where a minimum attendance rate is obligatory, we have a lower number of participants. When attendance is not compulsory, we think that the attendance and number of participants depend on many factors: number of research groups, time-frame of events, topic etc. This point must be considered when planning to include JC seminars in curricula.     </Pgraph><Pgraph>Even though Deenadayalan et al. mentions that evaluation of JC effectiveness should be specifically related to the paper discussed <TextLink reference="17"></TextLink>, we think that the participants&#8217; positive perception of the JC as a whole as well as the knowledge that they are gaining important skills which are not directly related to the paper (i.e. soft-skills), are also important to increase the motivation of students to attend JC sessions. This is an important point because JC sessions, as in our case, are not always a non-obligatory event. Making attendance a prerequisite for graduation could make JC an unpopular activity. On the contrary, our work presents evidence that such seminars are actually well perceived by participants. This result indicates that the general meaning and value of the JC is well-understood by participants <TextLink reference="18"></TextLink>. Furthermore, a high percentage of participants deemed the working atmosphere constructive and mentioned that it was worthwhile to participate in JC sessions.   </Pgraph><Pgraph>Keeping in mind that a JC should ideally contribute constructive inputs to scientific everyday life, choosing an appropriate article is believed to be another important factor of JC effectiveness <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>, <TextLink reference="17"></TextLink>. Important criteria that can be used to choose an article include whether it represents a recurring topic and whether it is relevant to the work of other participants. If the topic of the presentation has been positively evaluated, this correlates to a higher percentage of participants, finding that the theme of the JC is related to their own specific research topic. In our case, these data were easy to interpret, since the designated speakers were free to choose the paper themselves after a consultation with their supervisors. Therefore, the topic of the presentation was related to their own research topic. However, the research groups in our Department are heterogenous and thereby have different scientific interests. Therefore, according to our expectations, the evaluation results revealed that the scientific topics often had only a low relevance to the individual participant&#8217;s scientific topic. However, we recommend that organizers of JC seminars strategically define the criteria for choosing publications for discussion so that all participants will benefit even in the context of scientific heterogeneity of the hosting department.   </Pgraph><Pgraph>The above-mentioned heterogeneity of participants from different working groups raises the question of whether an effective JC can be attained in this circumstance. On one hand, Deenadayalan et al. recommend that the chosen paper should cover the particular interest area of all participants <TextLink reference="17"></TextLink> and on the other hand, Lonsdale et al. writes that &#8220;Multidisciplinary is not a dirty word&#8221; (p. 3) and to &#8220;Let your topics be as diverse as your members&#8221; (p. 4) <TextLink reference="13"></TextLink>. We share the opinion of Lonsdale and colleagues, since the heterogeneity of a (learning) group can promote the learning process evoking different interests and increase motivation to attend.</Pgraph><Pgraph>In fact, Deenadayalan et al did not provide a definitive answer to the question about the importance and necessity to distribute the paper prior the JC session. However, they recommend to provide all participants with enough time for reading <TextLink reference="17"></TextLink>. Nevertheless, the amount of time that is considered enough is not defined. Our participants have been instructed to send their paper of choice by e-mail at least one week before the JC session. Nearly all participants have responded that this amount of time was enough for preparation. Therefore, we recommend distributing papers to be discussed a minimum of 7 days before the event. </Pgraph><Pgraph>Taking into consideration the learning process of participants, there are some investigations dealing with learning outcomes. This research was summarized in the systematic review by Deenadayalan et al. They concluded that some data showed significant improvement of professional skills (i.e. biostatistics) or even of critical appraisal abilities <TextLink reference="17"></TextLink>. We wanted to understand how participants perceive their own learning process due to JC. As interest is a motivator of learning <TextLink reference="40"></TextLink>, we were curious to know whether participants have a feeling that the JC presentation can supply them with interesting learning objectives. Interestingly, at the beginning of the evaluation only half of the participants found that the presentation is of interest in the context of their learning objectives, but from the third year of the evaluation, this percentage of respondents increased. Richness and productivity of discussions could be factors that make a JC successful and contribute to the learning processes. However, to our knowledge, there is no data about perception of discussion during a JC session in the literature so far. Our evaluation revealed that in our case about two-thirds of the participants found discussion during JC sessions rich and productive. The impact of discussions during JC sessions on its effectiveness should be investigated further in the future, especially in the context of learning processes.</Pgraph><Pgraph>As mentioned before, we did not aim to analyze the influence of JC sessions on the development of critical thinking in our participants. Instead, we wanted to survey their self-assessment of whether or not JC participation can motivate them to think more critically about the literature read. While only half of all participants rated themselves well at the beginning of the evaluation period, the percentage rating themselves as being more motivated to think more critically increased as time progressed. This perception of self-motivation to think more critically is in line with research data showing that JC indeed improves critical appraisal of literature by participants <TextLink reference="17"></TextLink> as part of a whole critical thinking process. </Pgraph><Pgraph>Another interesting point to discuss is how much information could be delivered and processed by participants during a JC session. If we overload participants with a huge amount of information, they would not be able to deal optimally with the complexity of the matter, especially as participants are not established scientists yet. From the other side, the amount of information must be enough to motivate their learning. The results of the evaluation show that in our case, most of the participants think that they were getting enough information to be challenged but not too much such that they are overwhelmed. This topic about how to convey an appropriate amount of information during a JC session should be also investigated in future. </Pgraph><Pgraph>Soft-skills are indispensable prerequisites for lifelong learning and as such are important for future employability <TextLink reference="44"></TextLink> and they can be promoted through a JC <TextLink reference="13"></TextLink>, <TextLink reference="16"></TextLink>. From our work, it can be seen that the soft-skills of speakers in general as perceived by the participants had improved with practice. Therefore, we can agree with Fowler, Lonsdale and their colleagues that soft-skills can also be developed by participation in a JC as a speaker. However, pre- and post-survey analyses are needed to support this statement.    </Pgraph><Pgraph>The attitude of colleagues participating in JC sessions can be motivating or even de-motivating for participants. Therefore, an interesting part of our questionnaire was an evaluation of the participants&#39; perception of their colleagues in the JC session. By analyzing the evaluation form, we learned that there is a feeling that the papers distributed for preparation were not always read. This result is in contrast to the evidence that one week for preparation for JC is enough. Therefore, more research is needed to understand this contradiction. Nevertheless, this fact did not impair the interest of the students to take part in the event. Finally, the evaluation showed that feedback was still desired. </Pgraph><SubHeadline2>Implications for implementation of a journal club</SubHeadline2><Pgraph>An important implication from our work is the importance of regularly evaluating JC. However, the exact data collected for evaluation should be defined by the organizers of the JC based on their desired purposes and learning outcomes. Based on our requirements and aims formulated as mentioned previously, we created a questionnaire that could serve as a template for other institutions. Finally, carrying out goal-setting workshops before the official start of JC and ensuring that the JC is supervised by someone experienced, who holds teaching qualifications for university education, is highly recommended.  </Pgraph><SubHeadline2>Strengths and limitations </SubHeadline2><Pgraph>This study has certain limitations: Firstly, it was conducted in a one-center setting making generalization of the results obtained challenging. Secondly, the value of the Cronbach alpha coefficient was more than 0.95 which might point to a certain amount of redundancy between questions. Thirdly, we had new students matriculating and final year students graduating in the examined period, therefore we cannot conclusively say that the effects seen were due to an improvement of the participants&#8217; skills during the time. We also cannot exclude that this effect could be attributed to the extrinsic motivations of the participants. Finally, the questionnaire was designed to be completely anonymous; therefore, the demographics were neither collected nor analyzed, which might also have an impact on the generalizability of the results. The important strengths of this study are the high number of JC sessions evaluated as well as the longitudinal observation. Due to these strengths, we saw a clear trend of improved perception of JC sessions from the beginning of the evaluations in practically all of the items in the questionnaire.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Diskussion">
      <MainHeadline>Diskussion</MainHeadline><Pgraph>JC-Seminare gewinnen zunehmend an Bedeutung &#8211; nicht nur im Kontext der Verbreitung wissenschaftlicher Informationen, sondern auch im Ausbildungsbereich. So wird dieses Seminarformat auch f&#252;r die Postgraduiertenausbildung, insbesondere in strukturierten Postgraduierten-Curricula, immer beliebter. Wie bereits erw&#228;hnt ist die Anzahl der Teilnehmenden eine Kennzahl f&#252;r die Messung der Effektivit&#228;t von JC. Sie kann jedoch nur verwendet werden, wenn die Teilnahme an den JC-Seminaren nicht verpflichtend ist. Laut der systematischen &#220;bersichtsarbeit von Deenadayalan et al. <TextLink reference="17"></TextLink> kann die Anzahl der Teilnehmenden zwischen 12 und 135 liegen. F&#252;r die im Rahmen dieser Arbeit untersuchten JC-Veranstaltungen gab es eine Mindestanwesenheitsquote und die Anzahl der Teilnehmer war geringer. Ist die Teilnahme nicht verpflichtend, h&#228;ngen die Teilnahme und die Anzahl der Teilnehmenden nach Meinung der Autorinnen und Autoren dieser Arbeit von vielen Faktoren ab: Anzahl der Forschungsgruppen, Zeitrahmen der Veranstaltungen, Thema usw. Diese Faktoren m&#252;ssen ber&#252;cksichtigt werden, wenn JC-Seminare in die Curricula integriert werden sollen.     </Pgraph><Pgraph>Zwar merken Deenadayalan et al. an, dass sich die Bewertung der Effektivit&#228;t des JC speziell auf den besprochenen Artikel beziehen sollte <TextLink reference="17"></TextLink>, doch nach Meinung der Autorinnen und Autoren dieser Arbeit sind die positive Wahrnehmung des JC insgesamt sowie das Wissen, das die Teilnehmende des JC sich aneignen, und wichtige F&#228;higkeiten, die nicht direkt mit dem Artikel in Zusammenhang stehen (d. h. Soft Skills), f&#252;r die Steigerung der Motivation zur Teilnahme an den JC-Sitzungen ebenfalls wichtig. Das ist ein wesentlicher Aspekt, denn die JC-Sitzungen sind, wie im Falle des in dieser Arbeit betrachteten JC, nicht immer fakultativ. Wird die Teilnahme Voraussetzung f&#252;r die Promotion, kann der JC zu einer unliebsamen Veranstaltung werden. Vielmehr liefert diese Arbeit Belege daf&#252;r, dass diese Seminare von den Teilnehmenden tats&#228;chlich positiv wahrgenommen werden. Dieses Ergebnis zeigt, dass die Teilnehmenden die allgemeine Bedeutung und den Nutzen des JC genau kennen <TextLink reference="18"></TextLink>. Dar&#252;ber hinaus empfand ein hoher Prozentsatz der Teilnehmenden die Arbeitsatmosph&#228;re als konstruktiv und die Teilnahme an den JC-Sitzungen als wertvoll.   </Pgraph><Pgraph>Da ein JC idealerweise konstruktive Anregungen f&#252;r den wissenschaftlichen Alltag liefern sollte, wird die Auswahl eines geeigneten Artikels als weiterer wichtiger Faktor f&#252;r die Effektivit&#228;t des JC betrachtet <TextLink reference="12"></TextLink>, <TextLink reference="13"></TextLink>, <TextLink reference="17"></TextLink>. Bei der Auswahl des Artikels sollte beispielsweise ber&#252;cksichtigt werden, ob er ein aktuelles Thema behandelt und ob er f&#252;r die Arbeit der anderen Teilnehmenden relevant ist. Eine positive Bewertung des Themas der Pr&#228;sentation korreliert mit einem h&#246;heren prozentualen Anteil Teilnehmender, die angaben, dass das Thema des JC Bezug zu ihrem eigenen spezifischen Forschungsthema hatte. Die f&#252;r diese Arbeit erfassten Daten hierzu konnten leicht interpretiert werden, da die Vortragenden ihre Artikel nach R&#252;cksprache mit der Betreuerin oder dem Betreuer selbst w&#228;hlen konnten. Daher hatte das Thema der Pr&#228;sentation Bezug zu ihrem eigenen Forschungsthema. Die Forschungsgruppen an der Klinik, in der die Studie zu dieser Arbeit durchgef&#252;hrt wurde, sind heterogen, sodass die Forschenden unterschiedliche wissenschaftliche Interessenschwerpunkte haben. Deshalb zeigten die Evaluationsergebnisse erwartungsgem&#228;&#223;, dass die wissenschaftlichen Themen h&#228;ufig nur wenig Relevanz f&#252;r die individuellen Forschungsthemen der Teilnehmenden hatten. Es wird daher empfohlen, dass die Verantwortlichen f&#252;r die JC-Seminare die Kriterien f&#252;r die Auswahl der Ver&#246;ffentlichungen f&#252;r die Diskussion strategisch definieren, sodass alle Teilnehmenden davon profitieren k&#246;nnen &#8211; selbst bei Forschungsheterogenit&#228;t an der Gastabteilung.   </Pgraph><Pgraph>Diese Heterogenit&#228;t der Teilnehmenden aus verschiedenen Arbeitsgruppen wirft die Frage auf, ob unter diesen Umst&#228;nden ein effektiver JC verwirklicht werden kann. Deenadayalan et al. empfehlen einerseits, dass der gew&#228;hlte Artikel den Interessenbereich aller Teilnehmenden abdecken sollte <TextLink reference="17"></TextLink>; Lonsdale et al. schreiben demgegen&#252;ber, &#8222;Multidisciplinary is not a dirty word&#8220; (S. 3), und &#8222;Let your topics be as diverse as your members&#8220; (S. 4) <TextLink reference="13"></TextLink>. Die Autorinnen und Autoren dieser Arbeit schlie&#223;en sich der Meinung von Lonsdale et al. an, da die Heterogenit&#228;t einer (Lern-)Gruppe den Lernprozess f&#246;rdern kann, indem unterschiedliche Interessen geweckt werden, und dar&#252;ber hinaus die Motivation zur Teilnahme steigern kann.</Pgraph><Pgraph>Deenadayalan et al. beantworteten die Frage nach der Bedeutung und Notwendigkeit der Verteilung des Artikels vor der JC-Sitzung nicht abschlie&#223;end. Sie empfehlen jedoch, allen Teilnehmenden gen&#252;gend Zeit zum Lesen einzur&#228;umen <TextLink reference="17"></TextLink>. Wie lang diese Zeitspanne sein sollte, wird allerdings nicht definiert.  Die Teilnehmenden wurden im Rahmen dieser Studie angewiesen, den gew&#228;hlten Artikel per E-Mail mindestens eine Woche vor der JC-Sitzung zu versenden. Fast alle Teilnehmenden gaben an, dass dieser Zeitraum f&#252;r die Vorbereitung ausreichte. Daher wird empfohlen, die zu besprechenden Artikel mindestens sieben Tage vor der Veranstaltung zu verteilen. </Pgraph><Pgraph>Es gibt Untersuchungen zu Lernergebnissen, die auch den Lernprozess der Teilnehmenden betrachten. Diese Forschung wurde in der systematischen &#220;bersichtsarbeit von Deenadayalan et al. besprochen. Sie stellten fest, dass einige Daten eine signifikante Verbesserung der fachlichen F&#228;higkeiten (d. h. Biostatistik) oder sogar der F&#228;higkeiten zur kritischen Auseinandersetzung zeigten <TextLink reference="17"></TextLink>. Im Rahmen der f&#252;r diese Arbeit durchgef&#252;hrten Studie sollte untersucht werden, wie die Teilnehmenden ihren eigenen Lernprozess w&#228;hrend des JC wahrnahmen. Da Interesse die Lernmotivation steigert <TextLink reference="40"></TextLink>, sollte in dieser Studie herausgefunden werden, ob die JC-Pr&#228;sentationen den Teilnehmenden interessante Lernziele lieferten. Interessanterweise gab zu Beginn der Evaluation nur die H&#228;lfte der Teilnehmenden an, dass die Pr&#228;sentation vor dem Hintergrund ihrer Lernziele f&#252;r sie von Interesse ist. Ab dem dritten Evaluationsjahr stieg dieser Prozentsatz jedoch. Die Bereicherung und die Fruchtbarkeit, die die Diskussionen mit sich bringen, k&#246;nnen f&#252;r den Erfolg eines JC ausschlaggebend sein und den Lernprozess unterst&#252;tzen. Soweit bekannt gibt es in der Literatur bisher keine Daten zur Wahrnehmung der Diskussion w&#228;hrend einer JC-Sitzung. Die Auswertung dieser Studie ergab, dass zwei Drittel der Teilnehmenden die Diskussionen w&#228;hrend der Sitzungen bereichernd und fruchtbar fanden. Der Einfluss der w&#228;hrend der JC-Sitzungen gef&#252;hrten Diskussionen auf die Effektivit&#228;t des JC sollte zuk&#252;nftig weiter erforscht werden, insbesondere im Kontext der Lernprozesse.</Pgraph><Pgraph>Wie bereits erw&#228;hnt wurde im Rahmen dieser Arbeit nicht untersucht, wie sich die Teilnahme an einem JC auf die Entwicklung des kritischen Denkens der Teilnehmenden auswirkt. Das Ziel war es stattdessen, ihre Selbsteinsch&#228;tzung dazu zu erheben, ob sie die JC-Teilnahme motivieren konnte, die Literatur kritischer zu lesen. W&#228;hrend sich zu Beginn des Evaluationszeitraums nur die H&#228;lfte der Teilnehmenden positiv einsch&#228;tzte, stieg im Laufe der Zeit der Prozentsatz der Teilnehmenden, die angaben, mehr Motivation f&#252;r kritischeres Denken zu haben. Die Wahrnehmung von Selbstmotivation f&#252;r kritischeres Denken steht im Einklang mit Forschungsdaten, die zeigen, dass JC die F&#228;higkeiten der Teilnehmenden zur kritischen Auseinandersetzung mit der Literatur als Teil eines insgesamt kritischen Denkprozesses tats&#228;chlich verbessern <TextLink reference="17"></TextLink>. </Pgraph><Pgraph>Ein weiterer interessanter Diskussionspunkt ist die Informationsmenge, die von den Teilnehmenden w&#228;hrend einer JC-Sitzung gegeben und verarbeitet werden kann. Werden zu viele Informationen &#252;bermittelt, k&#246;nnen die Teilnehmenden die Komplexit&#228;t der Materie nicht optimal erfassen, vor allem weil sie noch keine etablierten Wissenschaftlerinnen und Wissenschaftler sind. Dennoch muss der Umfang der Informationen ausreichen, um sie zum Lernen zu motivieren. Die Evaluationsergebnisse zeigen, dass die meisten Teilnehmenden im Rahmen dieser Studie durch die Informationsmenge gefordert, jedoch nicht &#252;berfordert waren. Der geeignete Informationsumfang f&#252;r eine JC-Sitzung sollte ebenfalls in Zukunft untersucht werden. </Pgraph><Pgraph>Soft Skills sind unverzichtbare Voraussetzung f&#252;r lebenslanges Lernen und somit auch f&#252;r die k&#252;nftige Besch&#228;ftigungsf&#228;higkeit <TextLink reference="44"></TextLink>, und sie k&#246;nnen im Rahmen eines JC gef&#246;rdert werden <TextLink reference="13"></TextLink>, <TextLink reference="16"></TextLink>. In der f&#252;r diese Arbeit durchgef&#252;hrten Studie nahmen die Teilnehmenden wahr, dass sich die Soft Skills der vortragenden Personen allgemein durch &#220;bung verbesserten. Daher stimmen die Autorinnen und Autoren mit Fowler et al. und Lonsdale et al. &#252;berein, dass durch das Vortragen bei einem JC die Soft Skills gest&#228;rkt werden k&#246;nnen. Zur Untermauerung dieser Aussage m&#252;ssen jedoch vor und nach der Befragung erhobene Daten ausgewertet werden.    </Pgraph><Pgraph>Die Einstellung der Kolleginnen und Kollegen w&#228;hrend einer JC-Sitzung kann die Motivation der Teilnehmenden beeinflussen. Daher betraf ein interessanter Teil des Fragebogens die Evaluation der Wahrnehmung des Kollegiums durch die Teilnehmenden w&#228;hrend der JC-Sitzung. Die Auswertung ergab, dass der Eindruck entstand, die vorzubereitenden Artikel wurden nicht gelesen. Dieses Ergebnis steht der Erkenntnis entgegen, dass eine Woche Vorbereitungszeit f&#252;r den JC ausreicht. Um diesen Widerspruch aufzukl&#228;ren, ist mehr Forschung n&#246;tig. Diese Tatsache wirkte sich indessen nicht auf das Interesse der Doktorandinnen und Doktoranden an dieser Veranstaltung aus. Schlie&#223;lich zeigte die Auswertung, dass Feedback noch immer erw&#252;nscht ist. </Pgraph><SubHeadline2>Folgerungen f&#252;r die Umsetzung eines Journal Clubs</SubHeadline2><Pgraph>Eine wichtige Erkenntnis dieser Arbeit ist, dass der JC regelm&#228;&#223;ig evaluiert werden sollte. Die Daten, die bei der Evaluation erhoben werden sollen, m&#252;ssen von den Verantwortlichen des JC jedoch genau definiert werden und sollten auf den angestrebten Zielen und Lernergebnissen beruhen. Auf Grundlage der bereits genannten im Rahmen dieser Arbeit formulierten Anforderungen und Ziele wurde ein Fragebogen erstellt, der anderen Einrichtungen als Vorlage dienen kann. Schlie&#223;lich wird dringend empfohlen, vor dem offiziellen Beginn des JC Workshops zu veranstalten, in deren Rahmen die Ziele vereinbart werden, und den JC unter die Leitung einer erfahrenen hochschuldidaktisch qualifizierten Person zu stellen.  </Pgraph><SubHeadline2>St&#228;rken und Einschr&#228;nkungen </SubHeadline2><Pgraph>Die Studie weist gewisse Einschr&#228;nkungen auf: Erstens wurde sie monozentrisch durchgef&#252;hrt, wodurch eine Generalisierung der Ergebnisse schwierig ist. Zweitens deutet der Cronbachs-Alpha-Koeffizient von &#252;ber 0,95 m&#246;glicherweise auf eine gewisse Redundanz zwischen den Fragen hin. Drittens nahmen sowohl Studierende teil, die am Anfang ihrer Promotion standen, als auch Studierende, die im Untersuchungszeitraum ihre Promotion abschlossen. Daher kann nicht abschlie&#223;end dargelegt werden, dass die beobachteten Effekte auf die Verbesserung der F&#228;higkeiten der Teilnehmenden im Laufe der Zeit zur&#252;ckzuf&#252;hren sind. Au&#223;erdem kann nicht ausgeschlossen werden, dass die Effekte auf der extrinsischen Motivation der Teilnehmenden beruhen. Schlie&#223;lich erfolgte die Evaluation &#252;ber den Fragebogen vollst&#228;ndig anonym; die demografischen Daten wurden daher weder erfasst noch ausgewertet. Dies k&#246;nnte die Generalisierbarkeit der Ergebnisse ebenfalls beeintr&#228;chtigen. Bedeutsame St&#228;rken der Studie sind die hohe Anzahl der evaluierten JC-Sitzungen sowie die longitudinale Beobachtung. Diese St&#228;rken erm&#246;glichten den Nachweis eines eindeutigen positiven Trends bei der Wahrnehmung der JC-Sitzungen ab Beginn der Evaluation bei fast allen Items des Fragebogens.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Conclusions">
      <MainHeadline>Conclusions</MainHeadline><Pgraph>Based on the analyzed evaluations, we can conclude that journal club events are highly valued by participants and could be a good option for the development of certain soft-skills.      </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Schlussfolgerungen">
      <MainHeadline>Schlussfolgerungen</MainHeadline><Pgraph>Auf Grundlage der ausgewerteten Evaluationen kann geschlussfolgert werden, dass Journal-Club-Seminare von den Teilnehmenden sehr gesch&#228;tzt werden und eine sinnvolle M&#246;glichkeit f&#252;r die Entwicklung bestimmter Soft Skills sind.      </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Abbreviations">
      <MainHeadline>Abbreviations</MainHeadline><Pgraph><UnorderedList><ListItem level="1">ISO &#61; International Organization for Standardization</ListItem><ListItem level="1">JC &#61; Journal club</ListItem><ListItem level="1">LMU &#61; Ludwig-Maximilians-University </ListItem><ListItem level="1">MD &#61; medical doctor</ListItem></UnorderedList></Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Abk&#252;rzungen">
      <MainHeadline>Abk&#252;rzungen</MainHeadline><Pgraph><UnorderedList><ListItem level="1">ISO &#61; Internationale Organisation f&#252;r Normung</ListItem><ListItem level="1">JC &#61; Journal Club</ListItem><ListItem level="1">LMU &#61; Ludwig-Maximilians-Universit&#228;t </ListItem></UnorderedList></Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Acknowledgements">
      <MainHeadline>Acknowledgements</MainHeadline><Pgraph>The authors would like to thank Ms. Dana Dacian for her excellent administrative assistance in the organization of journal club sessions. We acknowledge Prof. Dr. Matthias Siebeck for his valuable advice regarding data presentation. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Danksagung">
      <MainHeadline>Danksagung</MainHeadline><Pgraph>Die Autorinnen und Autoren bedanken sich bei Frau Dana Dacian f&#252;r ihre hervorragende administrative Unterst&#252;tzung bei der Organisation der Journal-Club-Sitzungen sowie bei Herrn Prof. Dr. Matthias Siebeck f&#252;r seine wertvollen Ratschl&#228;ge zur Darstellung der Daten. Gro&#223;er Dank geht an Frau Heike Ruttloff f&#252;r die &#220;bersetzung des Manuskriptes. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>The authors declare that they have no competing interests.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>Die Autor&#42;innen erkl&#228;ren, dass sie keinen Interessenkonflikt im Zusammenhang mit diesem Artikel haben.</Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Topf JM</RefAuthor>
        <RefAuthor>Sparks MA</RefAuthor>
        <RefAuthor>Phelan PJ</RefAuthor>
        <RefAuthor>Shah N</RefAuthor>
        <RefAuthor>Lerma EV</RefAuthor>
        <RefAuthor>Graham-Brown MPM</RefAuthor>
        <RefAuthor>Madariaga H</RefAuthor>
        <RefAuthor>Iannuzzella F</RefAuthor>
        <RefAuthor>Rheault MN</RefAuthor>
        <RefAuthor>Oates T</RefAuthor>
        <RefAuthor>Jhaveri KD</RefAuthor>
        <RefAuthor>Hiremath S</RefAuthor>
        <RefTitle>The Evolution of the Journal Club: From Osler to Twitter</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>Am J Kidney Dis</RefJournal>
        <RefPage>827-836</RefPage>
        <RefTotal>Topf JM, Sparks MA, Phelan PJ, Shah N, Lerma EV, Graham-Brown MPM, Madariaga H, Iannuzzella F, Rheault MN, Oates T, Jhaveri KD, Hiremath S. The Evolution of the Journal Club: From Osler to Twitter. Am J Kidney Dis. 2017;69(6):827-836. DOI: 10.1053&#47;j.ajkd.2016.12.012</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1053&#47;j.ajkd.2016.12.012</RefLink>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Linzer M</RefAuthor>
        <RefTitle>The journal club and medical education: over one hundred years of unrecorded history</RefTitle>
        <RefYear>1987</RefYear>
        <RefJournal>Postgrad Med J</RefJournal>
        <RefPage>475-478</RefPage>
        <RefTotal>Linzer M. The journal club and medical education: over one hundred years of unrecorded history. Postgrad Med J. 1987;63(740):475-478. DOI: 10.1136&#47;pgmj.63.740.475</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1136&#47;pgmj.63.740.475</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Struck BD</RefAuthor>
        <RefAuthor>Bernard MA</RefAuthor>
        <RefAuthor>Teasdale TA</RefAuthor>
        <RefAuthor>Oklahoma University Geriatric Education G</RefAuthor>
        <RefTitle>Effect of a mandatory geriatric medicine clerkship on third-year students</RefTitle>
        <RefYear>2005</RefYear>
        <RefJournal>J Am Geriatr Soc</RefJournal>
        <RefPage>2007-2011</RefPage>
        <RefTotal>Struck BD, Bernard MA, Teasdale TA, Oklahoma University Geriatric Education G. Effect of a mandatory geriatric medicine clerkship on third-year students. J Am Geriatr Soc. 2005;53(11):2007-2011. DOI: 10.1111&#47;j.1532-5415.2005.00473.x</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;j.1532-5415.2005.00473.x</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>Kleinpell RM</RefAuthor>
        <RefTitle>Rediscovering the value of the journal club</RefTitle>
        <RefYear>2002</RefYear>
        <RefJournal>Am J Crit Care</RefJournal>
        <RefPage>412, 414</RefPage>
        <RefTotal>Kleinpell RM. Rediscovering the value of the journal club. Am J Crit Care. 2002;11(5):412, 414. DOI: 10.4037&#47;ajcc2002.11.5.412</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.4037&#47;ajcc2002.11.5.412</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Bounds R</RefAuthor>
        <RefAuthor>Boone S</RefAuthor>
        <RefTitle>The Flipped Journal Club</RefTitle>
        <RefYear>2018</RefYear>
        <RefJournal>West J Emerg Med</RefJournal>
        <RefPage>23-27</RefPage>
        <RefTotal>Bounds R, Boone S. The Flipped Journal Club. West J Emerg Med. 2018;19(1):23-27. DOI: 10.5811&#47;westjem.2017.11.34465</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.5811&#47;westjem.2017.11.34465</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>Laranjeira C</RefAuthor>
        <RefAuthor>Querido AI</RefAuthor>
        <RefAuthor>Valentim O</RefAuthor>
        <RefTitle>Using an Online Journal Club to Improve Evidence-Based Practice in Mental Health Nursing Students</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>J Nurs Educ</RefJournal>
        <RefPage>723-724</RefPage>
        <RefTotal>Laranjeira C, Querido AI, Valentim O. Using an Online Journal Club to Improve Evidence-Based Practice in Mental Health Nursing Students. J Nurs Educ. 2020;59(12):723-724. DOI: 10.3928&#47;01484834-20201118-13</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3928&#47;01484834-20201118-13</RefLink>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Leri AC</RefAuthor>
        <RefTitle>A remote undergraduate biology seminar on SARS-CoV-2 literature</RefTitle>
        <RefYear>2021</RefYear>
        <RefJournal>Biochem Mol Biol Educ</RefJournal>
        <RefPage>313-315</RefPage>
        <RefTotal>Leri AC. A remote undergraduate biology seminar on SARS-CoV-2 literature. Biochem Mol Biol Educ. 2021;49(3):313-315. DOI: 10.1002&#47;bmb.21503</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1002&#47;bmb.21503</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Rezvani M</RefAuthor>
        <RefAuthor>Smith GA</RefAuthor>
        <RefAuthor>Majzoub JA</RefAuthor>
        <RefAuthor>Durbin AD</RefAuthor>
        <RefAuthor>Winn AS</RefAuthor>
        <RefTitle>A resident-led virtual journal club to educate pediatric residents about COVID-19</RefTitle>
        <RefYear>2021</RefYear>
        <RefJournal>Acad Pediatr</RefJournal>
        <RefPage>759-761</RefPage>
        <RefTotal>Rezvani M, Smith GA, Majzoub JA, Durbin AD, Winn AS. A resident-led virtual journal club to educate pediatric residents about COVID-19. Acad Pediatr. 2021;21(4):759-761. DOI: 10.1016&#47;j.acap.2021.02.010</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.acap.2021.02.010</RefLink>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>Kirchhoff KT</RefAuthor>
        <RefAuthor>Beck SL</RefAuthor>
        <RefTitle>Using the journal club as a component of the research utilization process</RefTitle>
        <RefYear>1995</RefYear>
        <RefJournal>Heart Lung</RefJournal>
        <RefPage>246-250</RefPage>
        <RefTotal>Kirchhoff KT, Beck SL. Using the journal club as a component of the research utilization process. Heart Lung. 1995;24(3):246-250. DOI: 10.1016&#47;S0147-9563(05)80044-5</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;S0147-9563(05)80044-5</RefLink>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Dwarakanath LS</RefAuthor>
        <RefAuthor>Khan KS</RefAuthor>
        <RefTitle>Modernizing the journal club</RefTitle>
        <RefYear>2000</RefYear>
        <RefJournal>Hosp Med</RefJournal>
        <RefPage>425-427</RefPage>
        <RefTotal>Dwarakanath LS, Khan KS. Modernizing the journal club. Hosp Med. 2000;61(6):425-427. DOI: 10.12968&#47;hosp.2000.61.6.1360</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.12968&#47;hosp.2000.61.6.1360</RefLink>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Letterie GS</RefAuthor>
        <RefAuthor>Morgenstern LS</RefAuthor>
        <RefTitle>The journal club. Teaching critical evaluation of clinical literature in an evidence-based environment</RefTitle>
        <RefYear>2000</RefYear>
        <RefJournal>J Reprod Med</RefJournal>
        <RefPage>299-304</RefPage>
        <RefTotal>Letterie GS, Morgenstern LS. The journal club. Teaching critical evaluation of clinical literature in an evidence-based environment. J Reprod Med. 2000;45(4):299-304.</RefTotal>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>Esisi M</RefAuthor>
        <RefTitle>Journal clubs</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>BMJ</RefJournal>
        <RefPage>s138</RefPage>
        <RefTotal>Esisi M. Journal clubs. BMJ. 2007;335:s138. DOI: 10.1136&#47;bmj.39337.722917.7D</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1136&#47;bmj.39337.722917.7D</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Lonsdale A</RefAuthor>
        <RefAuthor>Sietsma Penington J</RefAuthor>
        <RefAuthor>Rice T</RefAuthor>
        <RefAuthor>Walker M</RefAuthor>
        <RefAuthor>Dashnow H</RefAuthor>
        <RefTitle>Ten Simple Rules for a Bioinformatics Journal Club</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>PLoS Comput Biol</RefJournal>
        <RefPage>e1004526</RefPage>
        <RefTotal>Lonsdale A, Sietsma Penington J, Rice T, Walker M, Dashnow H. Ten Simple Rules for a Bioinformatics Journal Club. PLoS Comput Biol. 2016;12(1):e1004526. DOI: 10.1371&#47;journal.pcbi.1004526</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1371&#47;journal.pcbi.1004526</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Milbrandt EB</RefAuthor>
        <RefAuthor>Vincent JL</RefAuthor>
        <RefTitle>Evidence-based medicine journal club</RefTitle>
        <RefYear>2004</RefYear>
        <RefJournal>Crit Care</RefJournal>
        <RefPage>401-402</RefPage>
        <RefTotal>Milbrandt EB, Vincent JL. Evidence-based medicine journal club. Crit Care. 2004;8(6):401-402. DOI: 10.1186&#47;cc3005</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;cc3005</RefLink>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>Ahmadi N</RefAuthor>
        <RefAuthor>McKenzie ME</RefAuthor>
        <RefAuthor>Maclean A</RefAuthor>
        <RefAuthor>Brown CJ</RefAuthor>
        <RefAuthor>Mastracci T</RefAuthor>
        <RefAuthor>McLeod RS</RefAuthor>
        <RefAuthor> Evidence-Based Reviews in Surgery Steering Group</RefAuthor>
        <RefTitle>Teaching evidence based medicine to surgery residents-is journal club the best format&#63; A systematic review of the literature</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>J Surg Educ</RefJournal>
        <RefPage>91-100</RefPage>
        <RefTotal>Ahmadi N, McKenzie ME, Maclean A, Brown CJ, Mastracci T, McLeod RS; Evidence-Based Reviews in Surgery Steering Group. Teaching evidence based medicine to surgery residents-is journal club the best format&#63; A systematic review of the literature. J Surg Educ. 2012;69(1):91-100. DOI: 10.1016&#47;j.jsurg.2011.07.004</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.jsurg.2011.07.004</RefLink>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>Fowler SB</RefAuthor>
        <RefAuthor>Druist KA</RefAuthor>
        <RefAuthor>Dillon-Zwerdling L</RefAuthor>
        <RefTitle>Journal club: an opportunity to advance the art and science of home health practice</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Home Healthc Nurse</RefJournal>
        <RefPage>595-598</RefPage>
        <RefTotal>Fowler SB, Druist KA, Dillon-Zwerdling L. Journal club: an opportunity to advance the art and science of home health practice. Home Healthc Nurse. 2011;29(10):595-598. DOI: 10.1097&#47;NHH.0b013e3182315fd4</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1097&#47;NHH.0b013e3182315fd4</RefLink>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>Deenadayalan Y</RefAuthor>
        <RefAuthor>Grimmer-Somers K</RefAuthor>
        <RefAuthor>Prior M</RefAuthor>
        <RefAuthor>Kumar S</RefAuthor>
        <RefTitle>How to run an effective journal club: a systematic review</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>J Eval Clin Pract</RefJournal>
        <RefPage>898-911</RefPage>
        <RefTotal>Deenadayalan Y, Grimmer-Somers K, Prior M, Kumar S. How to run an effective journal club: a systematic review. J Eval Clin Pract. 2008;14(5):898-911. DOI: 10.1111&#47;j.1365-2753.2008.01050.x</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;j.1365-2753.2008.01050.x</RefLink>
      </Reference>
      <Reference refNo="18">
        <RefAuthor>Spillane AJ</RefAuthor>
        <RefAuthor>Crowe PJ</RefAuthor>
        <RefTitle>The role of the journal club in surgical training</RefTitle>
        <RefYear>1998</RefYear>
        <RefJournal>Aust N Z J Surg</RefJournal>
        <RefPage>288-291</RefPage>
        <RefTotal>Spillane AJ, Crowe PJ. The role of the journal club in surgical training. Aust N Z J Surg. 1998;68(4):288-291. DOI: 10.1111&#47;j.1445-2197.1998.tb02085.x</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;j.1445-2197.1998.tb02085.x</RefLink>
      </Reference>
      <Reference refNo="19">
        <RefAuthor>Alguire PC</RefAuthor>
        <RefTitle>A review of journal clubs in postgraduate medical education</RefTitle>
        <RefYear>1998</RefYear>
        <RefJournal>J Gen Intern Med</RefJournal>
        <RefPage>347-353</RefPage>
        <RefTotal>Alguire PC. A review of journal clubs in postgraduate medical education. J Gen Intern Med. 1998;13(5):347-353. DOI: 10.1046&#47;j.1525-1497.1998.00102.x</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1046&#47;j.1525-1497.1998.00102.x</RefLink>
      </Reference>
      <Reference refNo="20">
        <RefAuthor>Berman D</RefAuthor>
        <RefAuthor>Braig Z</RefAuthor>
        <RefAuthor>Simms B</RefAuthor>
        <RefAuthor>Anderson T</RefAuthor>
        <RefAuthor>Dougherty K</RefAuthor>
        <RefAuthor>Marcinkowski K</RefAuthor>
        <RefAuthor>Seaman R</RefAuthor>
        <RefTitle>Efficacy of Medical Student Surgery Journal Club</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>J Surg Educ</RefJournal>
        <RefPage>83-88</RefPage>
        <RefTotal>Berman D, Braig Z, Simms B, Anderson T, Dougherty K, Marcinkowski K, Seaman R. Efficacy of Medical Student Surgery Journal Club. J Surg Educ. 2019;76(1):83-88. DOI: 10.1016&#47;j.jsurg.2018.06.006</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.jsurg.2018.06.006</RefLink>
      </Reference>
      <Reference refNo="21">
        <RefAuthor>Friesth M</RefAuthor>
        <RefAuthor>Dzara K</RefAuthor>
        <RefTitle>An Educational Evaluation of a Journal Club Approach to Teaching Undergraduate Health Care Research</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>J Med Educ Curric Dev</RefJournal>
        <RefPage></RefPage>
        <RefTotal>Friesth M, Dzara K. An Educational Evaluation of a Journal Club Approach to Teaching Undergraduate Health Care Research. J Med Educ Curric Dev. 2020. DOI: 10.1177&#47;2382120520940662</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1177&#47;2382120520940662</RefLink>
      </Reference>
      <Reference refNo="22">
        <RefAuthor>Honey CP</RefAuthor>
        <RefAuthor>Baker JA</RefAuthor>
        <RefTitle>Exploring the impact of journal clubs: a systematic review</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Nurse Educ Today</RefJournal>
        <RefPage>825-831</RefPage>
        <RefTotal>Honey CP, Baker JA. Exploring the impact of journal clubs: a systematic review. Nurse Educ Today. 2011;31(8):825-831. DOI: 10.1016&#47;j.nedt.2010.12.020</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.nedt.2010.12.020</RefLink>
      </Reference>
      <Reference refNo="23">
        <RefAuthor>Herur A</RefAuthor>
        <RefAuthor>Kolagi S</RefAuthor>
        <RefAuthor>Ramadurg U</RefAuthor>
        <RefAuthor>Hiremath CS</RefAuthor>
        <RefAuthor>Hadimani CP</RefAuthor>
        <RefAuthor>Goudar SS</RefAuthor>
        <RefTitle>Refining the Journal Club Presentations of Postgraduate Students in Seven Clinical Departments for Better Evidence-based Practice</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Ann Med Health Sci Res</RefJournal>
        <RefPage>185-189</RefPage>
        <RefTotal>Herur A, Kolagi S, Ramadurg U, Hiremath CS, Hadimani CP, Goudar SS. Refining the Journal Club Presentations of Postgraduate Students in Seven Clinical Departments for Better Evidence-based Practice. Ann Med Health Sci Res. 2016;6(3):185-189.</RefTotal>
      </Reference>
      <Reference refNo="24">
        <RefAuthor>Parhar S</RefAuthor>
        <RefAuthor>Gibson J</RefAuthor>
        <RefTitle>Does participation in an undergraduate journal club make dental students more knowledgeable and confident in practising evidence-based dentistry&#63;</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>Eur J Dent Educ</RefJournal>
        <RefPage>e59-e63</RefPage>
        <RefTotal>Parhar S, Gibson J. Does participation in an undergraduate journal club make dental students more knowledgeable and confident in practising evidence-based dentistry&#63; Eur J Dent Educ. 2017;21(4):e59-e63. DOI: 10.1111&#47;eje.12219</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;eje.12219</RefLink>
      </Reference>
      <Reference refNo="25">
        <RefAuthor>Burris JN</RefAuthor>
        <RefAuthor>Frederick EK</RefAuthor>
        <RefAuthor>Malcom DR</RefAuthor>
        <RefAuthor>Raake S</RefAuthor>
        <RefAuthor>Shin M</RefAuthor>
        <RefAuthor>Daugherty KK</RefAuthor>
        <RefTitle>Impact of a Journal Club Elective Course on Student Learning Measures</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>Am J Pharm Educ</RefJournal>
        <RefPage>6827</RefPage>
        <RefTotal>Burris JN, Frederick EK, Malcom DR, Raake S, Shin M, Daugherty KK. Impact of a Journal Club Elective Course on Student Learning Measures. Am J Pharm Educ. 2019;83(7):6827. DOI: 10.5688&#47;ajpe6827</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.5688&#47;ajpe6827</RefLink>
      </Reference>
      <Reference refNo="26">
        <RefAuthor>Ilic D</RefAuthor>
        <RefAuthor>de Voogt A</RefAuthor>
        <RefAuthor>Oldroyd J</RefAuthor>
        <RefTitle>The use of journal clubs to teach evidence-based medicine to health professionals: A systematic review and meta-analysis</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>J Evid Based Med</RefJournal>
        <RefPage>42-56</RefPage>
        <RefTotal>Ilic D, de Voogt A, Oldroyd J. The use of journal clubs to teach evidence-based medicine to health professionals: A systematic review and meta-analysis. J Evid Based Med. 2020;13(1):42-56. DOI: 10.1111&#47;jebm.12370</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;jebm.12370</RefLink>
      </Reference>
      <Reference refNo="27">
        <RefAuthor>Kim SC</RefAuthor>
        <RefAuthor>Sabel S</RefAuthor>
        <RefAuthor>McHargue S</RefAuthor>
        <RefAuthor>Bloom RD</RefAuthor>
        <RefTitle>Impact of an extracurricular, student-led journal club on evidence-based practice among baccalaureate nursing students</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Int J Nurs Educ Scholarsh</RefJournal>
        <RefPage>20200004</RefPage>
        <RefTotal>Kim SC, Sabel S, McHargue S, Bloom RD. Impact of an extracurricular, student-led journal club on evidence-based practice among baccalaureate nursing students. Int J Nurs Educ Scholarsh. 2020;17(1):20200004. DOI: 10.1515&#47;ijnes-2020-0004</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1515&#47;ijnes-2020-0004</RefLink>
      </Reference>
      <Reference refNo="28">
        <RefAuthor>Anzarut A</RefAuthor>
        <RefAuthor>Martens B</RefAuthor>
        <RefAuthor>Tredget E</RefAuthor>
        <RefTitle>Improving journal clubs through the use of positive deviance: A mixed-methods study</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Can J Plast Surg</RefJournal>
        <RefPage>82-84</RefPage>
        <RefTotal>Anzarut A, Martens B, Tredget E. Improving journal clubs through the use of positive deviance: A mixed-methods study. Can J Plast Surg. 2011;19(3):82-84. DOI: 10.1177&#47;229255031101900307</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1177&#47;229255031101900307</RefLink>
      </Reference>
      <Reference refNo="29">
        <RefAuthor>McDonough V</RefAuthor>
        <RefTitle>Improving journal club: increasing student discussion and understanding of primary literature in molecular biology through the use of dialectical notes</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Biochem Mol Biol Educ</RefJournal>
        <RefPage>330-332</RefPage>
        <RefTotal>McDonough V. Improving journal club: increasing student discussion and understanding of primary literature in molecular biology through the use of dialectical notes. Biochem Mol Biol Educ. 2012;40(5):330-332. DOI: 10.1002&#47;bmb.20640</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1002&#47;bmb.20640</RefLink>
      </Reference>
      <Reference refNo="30">
        <RefAuthor>Casadevall A</RefAuthor>
        <RefAuthor>Gow N</RefAuthor>
        <RefTitle>Using Preprints for Journal Clubs</RefTitle>
        <RefYear>2018</RefYear>
        <RefJournal>mBio</RefJournal>
        <RefPage>e00516-e00518</RefPage>
        <RefTotal>Casadevall A, Gow N. Using Preprints for Journal Clubs. mBio. 2018;9(2):e00516-e00518. DOI: 10.1128&#47;mBio.00516-18</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1128&#47;mBio.00516-18</RefLink>
      </Reference>
      <Reference refNo="31">
        <RefAuthor>Dzara K</RefAuthor>
        <RefAuthor>Frey-Vogel AS</RefAuthor>
        <RefTitle>Medical Education Journal Club for the Millennial Resident: An Interactive, No-Prep Approach</RefTitle>
        <RefYear>2019</RefYear>
        <RefJournal>Acad Pediatr</RefJournal>
        <RefPage>603-607</RefPage>
        <RefTotal>Dzara K, Frey-Vogel AS. Medical Education Journal Club for the Millennial Resident: An Interactive, No-Prep Approach. Acad Pediatr. 2019;19(6):603-607. DOI: 10.1016&#47;j.acap.2019.05.004</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.acap.2019.05.004</RefLink>
      </Reference>
      <Reference refNo="32">
        <RefAuthor>Summey RM</RefAuthor>
        <RefAuthor>Leonard W</RefAuthor>
        <RefAuthor>Schiele K</RefAuthor>
        <RefAuthor>Tristan S</RefAuthor>
        <RefAuthor>Young A</RefAuthor>
        <RefAuthor>Vinas E</RefAuthor>
        <RefAuthor>Ferriss JS</RefAuthor>
        <RefTitle>Iterative approach to journal club</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Postgrad Med J</RefJournal>
        <RefPage>496-499</RefPage>
        <RefTotal>Summey RM, Leonard W, Schiele K, Tristan S, Young A, Vinas E, Ferriss JS. Iterative approach to journal club. Postgrad Med J. 2020;96(1138):496-499. DOI: 10.1136&#47;postgradmedj-2020-137551</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1136&#47;postgradmedj-2020-137551</RefLink>
      </Reference>
      <Reference refNo="33">
        <RefAuthor>Roberts MJ</RefAuthor>
        <RefAuthor>Perera M</RefAuthor>
        <RefAuthor>Lawrentschuk N</RefAuthor>
        <RefAuthor>Romanic D</RefAuthor>
        <RefAuthor>Papa N</RefAuthor>
        <RefAuthor>Bolton D</RefAuthor>
        <RefTitle>Globalization of continuing professional development by journal clubs via microblogging: a systematic review</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>J Med Internet Res</RefJournal>
        <RefPage>e103</RefPage>
        <RefTotal>Roberts MJ, Perera M, Lawrentschuk N, Romanic D, Papa N, Bolton D. Globalization of continuing professional development by journal clubs via microblogging: a systematic review. J Med Internet Res. 2015;17(4):e103. DOI: 10.2196&#47;jmir.4194</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.2196&#47;jmir.4194</RefLink>
      </Reference>
      <Reference refNo="34">
        <RefAuthor>Plante TB</RefAuthor>
        <RefAuthor>Iberri DJ</RefAuthor>
        <RefAuthor>Coderre EL</RefAuthor>
        <RefTitle>Building a Modern Journal Club: The Wiki Journal Club Experience</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>J Grad Med Educ</RefJournal>
        <RefPage>341-343</RefPage>
        <RefTotal>Plante TB, Iberri DJ, Coderre EL. Building a Modern Journal Club: The Wiki Journal Club Experience. J Grad Med Educ. 2015;7(3):341-343. DOI: 10.4300&#47;JGME-D-14-00488.1</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.4300&#47;JGME-D-14-00488.1</RefLink>
      </Reference>
      <Reference refNo="35">
        <RefAuthor>Currie G</RefAuthor>
        <RefAuthor>Woznitza N</RefAuthor>
        <RefAuthor>Bolderston A</RefAuthor>
        <RefAuthor>Westerink A</RefAuthor>
        <RefAuthor>Watson J</RefAuthor>
        <RefAuthor>Beardmore C</RefAuthor>
        <RefAuthor>Di Prospero L</RefAuthor>
        <RefAuthor>McCuaig C</RefAuthor>
        <RefAuthor>Nightingale J</RefAuthor>
        <RefTitle>Twitter Journal Club in Medical Radiation Science</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>J Med Imaging Radiat Sci</RefJournal>
        <RefPage>83-89</RefPage>
        <RefTotal>Currie G, Woznitza N, Bolderston A, Westerink A, Watson J, Beardmore C, Di Prospero L, McCuaig C, Nightingale J. Twitter Journal Club in Medical Radiation Science. J Med Imaging Radiat Sci. 2017;48(1):83-89. DOI: 10.1016&#47;j.jmir.2016.09.001</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.jmir.2016.09.001</RefLink>
      </Reference>
      <Reference refNo="36">
        <RefAuthor>Thangasamy IA</RefAuthor>
        <RefAuthor>Loeb S</RefAuthor>
        <RefAuthor>Sathianathen NJ</RefAuthor>
        <RefAuthor>Leveridge M</RefAuthor>
        <RefAuthor>Stork B</RefAuthor>
        <RefAuthor>Davies BJ</RefAuthor>
        <RefAuthor>Woo HH</RefAuthor>
        <RefTitle>Evaluating the Effectiveness of an Online Journal Club: Experience from the International Urology Journal Club</RefTitle>
        <RefYear>2021</RefYear>
        <RefJournal>Eur Urol Focus</RefJournal>
        <RefPage>482-488</RefPage>
        <RefTotal>Thangasamy IA, Loeb S, Sathianathen NJ, Leveridge M, Stork B, Davies BJ, Woo HH. Evaluating the Effectiveness of an Online Journal Club: Experience from the International Urology Journal Club. Eur Urol Focus. 2021;7(2):482-488. DOI: 10.1016&#47;j.euf.2019.10.006</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.euf.2019.10.006</RefLink>
      </Reference>
      <Reference refNo="37">
        <RefAuthor>Stoneman S</RefAuthor>
        <RefAuthor>Hiremath S</RefAuthor>
        <RefTitle>Twitter-Based Journal Clubs: Bringing Critical Appraisal to the Social Table</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Semin Nephrol</RefJournal>
        <RefPage>264-272</RefPage>
        <RefTotal>Stoneman S, Hiremath S. Twitter-Based Journal Clubs: Bringing Critical Appraisal to the Social Table. Semin Nephrol. 2020;40(3):264-272. DOI: 10.1016&#47;j.semnephrol.2020.04.004</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1016&#47;j.semnephrol.2020.04.004</RefLink>
      </Reference>
      <Reference refNo="38">
        <RefAuthor>Mark I</RefAuthor>
        <RefAuthor>Sonbol M</RefAuthor>
        <RefAuthor>Abbasian C</RefAuthor>
        <RefTitle>Running a journal club in 2020: reflections and challenges</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>BJPsych Bull</RefJournal>
        <RefPage>339-342</RefPage>
        <RefTotal>Mark I, Sonbol M, Abbasian C. Running a journal club in 2020: reflections and challenges. BJPsych Bull. 2020;45(6):339-342. DOI: 10.1192&#47;bjb.2020.121</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1192&#47;bjb.2020.121</RefLink>
      </Reference>
      <Reference refNo="39">
        <RefAuthor>McGlacken-Byrne SM</RefAuthor>
        <RefAuthor>O&#39;Rahelly M</RefAuthor>
        <RefAuthor>Cantillon P</RefAuthor>
        <RefAuthor>Allen NM</RefAuthor>
        <RefTitle>Journal club: old tricks and fresh approaches</RefTitle>
        <RefYear>2020</RefYear>
        <RefJournal>Arch Dis Child Educ Pract Ed</RefJournal>
        <RefPage>236-241</RefPage>
        <RefTotal>McGlacken-Byrne SM, O&#39;Rahelly M, Cantillon P, Allen NM. Journal club: old tricks and fresh approaches. Arch Dis Child Educ Pract Ed. 2020;105(4):236-241. DOI: 10.1136&#47;archdischild-2019-317374</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1136&#47;archdischild-2019-317374</RefLink>
      </Reference>
      <Reference refNo="40">
        <RefAuthor>Hidi S</RefAuthor>
        <RefTitle>Interest and Its Contribution as a Mantal Resource for Learning</RefTitle>
        <RefYear>1990</RefYear>
        <RefJournal>Rev Educ Res</RefJournal>
        <RefPage>549-571</RefPage>
        <RefTotal>Hidi S. Interest and Its Contribution as a Mantal Resource for Learning. Rev Educ Res. 1990;60(4):549-571. DOI: 10.3102&#47;00346543060004549</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.3102&#47;00346543060004549</RefLink>
      </Reference>
      <Reference refNo="41">
        <RefAuthor>Taherdoost H</RefAuthor>
        <RefTitle>Validity and reliability of the research instrument; how to test the validation of a questionnaire&#47;survey in s research</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Int J Acad Res Manag</RefJournal>
        <RefPage>28-36</RefPage>
        <RefTotal>Taherdoost H. Validity and reliability of the research instrument; how to test the validation of a questionnaire&#47;survey in s research. Int J Acad Res Manag. 2016;5(3):28-36. DOI: 10.2139&#47;ssrn.3205040</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.2139&#47;ssrn.3205040</RefLink>
      </Reference>
      <Reference refNo="42">
        <RefAuthor>Aronson JK</RefAuthor>
        <RefTitle>Journal Clubs: 2. Why and how to run them and how to publish them</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>Evid Based Med</RefJournal>
        <RefPage>232-234</RefPage>
        <RefTotal>Aronson JK. Journal Clubs: 2. Why and how to run them and how to publish them. Evid Based Med. 2017;22(6):232-234. DOI: 10.1136&#47;ebmed-2017-110861</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1136&#47;ebmed-2017-110861</RefLink>
      </Reference>
      <Reference refNo="43">
        <RefAuthor>Luft J</RefAuthor>
        <RefAuthor>Ingham H</RefAuthor>
        <RefTitle>The Johari window, a graphic model of interpersonal awareness</RefTitle>
        <RefYear>1955</RefYear>
        <RefBookTitle>Proceedings of the western training laboratory in group development</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Luft J, Ingham H. The Johari window, a graphic model of interpersonal awareness. In: Proceedings of the western training laboratory in group development. Los Angeles: UCLA Extension Office;1955.</RefTotal>
      </Reference>
      <Reference refNo="44">
        <RefAuthor>Wiepke C</RefAuthor>
        <RefTitle>Employability in the Bologna Prozess, An Area of Tension between Society, Business and Students</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Intl J Learn</RefJournal>
        <RefPage>435-445</RefPage>
        <RefTotal>Wiepke C. Employability in the Bologna Prozess, An Area of Tension between Society, Business and Students. Intl J Learn. 2009;16(4):435-445. DOI: 10.18848&#47;1447-9494&#47;CGP&#47;v16i04&#47;46237</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.18848&#47;1447-9494&#47;CGP&#47;v16i04&#47;46237</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 1: Questionnaire to evaluate perception of journal club sessions</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 1: Fragebogen zur Evaluation der Wahrnehmung der Journal-Club-Sitzungen</Mark1></Pgraph></Caption>
        </Table>
        <Table format="png">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 2: Number of evaluated journal club sessions and participants </Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 2: Anzahl der evaluierten Journal-Club-Sitzungen und der Teilnehmenden </Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>2</NoOfTables>
      </Tables>
      <Figures>
        <Figure format="png" height="447" width="857">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 1: Checklist for journal club preparation</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 1: Checkliste f&#252;r die Vorbereitung des Journal Club</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="526" width="760">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 2: Evaluation results when assessing the journal club as a whole. Number of participants on the Y-axis means the amount of students attended and evaluated several JC sessions.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 2: Evaluationsergebnisse f&#252;r die Bewertung des Journal Clubs insgesamt. Anzahl der Teilnehmenden auf der y-Achse zeigt die Anzahl der Promotionsstudierenden, die an den JC-Sitzungen teilnahmen und sie evaluierten.</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="523" width="752">
          <MediaNo>3</MediaNo>
          <MediaID language="en">3en</MediaID>
          <MediaID language="de">3de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 3: Evaluation results when appraising the topic of journal club sessions. Number of participants on the Y-axis means the amount of students attended and evaluated several JC sessions.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 3: Evaluationsergebnisse f&#252;r die Bewertung der Themen der JC-Sitzungen. Anzahl der Teilnehmenden auf der y-Achse zeigt die Anzahl der Promotionsstudierenden, die an den JC-Sitzungen teilnahmen und sie evaluierten.</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="528" width="854">
          <MediaNo>4</MediaNo>
          <MediaID language="en">4en</MediaID>
          <MediaID language="de">4de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 4: Evaluation results when considering the process of journal club sessions. Number of participants on the Y-axis means the amount of students attended and evaluated several JC sessions.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 4: Evaluationsergebnisse f&#252;r die Bewertung des Verlaufs der JC-Sitzungen. Anzahl der Teilnehmenden auf der y-Achse zeigt die Anzahl der Promotionsstudierenden, die an den JC-Sitzungen teilnahmen und sie evaluierten.</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="492" width="832">
          <MediaNo>5</MediaNo>
          <MediaID language="en">5en</MediaID>
          <MediaID language="de">5de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 5: Evaluation results when assessing one&#8217;s own learning process. Number of participants on the Y-axis means the amount of students attended and evaluated several JC sessions.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 5: Evaluationsergebnisse f&#252;r die Einsch&#228;tzung des eigenen Lernprozesses. Anzahl der Teilnehmenden auf der y-Achse zeigt die Anzahl der Promotionsstudierenden, die an den JC-Sitzungen teilnahmen und sie evaluierten.</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="780" width="548">
          <MediaNo>6</MediaNo>
          <MediaID language="en">6en</MediaID>
          <MediaID language="de">6de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 6: Evaluation results of rating the speakers&#8217; soft-skills. Number of participants on the Y-axis means the amount of students attended and evaluated several JC sessions.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 6: Evaluationsergebnisse f&#252;r die Beurteilung der Soft Skills der Vortragenden. Anzahl der Teilnehmenden auf der y-Achse zeigt die Anzahl der Promotionsstudierenden, die an den JC-Sitzungen teilnahmen und sie evaluierten.</Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="482" width="873">
          <MediaNo>7</MediaNo>
          <MediaID language="en">7en</MediaID>
          <MediaID language="de">7de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 7: Evaluation results summarizing the participant&#8217;s perception of colleagues attending the journal club sessions. Number of participants on the Y-axis means the amount of students attended and evaluated several JC sessions.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 7: Evaluationsergebnisse f&#252;r die Wahrnehmung des Kollegiums durch die Teilnehmenden w&#228;hrend der JC-Sitzungen. Anzahl der Teilnehmenden auf der y-Achse zeigt die Anzahl der Promotionsstudierenden, die an den JC-Sitzungen teilnahmen und sie evaluierten.</Mark1></Pgraph></Caption>
        </Figure>
        <NoOfPictures>7</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <NoOfAttachments>0</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>