<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001085</Identifier>
    <IdentifierDoi>10.3205/zma001085</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0010857</IdentifierUrn>
    <ArticleType language="en">article</ArticleType>
    <ArticleType language="de">Artikel</ArticleType>
    <TitleGroup>
      <Title language="en">Validation of a German short version of the Attitudes towards Patient Safety Questionnaire (G-APSQshort) for the measurement of undergraduate medical students&#39; attitudes to and needs for patient safety</Title>
      <TitleTranslated language="de">Validierung einer deutschsprachigen Kurzversion des Attitudes towards Patient Safety Questionnaire (G-APSQshort) zur Messung von Haltung und Bed&#252;rfnissen von Medizinstudierenden hinsichtlich Patientensicherheit</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>Kiesewetter</Lastname>
          <LastnameHeading>Kiesewetter</LastnameHeading>
          <Firstname>Jan</Firstname>
          <Initials>J</Initials>
          <AcademicTitle>Dipl.-Psych., Dr. phil.</AcademicTitle>
        </PersonNames>
        <Address language="en">Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, Ziemssenstr. 1, D-80336 M&#252;nchen, Germany, Phone.: &#43;49 (0)89&#47;4400-57207, Fax: &#43;49 (0)89&#47;4400-57202<Affiliation>Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Germany</Affiliation></Address>
        <Address language="de">Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, Ziemssenstr. 1, D-80336 M&#252;nchen, Deutschland, Tel.: &#43;49 (0)89&#47;4400-57207, Fax: &#43;49 (0)89&#47;4400-57202<Affiliation>Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Deutschland</Affiliation></Address>
        <Email>jan.kiesewetter&#64;med.lmu.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Kager</Lastname>
          <LastnameHeading>Kager</LastnameHeading>
          <Firstname>Moritz</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Email>moritzkager&#64;googlemail.com</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Fischer</Lastname>
          <LastnameHeading>Fischer</LastnameHeading>
          <Firstname>Martin R.</Firstname>
          <Initials>MR</Initials>
          <AcademicTitle>Prof. Dr. med.</AcademicTitle>
          <AcademicTitleSuffix>MME</AcademicTitleSuffix>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der LMU M&#252;nchen, Institut f&#252;r Didaktik und Ausbildungsforschung in der Medizin, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Email>martin.fischer&#64;med.uni-muenchen.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Kiesewetter</Lastname>
          <LastnameHeading>Kiesewetter</LastnameHeading>
          <Firstname>Isabel</Firstname>
          <Initials>I</Initials>
          <AcademicTitle>Dr. med.</AcademicTitle>
        </PersonNames>
        <Address language="en">
          <Affiliation>Klinikum der LMU M&#252;nchen, Klinik f&#252;r An&#228;sthesiologie, M&#252;nchen, Germany</Affiliation>
          <Affiliation>Klinikum der LMU M&#252;nchen, Klinik f&#252;r Palliativmedizin, M&#252;nchen, Germany</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Klinikum der LMU M&#252;nchen, Klinik f&#252;r An&#228;sthesiologie, M&#252;nchen, Deutschland</Affiliation>
          <Affiliation>Klinikum der LMU M&#252;nchen, Klinik f&#252;r Palliativmedizin, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Email>isabel.kiesewetter&#64;med.uni-muenchen.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <SectionHeading language="en">Patient Safety</SectionHeading>
      <SectionHeading language="de">Patientensicherheit</SectionHeading>
    </SubjectGroup>
    <DateReceived>20151026</DateReceived>
    <DateRevised>20160829</DateRevised>
    <DateAccepted>20161006</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20170215</DatePublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>34</Volume>
        <Issue>1</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
      </Journal>
    </SourceGroup>
    <ArticleNo>8</ArticleNo>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph><Mark1>Hintergrund: </Mark1>Zunehmend sollen Themen der Patientensicherheit auch im Rahmen des Medizinstudiums gelehrt werden. F&#252;r eine Bedarfsanalyse existiert im deutschsprachigen Raum jedoch bisher kein geeignetes Messinstrument zur Erhebung des Status Quo von Einstellungen Medizinstudierender zum Thema Patientensicherheit. Die deutsche Validierung einer Kurzversion des Attitudes towards Patient Safety Questionnaire (G-APSQ<Mark2>short</Mark2>), soll diese L&#252;cke anhand von zwei Validierungsstudien schlie&#223;en.</Pgraph><Pgraph><Mark1>Methode:</Mark1> In Studie 1 wird mittels Item- und Reliabilit&#228;tsanalysen die interne Konsistenz, sowie die faktorielle Struktur &#252;berpr&#252;ft. In Studie 2 wird die Messsensitivit&#228;t des G-APSQ<Mark2>short</Mark2> zum Nachweis von Einstellungsver&#228;nderungen eingesch&#228;tzt.</Pgraph><Pgraph><Mark1>Ergebnisse: </Mark1>An Studie 1 nahmen N&#61;83 Teilnehmer (M&#61;23,16 Jahre; 21 Weiblich) teil. Von den insgesamt sieben Subskalen konnte bei sechs Subskalen ausreichende interne Konsistenz (Cronbachs &#945;&#61;.722-.903) erreicht werden. Die Faktorenanalyse ergab, dass die sechs extrahierten Faktoren mit den theoretisch konzipierten Subskalen &#252;bereinstimmen.</Pgraph><Pgraph>An Studie 2 nahmen N&#61;21 Teilnehmer (M&#61;26 Jahre; 11 weiblich) teil. Eine Multivariate Varianzanalyse ergab, dass die Unterschiede vor- zu nach einer Kurzzeitintervention mit mittelgro&#223;em Effekt signifikant geworden sind (F(1;16)&#61;6,675; p&#60;.05; &#951;<Superscript>2</Superscript>&#61;.29). Die Reliabilit&#228;t der Differenzen der Messzeitpunkte war mit Cronbachs &#945;&#61;.615 ausreichend hoch.</Pgraph><Pgraph><Mark1>Diskussion:</Mark1> Der G-APSQ<Mark2>short</Mark2> kann in sechs Subskalen als messzeitpunkt- und ver&#228;nderungsvalide gelten. Es ist zu hoffen, dass durch den regelm&#228;&#223;igen und konzertierten Einsatz von Messinstrumenten wie dem G-APSQshort eine gemeinsame Datenbasis vieler verschiedener deutschsprachiger medizinischer Fakult&#228;ten entsteht.</Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph><Mark1>Introduction:</Mark1> Topics of patient safety are being taught increasingly within medical eudcation. To date, however, there is no suitable means of measuring the status quo of medical students&#8217; attitudes towards patient safety in German-speaking Europe. The German validation of a short version of the Attitude towards Patient Safety Questionnaire (G-APSQ<Mark2>short</Mark2>) is meant to fill this gap with the aid of two validation studies.  </Pgraph><Pgraph><Mark1>Methods: </Mark1>In Study 1, item and reliability analyses were used to examine internal consistency as well as factorial structure. In Study 2, the measurement sensitivity of the G-APSQ<Mark2>short</Mark2> in detecting changes in attitudes was assessed. </Pgraph><Pgraph><Mark1>Results: </Mark1>Study 1 comprised N&#61;83 participants (M&#61;23.16 years; 21 female). Adequate internal consistency (Cronbach&#8217;s &#945;&#61;.722-.903) was reached in 6 of the seven subscales. The factor analysis showed that the six extracted factors matched the theoretically conceived subscales.</Pgraph><Pgraph>Study 2 comprised N&#61;21 participants (M&#61;26 years; 11 female). A multivariate analysis of variance showed that the differences before and after a short-term intervention were significant with medium effect size (F(1;16)&#61;6.675; p&#60;.05; &#951;<Superscript>2</Superscript>&#61;.29).</Pgraph><Pgraph><Mark1>Discussion: </Mark1>In six subscales, the G-APSQ<Mark2>short</Mark2> can be considered valid in respect to measuring point and change. It is hoped that regular and concerted implementation of measuring instruments such as the G-APSQ<Mark2>short</Mark2> will help to develop a common ground for data comparison among many different German-speaking medical faculties.</Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="Introduction">
      <MainHeadline>Introduction</MainHeadline><Pgraph>In recent years, issues of medical errors and patient safety have increasingly gained in significance in the general public as well as in the fields of medicine and of healthcare policy making <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>, <TextLink reference="4"></TextLink>. The German Coalition for Patient Safety <Mark2>(Aktionsb&#252;ndnis Patientensicherheit e.V.)</Mark2>, founded in 2005, the German Patient Rights Act from 2013, the increasing number of error-reporting systems established by medical professionals, as well as numerous reports in popular media all serve to underscore this development.</Pgraph><Pgraph>To date, little attention has been paid to training and preparing doctors in these regards, despite the fact that they, as prominent providers of healthcare, are not only significantly involved in the occurrence and prevention of medical errors but are also significantly affected by their consequences. Various international committees have demanded the early integration of corresponding medical-error and patient-safety educational structures in the training, continuing education and further education of medical professionals <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. The guidelines presented by the WHO World Alliance for Patient Safety in 2008 for the development of corresponding error-management and patient-safety curricula were designed explicitly as a substantive basis for medical faculties <TextLink reference="6"></TextLink>. The guidelines contain detailed, content-related information on all subject areas in the realm of patient safety as well as instruction for the successful implementation of new curricula. Thus far, very few of the implemented educational formats addressing errors in medicine and patient safety have been described in international publications. Only a small number of educational formats incorporate the WHO guidelines in their application, and their structure and content display an expansive range in their implementation <TextLink reference="8"></TextLink>.  </Pgraph><Pgraph>In Germany, first steps in the development of corresponding curricular structures are being taken, and the German National Learning Objectives Catalogue &#91;<Hyperlink href="http:&#47;&#47;www.nklm.de">NKLM</Hyperlink>&#93; has also included the subject of patient safety in its material <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>. In 2015, the German Medical Education Association&#8217;s Committee for Patient Safety and Error Management published. The Learning Objective Catalogue for Patient Safety in Undergraduate Medical Education, representing a consensus on the most important learning objectives for patient safety <TextLink reference="11"></TextLink>. The Attitudes towards Patient Safety Questionnaire (APSQ) was developed and validated for English-speaking regions in order to measure the attitudes of medical students <TextLink reference="12"></TextLink>. The original version identified nine subscales:</Pgraph><Pgraph><UnorderedList><ListItem level="1">Patient safety training received</ListItem><ListItem level="1">Error reporting confidence</ListItem><ListItem level="1">Working hours as error cause</ListItem><ListItem level="1">Error inevitability</ListItem><ListItem level="1">Professional incompetence as error cause</ListItem><ListItem level="1">Disclosure responsibility</ListItem><ListItem level="1">Team functioning</ListItem><ListItem level="1">Patient&#8217;s role in error</ListItem><ListItem level="1">Importance of patient safety in the curriculum</ListItem></UnorderedList></Pgraph><Pgraph>In the original scale&#8217;s criterion validation, seven subscales could differentiate between novice students and experienced tutors. The scales are reliable, with a Cronbach&#8217;s alpha of .63 to .82. The 26 items are distributed among 9 subscales with 2 to 4 items each. They comprise questions requiring responses from &#8220;strongly agree&#8221; to &#8220;strongly disagree&#8221;. The following is an example from the subscale Error Reporting Confidence: &#8220;I would feel comfortable reporting any errors I had made, no matter how serious the outcome had been for the patient.&#8221; <TextLink reference="12"></TextLink>.</Pgraph><Pgraph>The authors recommend further validation studies of retest reliability and predictive validity. The reliability of change of the APSQ has yet to be verified. </Pgraph><Pgraph>Such a measure can be used to track individual changes throughout the course of studies, allowing for targeted training interventions and evaluation of their success. Furthermore, comparative measures of different training or curricular modules or even entire curricula on the subject of patient safety <TextLink reference="13"></TextLink> are possible. Fields of application for the questionnaire in interprofessional and post-graduate education and training are also being discussed <TextLink reference="14"></TextLink>. So far, results in the United States offer a mixed picture of medical students&#8217; attitudes at the beginning of their studies: On the one hand, medical students demonstrate a positive attitude, conducive to patient safety. On the other hand, confusion and uncertainty prevail concerning error-reporting procedures, error communication and the consequences of errors for the individual <TextLink reference="8"></TextLink>. To date, little is known regarding attitudes towards patient safety during the course of curricula and at the end of studies. </Pgraph><Pgraph>At the moment, there is no instrument in German-speaking countries for a systematic gathering of data from the students&#8217; perspective on their needs or on their attitude toward and handling of errors in treatment. The present study should serve to close this gap with the German-language validation of a short version of the Attitudes towards Patient Safety Questionnaire (G-APSQ<Mark2>short</Mark2>). This instrument was selected as the most widely validated measure of its kind. The validation sought here is one of construct validity, meaning that the instrument is being examined for its ability to measure the targeted feature of attitudes towards patient safety (&#61;construct). </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Hintergrund">
      <MainHeadline>Hintergrund</MainHeadline><Pgraph>In den letzten Jahren haben die Themen Fehler in der Medizin und Patientensicherheit in Deutschland sowohl im &#246;ffentlichen als auch im medizinischen und gesundheitspolitischen Raum zunehmend an Bedeutung gewonnen. Diese Entwicklung unterstreichen neben zahlreichen Berichten in den Boulevardmedien beispielsweise das seit 2005 bestehende Aktionsb&#252;ndnis Patientensicherheit e.V., das 2013 in Kraft getretene Patientenrechtegesetz und die zunehmende Anzahl der von Seiten der &#196;rzteschaft etablierten Fehlermeldesysteme <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>, <TextLink reference="4"></TextLink>.</Pgraph><Pgraph>Der Ausbildung und Vorbereitung der &#196;rzte<Superscript>1</Superscript>, die als Leistungserbringer innerhalb der Patientenversorgung ma&#223;geblich an der Entstehung von Fehlern, aber auch an deren Vorbeugung beteiligt sind, und die letzten Endes auch mit den Konsequenzen von medizinischen Fehlern umgehen m&#252;ssen, wird bisher nur wenig Beachtung geschenkt. Verschiedene internationale Gremien fordern schon lange die fr&#252;hzeitige Integration entsprechender Ausbildungsstrukturen zum Thema Fehler und Patientensicherheit in die medizinische Aus-, Weiter- und Fortbildung <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, <TextLink reference="7"></TextLink>. Der 2008 von der WHO Weltallianz f&#252;r Patientensicherheit vorgestellte Leitfaden zur Entwicklung entsprechender Curricula zu Fehlermanagement und Patientensicherheit wurde explizit f&#252;r die medizinischen Fakult&#228;ten als inhaltliche Grundlage entworfen <TextLink reference="6"></TextLink>. Diese beinhaltet sowohl detaillierte inhaltliche Informationen zu allen die Patientensicherheit betreffenden Themenbereichen als auch Anleitungen dar&#252;ber, wie ein neues Curriculum erfolgreich implementiert werden kann. Bisher werden in der internationalen Literatur nur wenige der umgesetzten Ausbildungsformate zu Fehlern in der Medizin und Patientensicherheit beschrieben. Nur wenige Ausbildungsformate ber&#252;cksichtigen in ihrer Umsetzung den WHO-Leitfaden und die Umsetzungen weisen bisher eine gro&#223;e Bandbreite hinsichtlich Struktur und Inhalt auf <TextLink reference="8"></TextLink>.</Pgraph><Pgraph>In Deutschland zeigen sich erste Ans&#228;tze zur Entwicklung entsprechender curricularer Strukturen und auch in die Entwicklung des Nationalen Lernzielkataloges Medizin &#91;<Hyperlink href="http:&#47;&#47;www.nklm.de">NKLM</Hyperlink>&#93; ist das Thema Patientensicherheit einbezogen worden <TextLink reference="9"></TextLink>, <TextLink reference="10"></TextLink>. Der Ausschuss Patientensicherheit und Fehlermanagement der Gesellschaft f&#252;r Medizinische Ausbildung ver&#246;ffentlichte 2015 den Lernzielkatalog Patientensicherheit f&#252;r das Medizinstudium, welcher ein Konsens auf die wichtigsten Lernziele f&#252;r Patientensicherheit darstellt <TextLink reference="11"></TextLink>. Der Attitudes towards Patient Safety Questionnaire (APSQ) wurde entwickelt und f&#252;r den englischen Sprachraum validiert, um die Haltung von Medizinstudierenden zu messen <TextLink reference="12"></TextLink>. Die Originalversion konnte neun Subskalen identifizieren: </Pgraph><Pgraph><UnorderedList><ListItem level="1">Patientensicherheitstraining bis heute (&#8222;Patient safety training received&#8220;)</ListItem><ListItem level="1">Sicherheit, Fehler zu kommunizieren (&#8222;Error reporting confidence&#8220;)</ListItem><ListItem level="1">Arbeitszeiten als Fehlerquelle (&#8222;Working hours as error cause&#8220;)</ListItem><ListItem level="1">Unvermeidbarkeit von Fehlern (&#8222;Error inevitability&#8220;)</ListItem><ListItem level="1">Berufliche Inkompetenz als Fehlerursache (&#8222;Professional incompetence as error cause&#8220;)</ListItem><ListItem level="1">Angabepflicht von Fehlern (&#8222;Disclosure responsibility&#8220;)</ListItem><ListItem level="1">Zusammenarbeit&#47;Teamf&#228;higkeit (&#8222;Team functioning&#8220;)</ListItem><ListItem level="1">Die Rolle des Patienten bei Fehlern (&#8222;Patient&#8217;s role in error&#8220;)</ListItem><ListItem level="1">Die Wichtigkeit der Patientensicherheit im Curriculum (&#8222;Importance of patient safety in the curriculum&#8220;)</ListItem></UnorderedList></Pgraph><Pgraph>In der Kriteriumsvalidierung der Originalskala konnten sieben Subskalen zwischen studentischen Novizen und erfahrenen Tutoren differenzieren. Die Skalen sind mit Cronbach&#8217;s alpha von .63 bis .82 reliabel. Die 26 Items verteilen sich mit je 2-4 Items auf 9 Subskalen. Sie beinhalten Fragen, welche die die Einstellung zu Patientensicherheit abfragen von &#8222;Stimme voll und ganz zu&#8220; bis &#8222;Stimme &#252;berhaupt nicht zu&#8220; abfragen; bspw. f&#252;r die Subskala Sicherheit, Fehler zu kommunizieren: &#8222;I would feel comfortable reporting any errors I had made, no matter how serious the outcome had been for the patient.&#8220; <TextLink reference="12"></TextLink>.</Pgraph><Pgraph>Die Autoren schlagen weitere Validierungsstudien zur Retest Reliabilit&#228;t und Vorhersagevalidit&#228;t vor. Weiterhin wurde bisher die Ver&#228;nderungsreliabilit&#228;t des APSQ nicht nachgewiesen.</Pgraph><Pgraph>Bei einer solchen Messung k&#246;nnen individuelle &#196;nderungen im Verlauf des Studiums nachvollzogen werden und zielgerichtete Trainingsinterventionen geplant und deren Erfolg evaluiert werden. Auch sind vergleichende Messungen zwischen unterschiedlichen Trainings oder Curriculumsbausteinen  oder sogar ganzer Curricula zum Thema Patientensicherheit <TextLink reference="13"></TextLink> m&#246;glich. Einsatzgebiete des Fragebogens im interprofessionellen und post-graduierten Ausbildungsbereich werden diskutiert <TextLink reference="14"></TextLink>. Die bisherigen Messungen in den Vereinigten Staaten zeigen ein gemischtes Bild der Einstellungen von Medizinstudierenden zu Beginn ihres Studiums: Zum einen zeigen Medizinstudierende eine positive, der Patientensicherheit f&#246;rderliche Einstellung. Andererseits herrscht zu Beginn des Studiums Unkenntnis und Unsicherheit &#252;ber den Meldevorgang beim Auftreten von Fehlern, in der Fehlerkommunikation und bez&#252;glich der Konsequenzen eines Fehlers f&#252;r den Einzelnen <TextLink reference="8"></TextLink>. &#220;ber die Einstellungen zu Patientensicherheit &#252;ber den Verlauf von Curricula  und am Ende des Studiums ist bisher noch wenig bekannt.</Pgraph><Pgraph>F&#252;r den deutschsprachigen Raum existiert bisher noch kein Instrument welches systematisch Daten zu studentischen Bed&#252;rfnissen oder der Einstellung und dem Umgang mit Behandlungsfehlern aus studentischer Perspektive erhebt. Mit der deutschsprachigen Validierung einer Kurzversion des Attitudes towards Patient Safety Questionnaire (G-APSQ<Mark2>short</Mark2>), soll die vorliegende Studie diese L&#252;cke schlie&#223;en. Von den bisher bestehenden Messinstrumenten wurde dieser ausgew&#228;hlt, da er am umfassendsten validiert wurde. Die angestrebte Validierung bezieht sich auf Konstruktvalidit&#228;t. Es wird also &#252;berpr&#252;ft, inwiefern das Instrument das zu erfassende Merkmal der Einsteillung zu Patientensicherheit (&#61;Konstrukt) misst.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Aims">
      <MainHeadline>Aims</MainHeadline><Pgraph>The present article examines two aspects of the APSQ:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">Development and test-theoretical examination of a German-language short version of the APSQ (G-APSQ<Mark2>short</Mark2>) for measuring attitudes towards patient safety using item and reliability analyses for internal consistency, as well as the examination of factorial structure, that is, the examination of which subscales are also interpretable in German-speaking regions. </ListItem><ListItem level="1" levelPosition="2" numString="2.">Examination of the reliability of change of the G-APSQ<Mark2>short</Mark2> in detecting changes in attitudes towards patient safety through short-term intervention. </ListItem></OrderedList></Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Fragestellung">
      <MainHeadline>Fragestellung</MainHeadline><Pgraph>Das vorliegende Manuskript untersucht zwei Aspekte des APSQ:</Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">Entwicklung und testtheoretische &#220;berpr&#252;fung einer deutschsprachigen Kurzversion des APSQ (G-APSQ<Mark2>short</Mark2>) zur Messung der Einstellung gegen&#252;ber Patientensicherheit mittels Item- und Reliabilit&#228;tsanalysen zur Ermittlung der internen Konsistenz, sowie &#220;berpr&#252;fung der faktoriellen Struktur, also die Untersuchung, welche Subskalen auch im deutschsprachigen Raum interpretiert werden d&#252;rfen.</ListItem><ListItem level="1" levelPosition="2" numString="2.">&#220;berpr&#252;fung der Ver&#228;nderungsreliabilit&#228;t des G-APSQ<Mark2>short</Mark2> zum Nachweis von Ver&#228;nderungen der Einstellung gegen&#252;ber Patientensicherheit anhand einer kurzzeitigen Intervention.</ListItem></OrderedList></Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Methods">
      <MainHeadline>Methods</MainHeadline><Pgraph>Two studies were designed to validate the questionnaire. In Study 1, the internal consistency and factorial structure of the questionnaire were examined using a sample of medical students (N&#61;83). In Study 2, a smaller sample (N&#61;21) of medical students was used to test the reliability of change of the scales that proved valid in Study 1. Consent was granted by the responsible medical faculty ethics commission for both studies. All data was gathered anonymously. </Pgraph><SubHeadline2>Translation</SubHeadline2><Pgraph>The translation of the questionnaire into German according to international standards preceded both studies <TextLink reference="15"></TextLink>. Initially, two colleagues translated all of the items from English into German independently from each other; variances between the two translations were then discussed, and an agreement was reached on a mutual version. This first German version was then translated back into English by a third colleague whose native language is English. The resulting back-translation version was then compared to the English-language original version, showing minimal deviations which were resolved in communicative validation between the three colleagues and then incorporated in the final validation version of the questionnaire.</Pgraph><SubHeadline2>Pilot test</SubHeadline2><Pgraph>The pilot test of the questionnaire took place in the span of one week with n&#61;22 medical students. The students gave feedback on the functionality and comprehensibility of the questions and were not permitted to take part in the ensuing study sample.  </Pgraph><SubHeadline2>Form</SubHeadline2><Pgraph>Analogous to the original version, the individual questions were scored on a Likert scale of 1 (strongly disagree) to 7 (strongly agree). These measures assured the best comprehensibility and the greatest conformity with the original questionnaire.  </Pgraph><SubHeadline2>Implications from the pilot test</SubHeadline2><Pgraph>During both the translation and the pilot test, the formulation of the items in accordance with the original wording in the subscales &#8220;disclosure responsibility&#8221; and &#8220;team functioning&#8221; proved to be very challenging. The translations were consistent with the original scales in the translation&#47;back-translation step, but this resulted in a loss of the possibility for sensible differentiation in answerability. Ceiling effects arose from these items in the pilot test &#8211; all of the students assessed the items with full points. Because these were exactly the subscales that did not differentiate between the students and tutors in the original validation study, the authors chose to further validate a German short version of the APSQ (German APSQ short; G-APSQ<Mark2>short</Mark2>) (see Figure 1 <ImgLink imgNo="1" imgType="figure"/>).</Pgraph><SubHeadline2>Data collection</SubHeadline2><SubHeadline3>Study 1</SubHeadline3><Pgraph>The first phase of the questionnaire validation was performed with a sample drawn from among all medical students participating in the national conference of the German Medical Students&#8216; Association (<Mark2>bvmd</Mark2>) from November 30 to December 2, 2012. In total, approximately 200 students from all German medical faculties took part in the conference. The questionnaire was disseminated among the students during registration. Completed questionnaires could be returned to a centrally located box over the course of the weekend. As an incentive, twenty book vouchers with a value of ten euro each were raffled. </Pgraph><SubHeadline3>Study 2</SubHeadline3><Pgraph>In curriculum development and evaluation, not only cross-sectional data concerning medical students&#8217; attitudes towards error and patient safety are of interest, but also changes in these attitudes through relevant interventions for the purpose of education in patient safety <TextLink reference="14"></TextLink>. For this reason, Study 2 was conducted in order to evaluate the validity of change of the G-APSQ<Mark2>short</Mark2>. To this end, data was gathered from a total of 21 students at the beginning and at the end of the one-week summer school &#8220;Errors in Medicine&#8221; in August 2013. During this week, the participants received intensive instruction and ensuing discussion opportunity in the principles of error theory, in legal, ethical and philosophical aspects of errors in medicine as well as in practical handling of diagnostic and treatment errors. </Pgraph><SubHeadline2>Data analysis</SubHeadline2><Pgraph>The data for both studies was analyzed using SPSS Version 20.0. All reported significant data relate to an alpha error level of p&#61;.05. All of the items were coded according to the original; higher values signify an attitude that would be beneficial to patient safety.</Pgraph><Pgraph>In Study 1, the reliability was first checked using Cronbach&#8217;s alpha. Subsequently, testing of the preconditions for a factor analysis was conducted using two statistical procedures for estimating the correlation of the items to each other. More precisely, the adequacy of the sample was assessed by means of the Kaiser-Meyer-Olkin (KMO) test, and the sphericity was examined using Bartlett&#8217;s test. The latter tests the data to determine whether they come from one population or are all uncorrelated. The KMO test indicates the proportion of variance among individual variables that is not explicable by other variables <TextLink reference="16"></TextLink>. The factorial structure was examined by means of explorative factor analysis (maximum likelihood, with varimax rotation and Kaiser normalization).</Pgraph><Pgraph>In Study 2, a multivariate analysis of variance (MANOVA) was conducted for the entire scale. Within the MANOVA, the Pillai&#8217;s Trace Test was interpreted. LSD (Least Significant Difference) tests were used to clarify post-hoc interactive effects. For Study 2, the reliability of change (measuring point 2 &#8211; measuring point 1) was assessed using Cronbach&#8217;s &#945;. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Methoden">
      <MainHeadline>Methoden</MainHeadline><Pgraph>Es wurden zwei Teilstudien zur Validierung des Fragebogens konzipiert. In Studie 1 wurden an einer Stichprobe von Medizinstudierenden (N&#61;83) die interne Konsistenz sowie die faktorielle Struktur des Fragebogens &#252;berpr&#252;ft. In Studie 2 wurde anhand einer kleineren Stichprobe (N&#61;21) von Medizinstudierenden die Ver&#228;nderungsreliabilit&#228;t von denjenigen Skalen des Fragebogens getestet, die sich in Studie 1 als valide erwiesen hatten. F&#252;r beide Studien wurde ein Ethikvotum der zust&#228;ndigen medizinischen Fakult&#228;t eingeholt. Alle Daten wurden anonym erhoben.</Pgraph><SubHeadline2>&#220;bersetzung </SubHeadline2><Pgraph>Beiden Teilstudien ging die &#220;bersetzung des Fragebogens ins Deutsche entsprechend internationaler Standards voraus <TextLink reference="15"></TextLink>. Zwei Mitarbeiter &#252;bersetzten zun&#228;chst unabh&#228;ngig voneinander alle Items vom Englischen ins Deutsche; bei Abweichungen zwischen beiden &#220;bersetzungen wurden diese besprochen und es wurde sich auf eine gemeinsame Version geeinigt. Diese erste deutsche Version wurde von einem dritten Mittarbeiter, der zugleich Muttersprachler im Englischen ist, ins Deutsche r&#252;ck&#252;bersetzt. Diese r&#252;ck&#252;bersetzte Version wurde mit der englischen Originalversion verglichen. Dabei zeigten sich minimale Abweichungen, die im Sinne einer kommunikativen Validierung zwischen den drei Mitarbeitern gekl&#228;rt und in die finale Validierungsversion des Fragebogens eingearbeitet wurden. </Pgraph><SubHeadline2>Pilotierung</SubHeadline2><Pgraph>Die Pilotierung des Fragebogens fand an n&#61;22 Medizinstudierenden innerhalb von einer Woche statt. Die Studierenden gaben R&#252;ckmeldung &#252;ber Funktionalit&#228;t und Verst&#228;ndlichkeit der Fragen und durften anschlie&#223;end im Studiensample nicht teilnehmen. </Pgraph><SubHeadline2>Form</SubHeadline2><Pgraph>Die einzelnen Fragen werden analog zur Originalversion auf einer Likert Skala von 1 (ich stimme nicht zu) bis 7 (ich stimme voll und ganz zu) bewertet. Durch diese Ma&#223;nahmen konnte eine m&#246;glichst gute Verst&#228;ndlichkeit und hohe &#220;bereinstimmung und Vergleichbarkeit mit dem Original gew&#228;hrleistet werden. </Pgraph><SubHeadline2>Konsequenzen aus der Pilotierung</SubHeadline2><Pgraph>Sowohl bei der &#220;bersetzung, als auch w&#228;hrend der Pilotierung fiel bei den Subskalen <Mark2>Angabepflicht von Fehlern</Mark2> (&#8222;Disclosure responsibility&#8220;) und <Mark2>Zusammenarbeit&#47;Teamf&#228;higkeit</Mark2> (&#8222;Team functioning&#8220;) auf, dass es sehr herausfordernd war, die Items gem&#228;&#223; dem Original zu formulieren. Die &#220;bersetzungen stimmten zwar im &#220;bersetzung-R&#252;ck&#252;bersetzungsschritt mit den Originalskalen &#252;berein, allerdings ging hierdurch die M&#246;glichkeit einer sinnvollen Differenzierung bei der Beantwortbarkeit verloren. In der Pilotierung ergaben sich f&#252;r diese Items Deckeneffekte &#8211; alle Studierenden bewerteten die Items mit der vollen Punktzahl. Da just dies auch die Subskalen waren, welche in der Original Validierungsstudie nicht zwischen den Studierenden und Tutoren differenzierten, entschieden sich die Autoren eine deutsche Kurzversion des APSQ (German APSQ Kurzversion; G-APSQ<Mark2>short</Mark2>) weiter zu validieren (siehe Abbildung 1 <ImgLink imgNo="1" imgType="figure"/>). </Pgraph><SubHeadline2>Datenerhebung</SubHeadline2><SubHeadline3>Studie 1</SubHeadline3><Pgraph>Der erste Studienabschnitt der Validierung des Fragebogens fand an einer Stichprobe aller teilnehmenden Medizinstudierenden des Bundeskongresses der Bundesvertretung der Medizinstudierenden in Deutschland (bvmd) vom 30.11.2012 bis 02.12.2012 statt. An diesem Kongress nahmen insgesamt ca. 200 Studierende von allen deutschen medizinischen Fakult&#228;ten teil. Den Teilnehmern wurden bei der Kongress-Anmeldung die Frageb&#246;gen ausgeh&#228;ndigt; ausgef&#252;llte B&#246;gen konnten &#252;ber das gesamte Wochenende zentral in einer Urne abgegeben werden. Als Anreiz f&#252;r die Bearbeitung wurden unter allen Teilnehmern 20 B&#252;chergutscheine zu jeweils 10 Euro verlost.</Pgraph><SubHeadline3>Studie 2</SubHeadline3><Pgraph>In der Curriculumsentwicklung und -evaluation sind nicht nur Querschnittsdaten hinsichtlich der Haltung von Medizinstudierenden zu Fehlern und Patientensicherheit von Interesse, sondern auch Ver&#228;nderungen dieser Haltung durch entsprechende Interventionen im Sinne einer Ausbildung zu Patientensicherheit <TextLink reference="14"></TextLink>. Studie 2 wurde daher durchgef&#252;hrt, um die Ver&#228;nderungsvalidit&#228;t des G-APSQ<Mark2>short</Mark2> zu evaluieren.</Pgraph><Pgraph>Im Rahmen der einw&#246;chigen Summerschool &#8222;Fehler in der Medizin&#8220; im August 2013 wurden hierf&#252;r zu Beginn und nach Abschluss der Veranstaltung Daten von insgesamt 21 Studierenden erhoben. Innerhalb dieser Woche erhielten die Teilnehmer intensiven Unterricht und anschlie&#223;ende Diskussionsm&#246;glichkeiten zu Grundlagen der Fehlertheorie, zu rechtlichen, ethischen und philosophischen Aspekten von Fehlern in der Medizin sowie zum praktischen Umgang mit erfolgten Behandlungsfehlern.  </Pgraph><SubHeadline2>Datenanalyse</SubHeadline2><Pgraph>Die Daten beider Studien wurden mit SPSS Version 20.0 analysiert. Alle berichteten signifikanten Werte beziehen sich auf ein Alphafehlerniveau von p&#61;.05. Alle Items wurden analog zum Original kodiert; h&#246;here Werte bedeuten eine Einstellung, die der Patientensicherheit f&#246;rderlich w&#228;re. </Pgraph><Pgraph>In Studie 1 wurde zun&#228;chst die Reliabilit&#228;t anhand von Cronbach&#8217;s alpha &#252;berpr&#252;ft. Anschlie&#223;end wurden die Voraussetzungen f&#252;r eine Faktorenanalyse anhand von zwei statistischen Verfahren zur Absch&#228;tzung der Korrelationen der Items untereinander getestet. Genauer, wurden die Ad&#228;quatheit des Samples anhand des Kaiser-Meyer-Olkin Kriteriums (KMOK) und die Sph&#228;rizit&#228;t anhand von Bartletts Sph&#228;rizit&#228;tstest &#252;berpr&#252;ft. Letzterer &#252;berpr&#252;ft ob die Daten aus einer Grundgesamtheit stammen oder allesamt unkorreliert sind. Der KMOK zeigt an wie gro&#223; der Anteil der Varianz der einzelnen Variablen ist, der sich nicht durch die anderen Variablen erkl&#228;ren l&#228;sst <TextLink reference="16"></TextLink>. Die faktorielle Struktur wurde anhand einer explorativen Faktorenanalyse (Maximum Likelihood, mit Varimax Rotation und Kaiser-Normalisierung) &#252;berpr&#252;ft. </Pgraph><Pgraph>In Studie 2 wurde eine multivariate Varianzanalyse (MANOVA) f&#252;r die Gesamtskala durchgef&#252;hrt. Innerhalb der MANOVA wurde der Pillai-Spur-Test interpretiert. Zur Kl&#228;rung von Post-hoc Wechselwirkungseffekten wurden LSD (Least Significant Difference) Tests durchgef&#252;hrt. F&#252;r diese Studie wurde die Ver&#228;nderungsreliabilit&#228;t (Messzeitpunkt 2 - Messzeitpunkt 1) anhand von Cronbachs &#945; &#252;berpr&#252;ft.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Results">
      <MainHeadline>Results</MainHeadline><SubHeadline2>Study 1 </SubHeadline2><Pgraph>The sample included in Study 1 comprised N&#61;83 data sets (M&#61;23.16 years; SD&#61;2.72; 46 female). The participants represented all of the three stages of medical study in Germany (pre-clinical N&#61;17; clinical N&#61;61; practical year N&#61;5). Of the total of seven subscales, six subscales reached adequate reliability (Cronbach&#8217;s &#945;&#61;.722 - .903). Four items from the subscale &#8220;professional incompetence as error cause&#8221; had to be removed from the final questionnaire due to insufficient conformity to all of the other subscales. Table 1 <ImgLink imgNo="1" imgType="table"/> gives an overview of the reliabilities. The entire scale showed a reliability of Cronbach&#8217;s &#945; &#61;.744.   </Pgraph><Pgraph>The Kaiser-Meyer-Olkin criterion was at 0.618, thus above the limit of 0.6 <TextLink reference="17"></TextLink>, and Bartlett&#8217;s sphericity test also proved significant (Chi<Superscript>2</Superscript><Subscript>(df&#61;210)</Subscript>&#61;.680-.566;p&#60;.001). The factorial structure resulted in six extracted factors (factor loading &#62; .40) which agreed with the theoretically conceived subscales (&#8220;patient safety training received&#8221;, &#8220;error reporting confidence&#8221;, &#8220;working hours as error cause&#8221;, &#8220;error inevitability&#8221;, &#8220;patient&#8217;s role in error&#8221;, &#8220;importance of patient safety in the curriculum&#8221;). Altogether, the subscales explain 52.91&#37; of the total variance. The extracted factors as well as the explained variance and descriptive statistics can be found in Table 1 <ImgLink imgNo="1" imgType="table"/>. The final G-APSQ<Mark2>short</Mark2> questionnaire comprises 14 items for six subscales and can be found in Attachment 1 <AttachmentLink attachmentNo="1"/> of this article. For those interested, we have illustrated the initial eigenvalues of the items and the rotated loading matrix in Attachments 2 <AttachmentLink attachmentNo="2"/> and Attachment 3 <AttachmentLink attachmentNo="3"/> of this article. </Pgraph><SubHeadline2>Study 2</SubHeadline2><Pgraph>The N&#61;21 participants (11 female) came from ten different German medical faculties. The average age was 26 years. </Pgraph><Pgraph>The G-APSQ<Mark2>short</Mark2> yields a highly differentiated result on the change in attitude over the week concerning the subject. For the reliability of change Cronbach&#8217;s &#945;&#61;.615 was sufficiently sensitive for variance. The multivariate analysis of variance demonstrated that the differences between before and after the summer school had become significant with medium size effect (F(1;16)&#61;6,675; p&#60;.05; &#951;<Superscript>2</Superscript>&#61;.29). As can be seen in Figure 2 <ImgLink imgNo="2" imgType="figure"/>, all of the scales contributed to this effect, with the exception of the scale &#8220;patient safety training received&#8221;. The LSD post hoc on interactive effects of measuring point and subscale is significant for six subscales (see Table 2 <ImgLink imgNo="2" imgType="table"/>). The descriptive statistics for the subscales can be found in Table 2 <ImgLink imgNo="2" imgType="table"/>.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Ergebnisse">
      <MainHeadline>Ergebnisse</MainHeadline><SubHeadline2>Studie 1</SubHeadline2><Pgraph>Die in Studie 1 eingeschlossene Stichprobe umfasste N&#61;83 Datens&#228;tze (M&#61;23.16 Jahre; SD&#61;2.72; 46 weiblich). Die Teilnehmer verteilten sich &#252;ber alle drei Studienabschnitte (Vorklinik N&#61;17; Klinik N&#61;61; Praktisches Jahr N&#61;5). Von den insgesamt sieben Subskalen konnte bei sechs Subskalen ausreichende Reliabilit&#228;t (Cronbachs &#945;&#61;.722 - .903) erreicht werden. Vier Items der Subskala &#8222;Berufliche Inkompetenz als Fehlerursache&#8220; mussten aus der finalen Fragebogenversion aufgrund mangelnder Passung zu allen anderen Subskalen entfernt werden. Eine &#220;bersicht der Reliabilit&#228;ten zeigt Tabelle 1 <ImgLink imgNo="1" imgType="table"/>. Die Gesamtskala zeigte eine Reliabilit&#228;t von Cronbachs &#945;&#61;.744. </Pgraph><Pgraph>Das Kaiser-Meyer-Olkin Kriterium lag bei 0.618, also &#252;ber der Grenze von 0.6 <TextLink reference="17"></TextLink> und Bartlett&#8217;s Sph&#228;rizit&#228;tstest war ebenfalls signifikant (Chi<Superscript>2</Superscript><Subscript>(df&#61;210)</Subscript>&#61;.680-.566;p&#60;.001). Die faktorielle Struktur ergab sechs extrahierte Faktoren, (Faktorladungen &#62; .40) welche mit den theoretisch konzipierten Subskalen (&#8222;Patientensicherheitstraining bis heute&#8220;, &#8222;Sicherheit, Fehler zu kommunizieren&#8220;, &#8222;Arbeitszeiten als Fehlerquelle&#8220;, &#8222;Unvermeidbarkeit von Fehlern&#8220;, &#8222;Rolle des Patienten bei Fehlern&#8220;, &#8222;Bedeutung der Patientensicherheit im Lehrplan&#8220;) &#252;bereinstimmen. Insgesamt kl&#228;ren die Subskalen 52,91&#37; der Gesamtvarianz auf. Die extrahierten Faktoren sowie Varianzaufkl&#228;rung und deskriptive Statistiken finden sich in Tabelle 1 <ImgLink imgNo="1" imgType="table"/>. Der finale Fragebogen G-APSQshort beinhaltet 14 Items zu sechs Subskalen und findet sich im Anhang 1 <AttachmentLink attachmentNo="1"/> dieses Artikels. F&#252;r interessierte Leser haben wir die anf&#228;nglichen Eigenwerte der Items und die rotierte Ladungsmatrix in Anhang 2 <AttachmentLink attachmentNo="2"/> und Anhang 3 <AttachmentLink attachmentNo="3"/> des Artikels dargestellt.</Pgraph><SubHeadline2>Studie 2</SubHeadline2><Pgraph>Die eingeschlossenen N&#61;21 Teilnehmer (davon 11 weiblich) kamen von zehn verschiedenen medizinischen Fakult&#228;ten Deutschlands. Das Durchschnittsalter betrug 26 Jahre.</Pgraph><Pgraph>Der G-APSQ<Mark2>short</Mark2> liefert ein sehr differenziertes Ergebnis dar&#252;ber, wie sich die Einstellungen zu dem Thema &#252;ber die Woche ver&#228;ndert haben. Die Ver&#228;nderungsreliabilit&#228;t liegt bei Cronbachs &#945;&#61;.615 und ist damit ausreichend messsensitiv f&#252;r Ver&#228;nderungen. Die Multivariate Varianzanalyse ergab, dass die Unterschiede vor- zu nach der Summerschool mit mittelgro&#223;em Effekt signifikant geworden sind (F(1;16)&#61;6,675; p&#60;.05; &#951;<Superscript>2</Superscript>&#61;.29). Wie in Abbildung 2 <ImgLink imgNo="2" imgType="figure"/> zu erkennen ist, haben alle Skalen zu diesem Effekt beigetragen, au&#223;er die Skala &#8222;Unterricht zu Patientensicherheit im Studium&#8220;. Der LSD Post-hoc der Wechselwirkung von Messzeitpunkt und Subskala ist f&#252;r vier der sechs Subskalen signifikant (siehe Tabelle 2 <ImgLink imgNo="2" imgType="table"/>). Die deskriptiven Statistiken der Subskalen finden sich in Tabelle 2 <ImgLink imgNo="2" imgType="table"/>. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Discussion">
      <MainHeadline>Discussion</MainHeadline><Pgraph>The German short version of the Attitudes towards Patient Safety Questionnaire can be deemed valid in six subscales. Despite a low number of overall items, six of the subscales already validated in the original version were successfully validated. The subscale &#8220;professional incompetence as error cause&#8221; could not be validated. Further assessment of the formulation may be necessary here. The reliability of the individual subscales can be qualified as exceptionally good. Favorably, despite a high reliability for one point of measurement, the reliability of change can also be considered as very good <TextLink reference="16"></TextLink>. It is not surprising that the scale &#8220;patient safety training received&#8221; did not differ in comparison before and after the summer school, since it simply queried instruction during the course of undergraduate medical eduction (which the summer school was not a part of). The results of our study show great similarity with those of other international measurements regarding patient safety <TextLink reference="8"></TextLink>, <TextLink reference="12"></TextLink>. Medical students&#8216; attitudes towards patient safety are principally positive (students recognize working hours as a source of errors, are conscious of the inevitability of errors, desire more instruction in patient safety), their confidence in reporting errors is, however, comparatively low, and the role of the patient in clarifying error is more or less unclear to them. </Pgraph><Pgraph>Because of their use in the evaluation of interventions for the improvement of patient safety, the verified reliability of change is particularly important for measurement instruments regarding attitudes. These interventions could be applied both in smaller interventions, such as courses or workshops (as implemented by Jha <TextLink reference="14"></TextLink>, for example), and in entire curricula (as urged by Armitage et al. <TextLink reference="13"></TextLink>). It should be noted that, for now, the subscales apply exclusively to medical students. Applications outside of this sample (e.g., residents, nurses) would appear advantageous. The G-APSQshort would, however, need to be revalidated beforehand.</Pgraph><SubHeadline3>Limitations</SubHeadline3><Pgraph>The G-APSQ<Mark2>short</Mark2> is a short, written measurement instrument regarding medical students&#8217; attitudes towards patient safety and treatment errors. The sample of N&#61;83 simply represents a cross section of different medical faculties. Although this ensures independence from individual faculties (i.e., of which some of them might have integrated the subject of patient safety particularly well or particularly poorly in their curriculum), an effective representation of all medical students in Germany is not provided. Furthermore, it can be presumed that exceptionally dedicated students attended the bvmd conference. This limitation parallels that of the original study. </Pgraph><Pgraph>The measurement of change presented here was taken on a small sample with very condensed instruction in a short period of time. Whether or not this instrument is valid for implementation in measurement of change over longer periods of time is ultimately not evidenced. Nonetheless, the medium effect size of the multivariate analysis of variance, as well as the sufficiently high reliability of change indicate that changes can be adequately depicted. A measurement of change over a longer period to strengthen the validation of the instrument would be advisable.</Pgraph><Pgraph>In the German short version, the measurement instrument only has two to three items per subscale, a range deemed insufficient by the authors of the original instrument. Nevertheless, the internal consistency of both the original instrument and the German short version rated as satisfactory. Only further research can indicate to what extent differentiated assertions can be made at the subscale level with the G-APSQ<Mark2>short</Mark2> or if extension of the individual subscales is necessary.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Diskussion">
      <MainHeadline>Diskussion</MainHeadline><Pgraph>Die deutsche Kurzversion des Attitudes to Patient Safety Questionnaire kann in sechs Subskalen als valide gelten. Es ist trotz einer geringen Anzahl an Gesamtitems gelungen, sechs der bereits in der Originalversion validierten Subskalen ebenfalls zu validieren. Die Subskala &#8222;Berufliche Inkompetenz als Fehlerursache&#8220;  konnte nicht validiert werden. Hier ist ggf. eine nochmalige &#220;berpr&#252;fung der Formulierungen notwendig. Die Reliabilit&#228;t der einzelnen Subskalen kann als au&#223;erordentlich gut bewertet werden. Erfreulich ist, dass trotz einer auf einen Messzeitpunkt bezogenen hohen Reliabilit&#228;t die Ver&#228;nderungsreliabilit&#228;t ebenfalls als sehr gut einzusch&#228;tzen ist <TextLink reference="16"></TextLink>. Das die Skala &#8222;Unterricht zu Patientensicherheit im Studium&#8220; sich im Vergleich vor zu nach der Summerschool nicht unterschied ist nicht erstaunlich, da diese lediglich retrospektiv den Unterricht <Mark2>im</Mark2> Studium erfragt. Die Ergebnisse unserer Studie weisen gro&#223;e &#196;hnlichkeit mit den Ergebnissen anderer internationaler Messungen zur Patientensicherheit auf <TextLink reference="8"></TextLink>, <TextLink reference="12"></TextLink>. So ist die Einstellung zu Patientensicherheit bei Medizinstudierenden prinzipiell positiv (Studierende erkennen Arbeitszeiten als Fehlerquelle, sind sich der Unvermeidbarkeit von Fehlern bewusst, w&#252;nschen sich mehr Lehre zu Patientensicherheit), jedoch ist die Sicherheit, Fehler zu kommunizieren vergleichsweise gering und den Studierenden ist auch die Rolle der Patienten bei der Kl&#228;rung von Fehlern eher unklar. </Pgraph><Pgraph>Die nachgewiesene Ver&#228;nderungsreliabilit&#228;t ist f&#252;r Messinstrumente zu Haltung und Einstellungen besonders wichtig, da sie so zur Evaluation von Interventionen zur Steigerung der Patientensicherheit herangezogen werden kann. Diese Interventionen k&#246;nnten sich sowohl auf kleine Interventionen wie Kurse oder Workshops (wie beispielsweise von Jha <TextLink reference="14"></TextLink> umgesetzt) als auch auf ganze Curricula beziehen (wie von Armitage et al. <TextLink reference="13"></TextLink> gefordert). Zu  beachten ist, dass sich die Subskalen bisher ausschlie&#223;lich auf Medizinstudierende beziehen. Einsatzbereiche au&#223;erhalb dieser Stichprobe (bspw. Weiterbildungsassistenten, Gesundheitspfleger) erscheinen w&#252;nschenswert, jedoch m&#252;sste hierzu der G-APSQ<Mark2>short</Mark2> zuvor erneut validiert werden. </Pgraph><SubHeadline3>Limitationen</SubHeadline3><Pgraph>Das G-APSQ<Mark2>short</Mark2> ist ein kurzes schriftliches Messinstrument &#252;ber die Einstellungen zu Patientensicherheit und Behandlungsfehlern bei Medizinstudierenden. Die Stichprobe von N&#61;83 stellt lediglich einen Querschnitt verschiedener medizinischer Fakult&#228;ten dar. Die Unabh&#228;ngigkeit von einzelnen Fakult&#228;ten (welche das Thema Patientensicherheit besonders gut oder besonders schlecht in das Curriculum integriert haben) kann dadurch zwar gew&#228;hrleistet werden, jedoch ist die tats&#228;chliche Repr&#228;sentativit&#228;t f&#252;r alle Medizinstudierenden Deutschlands nicht gegeben. Weiterhin k&#246;nnte vermutet werden, dass auf dem bvmd Kongress besonders engagierte Studierende anzutreffen sind. Auch f&#252;r die in der Originalstudie verwendete Stichprobe wurde diese Einschr&#228;nkung vorgenommen.</Pgraph><Pgraph>Die vorliegende Ver&#228;nderungsmessung fand an einer kleinen Stichprobe mit sehr verdichtetem Unterricht in sehr kurzer Zeit statt. Ob das Messinstrument zu einer langfristigeren Ver&#228;nderungsmessung eingesetzt werden kann, ist letztlich nicht erwiesen. Nichtsdestotrotz weist die mittelgro&#223;e Effektst&#228;rke der multivariaten Varianzanalyse sowie die ausreichend hohe Ver&#228;nderungsreliabilit&#228;t darauf hin, dass Ver&#228;nderungen ad&#228;quat dargestellt werden k&#246;nnen. Eine Ver&#228;nderungsmessung &#252;ber einen l&#228;ngeren Zeitraum ist zur St&#228;rkung der Validierung des Messinstruments w&#252;nschenswert.</Pgraph><Pgraph>Das Messinstrument beinhaltet in der deutschen Kurzversion nur 2-3 Items pro Subskala, welches von den Autoren des Originalinstrumentes als zu gering eingesch&#228;tzt wurde. Nichtsdestoweniger ist die interne Konsistenz  sowohl des Originalinstruments, als auch der deutschen Kurzversion jeweils als befriedigend zu werden. Inwieweit differenzierte Aussagen auf Subskalenniveau mit dem G-APSQ<Mark2>short</Mark2> m&#246;glich sind oder ob Verl&#228;ngerungen der einzelnen Subskalen ben&#246;tigt werden kann nur weitere Forschung zeigen. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Conclusions">
      <MainHeadline>Conclusions</MainHeadline><Pgraph>The present measurement instrument can be regarded as validated for comparison of different faculties and for the evaluation of short-term intervention methods. Consisting of 14 items, it is relatively brief and clearly formulated. In light of advancing curriculum development, the authors hope that the G-APSQ<Mark2>short</Mark2> will be used as a measurement instrument for national and international comperability. In German-speaking Europe, the systematic development and collection of reliable data on patient safety is in its incipient stages. It is hoped that regular and concerted implementation of measurement instruments like the G-APSQ<Mark2>short</Mark2> will facilitate the emergence of a common ground for data comparison for many different medical faculties. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Schlussfolgerung">
      <MainHeadline>Schlussfolgerung</MainHeadline><Pgraph>Das vorliegende Messinstrument kann zum Vergleich verschiedener Fakult&#228;ten und zur Evaluation von kurzfristigen Interventionsma&#223;nahmen als validiert gelten. Es ist mit vierzehn Items relativ kurz und verst&#228;ndlich formuliert. Die Autoren hoffen, dass im Zuge der voranschreitenden Curriculumsentwicklung das G-APSQ<Mark2>short</Mark2> als ein Messinstrument zur nationalen und internationalen Vergleichbarkeit verwendet wird. F&#252;r den deutschsprachigen Raum steht die systematische Entwicklung und Erfassung reliabler Daten zu Patientensicherheit erst am Anfang. Es ist zu hoffen, dass durch den regelm&#228;&#223;igen und konzertierten Einsatz von Messinstrumenten wie dem G-APSQ<Mark2>short</Mark2> eine gemeinsame Datenbasis vieler verschiedener deutschsprachiger medizinischer Fakult&#228;ten entsteht. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Anmerkung">
      <MainHeadline>Anmerkung</MainHeadline><Pgraph><Superscript>1</Superscript> Zur besseren Lesbarkeit wird nur die m&#228;nnliche Sprachform verwendet; diese sind als geschlechtsneutral anzusehen.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Acknowledgements">
      <MainHeadline>Acknowledgements</MainHeadline><Pgraph>The authors wish to thank the Volkswagen Foundation for their financial support of the summer school. </Pgraph><Pgraph>Additional thanks go to the German Medical Students&#8217; Association (<Mark2>bvmd</Mark2>) for their support in data collection. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Danksagung">
      <MainHeadline>Danksagung</MainHeadline><Pgraph>Die Autoren danken der Volkswagenstiftung f&#252;r die finanzielle Unterst&#252;tzung der Summerschool.</Pgraph><Pgraph>Ein weiterer Dank gilt der Bundesvertretung der Medizinstudierenden in Deutschland (bvmd) f&#252;r die Unterst&#252;tzung bei der Datenerhebung.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>The authors declare that they have no competing interests.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>Die Autoren erkl&#228;ren, dass sie keine Interessenkonflikte im Zusammenhang mit diesem Artikel haben. </Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Schrappe M</RefAuthor>
        <RefTitle>Patientensicherheit und Risikomanagement</RefTitle>
        <RefYear>2005</RefYear>
        <RefJournal>Med Klinik</RefJournal>
        <RefPage>478&#8211;485</RefPage>
        <RefTotal>Schrappe M. Patientensicherheit und Risikomanagement. Med Klinik. 2005;100(8):478&#8211;485. DOI: 10.1007&#47;s00063-005-1061</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1007&#47;s00063-005-1061</RefLink>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Spiegel online</RefAuthor>
        <RefTitle>Fehlerhafte Behandlungen: Tausende Patienten klagen &#252;ber Medizinerpfusch</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Spiegel Online</RefJournal>
        <RefPage></RefPage>
        <RefTotal>Spiegel online. Fehlerhafte Behandlungen: Tausende Patienten klagen &#252;ber Medizinerpfusch. Spiegel Online. 2011. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.spiegel.de&#47;wissenschaft&#47;medizin&#47;fehlerhafte-behandlungen-tausende-patienten-klagen-ueber-medizinerpfusch-a-769698.html zuletzt aufgerufen am 10.10.15</RefTotal>
        <RefLink>http:&#47;&#47;www.spiegel.de&#47;wissenschaft&#47;medizin&#47;fehlerhafte-behandlungen-tausende-patienten-klagen-ueber-medizinerpfusch-a-769698.html</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Bildzeitung</RefAuthor>
        <RefTitle>SCHOCKZAHLEN&#33; 1712 Tote durch &#196;rztepfusch ...und mangelhafte Medizinprodukte</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Bildzeitung</RefJournal>
        <RefPage></RefPage>
        <RefTotal>Bildzeitung. SCHOCKZAHLEN&#33; 1712 Tote durch &#196;rztepfusch ...und mangelhafte Medizinprodukte. Bildzeitung. 2012. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.bild.de&#47;politik&#47;inland&#47;behandlungsfehler&#47;tod-durch-aerztepfusch-22667672.bild.html</RefTotal>
        <RefLink>http:&#47;&#47;www.bild.de&#47;politik&#47;inland&#47;behandlungsfehler&#47;tod-durch-aerztepfusch-22667672.bild.html</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>Rohe J</RefAuthor>
        <RefAuthor>Heinrich AS</RefAuthor>
        <RefAuthor>Thomeczek C</RefAuthor>
        <RefTitle>CIRSmedical.de: Netzwerk f&#252;r Patientensicherheit</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Dtsch &#196;rztebl</RefJournal>
        <RefPage>A-92, B-71, C-71</RefPage>
        <RefTotal>Rohe J, Heinrich AS, Thomeczek C. CIRSmedical.de: Netzwerk f&#252;r Patientensicherheit. Dtsch &#196;rztebl. 2011;108(3):A-92, B-71, C-71. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.aerzteblatt.de&#47;archiv&#47;80367&#47;CIRSmedical-de-Netzwerk-fuer-Patientensicherheit</RefTotal>
        <RefLink>http:&#47;&#47;www.aerzteblatt.de&#47;archiv&#47;80367&#47;CIRSmedical-de-Netzwerk-fuer-Patientensicherheit</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Association of American Medical Colleges</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2003</RefYear>
        <RefBookTitle>Patient Safety and Graduate Medical Education</RefBookTitle>
        <RefPage>27</RefPage>
        <RefTotal>Association of American Medical Colleges. Patient Safety and Graduate Medical Education. Washington&#47;DC: Association of American Medical Colleges; 2003. P.27. Zug&#228;nglich unter&#47;available from: https:&#47;&#47;members.aamc.org&#47;eweb&#47;upload&#47;patient&#37;20safety&#37;20gme.pdf</RefTotal>
        <RefLink>https:&#47;&#47;members.aamc.org&#47;eweb&#47;upload&#47;patient&#37;20safety&#37;20gme.pdf</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>WHO</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2009</RefYear>
        <RefBookTitle>WHO Patient Safety Curriculum Guide for Medical Schools</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>WHO. WHO Patient Safety Curriculum Guide for Medical Schools. Genf: WHO; 2009. Zug&#228;nglich unter&#47;available from: http:&#47;&#47;www.who.int&#47;patientsafety&#47;education&#47;curriculum&#47;EN&#95;PSP&#95;Education&#95;Medical&#95;Curriculum&#47;en&#47;index.html zuletzt aufgerufen am 10.10.15</RefTotal>
        <RefLink>http:&#47;&#47;www.who.int&#47;patientsafety&#47;education&#47;curriculum&#47;EN&#95;PSP&#95;Education&#95;Medical&#95;Curriculum&#47;en&#47;index.html</RefLink>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Walton MM</RefAuthor>
        <RefAuthor>Shaw T</RefAuthor>
        <RefAuthor>Barnet S</RefAuthor>
        <RefAuthor>Ross J</RefAuthor>
        <RefTitle>Developing a national patient safety education framework for Australia</RefTitle>
        <RefYear>2006</RefYear>
        <RefJournal>Qual Saf Health Care</RefJournal>
        <RefPage>437-442</RefPage>
        <RefTotal>Walton MM, Shaw T, Barnet S, Ross J. Developing a national patient safety education framework for Australia. Qual Saf Health Care. 2006;15(6):437-442. DOI: 10.1136&#47;qshc.2006.019216</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1136&#47;qshc.2006.019216</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Flin R</RefAuthor>
        <RefAuthor>Patey R</RefAuthor>
        <RefAuthor>Jackson J</RefAuthor>
        <RefAuthor>Mearns K</RefAuthor>
        <RefAuthor>Dissanayaka U</RefAuthor>
        <RefTitle>Year 1 medical undergraduates&#39; knowledge of and attitudes to medical error</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>1147-1155</RefPage>
        <RefTotal>Flin R, Patey R, Jackson J, Mearns K, Dissanayaka U. Year 1 medical undergraduates&#39; knowledge of and attitudes to medical error. Med Educ. 2009;43(12):1147-1155. DOI: 10.1111&#47;j.1365-2923.2009.03499.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;j.1365-2923.2009.03499.x</RefLink>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>Kaufmann M</RefAuthor>
        <RefAuthor>Staender S</RefAuthor>
        <RefAuthor>Von Below G</RefAuthor>
        <RefAuthor>Brunner H</RefAuthor>
        <RefAuthor>Portenier L</RefAuthor>
        <RefAuthor>Scheidegger D</RefAuthor>
        <RefTitle>Computerbasiertes anonymes Critical Incident Reporting: ein Beitrag zur Patientensicherheit</RefTitle>
        <RefYear>2002</RefYear>
        <RefJournal>Schw &#196;rztez</RefJournal>
        <RefPage>2554-2558</RefPage>
        <RefTotal>Kaufmann M, Staender S, Von Below G, Brunner H, Portenier L, Scheidegger D. Computerbasiertes anonymes Critical Incident Reporting: ein Beitrag zur Patientensicherheit. Schw &#196;rztez. 2002;83(47):2554-2558.</RefTotal>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Institute of Medicine (US) Committee on Quality of Health Care in Amerika</RefAuthor>
        <RefAuthor> Kohn LT</RefAuthor>
        <RefAuthor>Corrigan JM</RefAuthor>
        <RefAuthor>Donaldson MS</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2000</RefYear>
        <RefBookTitle>To err is human: building a safer health system</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Institute of Medicine (US) Committee on Quality of Health Care in Amerika; Kohn LT, Corrigan JM, Donaldson MS. To err is human: building a safer health system. Washington (DC): National Academies Press; 2000.</RefTotal>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Kern D</RefAuthor>
        <RefAuthor>Thomas P</RefAuthor>
        <RefAuthor>Howard D</RefAuthor>
        <RefAuthor>Bass E</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>1998</RefYear>
        <RefBookTitle>Curriculum Development for Medical Education. A Six- Step- Approach</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Kern D, Thomas P, Howard D, Bass E. Curriculum Development for Medical Education. A Six- Step- Approach. Baltimore: The John Hopkins University Press; 1998.</RefTotal>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>Carruthers S</RefAuthor>
        <RefAuthor>Lawton R</RefAuthor>
        <RefAuthor>Sandars J</RefAuthor>
        <RefAuthor>Howe A</RefAuthor>
        <RefAuthor>Perry M</RefAuthor>
        <RefTitle>Attitudes to patient safety amongst medical students and tutors: Developing a reliable and valid measure</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>e370-e376</RefPage>
        <RefTotal>Carruthers S, Lawton R, Sandars J, Howe A, Perry M. Attitudes to patient safety amongst medical students and tutors: Developing a reliable and valid measure. Med Teach. 2009;31(8):e370-e376. DOI: 10.1080&#47;01421590802650142</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1080&#47;01421590802650142</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Armitage G</RefAuthor>
        <RefAuthor>Cracknell A</RefAuthor>
        <RefAuthor>Forrest K</RefAuthor>
        <RefAuthor>Sandars J</RefAuthor>
        <RefTitle>Twelve tips for implementing a patient safety curriculum in an undergraduate programme in medicine</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>535-540</RefPage>
        <RefTotal>Armitage G, Cracknell A, Forrest K, Sandars J. Twelve tips for implementing a patient safety curriculum in an undergraduate programme in medicine. Med Teach. 2011;33(7):535-540. DOI: 10.3109&#47;0142159X.2010.546449</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159X.2010.546449</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Jha V</RefAuthor>
        <RefAuthor>Winterbottom A</RefAuthor>
        <RefAuthor>Symons J</RefAuthor>
        <RefAuthor>Thompson Z</RefAuthor>
        <RefAuthor>Quinton N</RefAuthor>
        <RefAuthor>Corrado O</RefAuthor>
        <RefAuthor></RefAuthor>
        <RefTitle>Patient-led training on patient safety: A pilot study to test the feasibility and acceptability of an educational intervention</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>Med Teach</RefJournal>
        <RefPage>e1464-e1471</RefPage>
        <RefTotal>Jha V, Winterbottom A, Symons J, Thompson Z, Quinton N, Corrado O, et al. Patient-led training on patient safety: A pilot study to test the feasibility and acceptability of an educational intervention. Med Teach. 2013;35(9):e1464-e1471. DOI: 10.3109&#47;0142159X.2013.778391</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3109&#47;0142159X.2013.778391</RefLink>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>Wild D</RefAuthor>
        <RefAuthor>Grove A</RefAuthor>
        <RefAuthor>Martin M</RefAuthor>
        <RefAuthor>Eremenco S</RefAuthor>
        <RefAuthor>McElroy S</RefAuthor>
        <RefAuthor>Verjee-Lorenz A</RefAuthor>
        <RefAuthor>Erikson P</RefAuthor>
        <RefAuthor> ISPOR Task Force for Translation and Cultural Adaptation</RefAuthor>
        <RefTitle>Principles of Good Practice for the Translation and Cultural Adaptation Process for Patient-Reported Outcomes (PRO) Measures: Report of the ISPOR Task Force for Translation and Cultural Adaptation</RefTitle>
        <RefYear>2005</RefYear>
        <RefJournal>Value Health</RefJournal>
        <RefPage>94-104</RefPage>
        <RefTotal>Wild D, Grove A, Martin M, Eremenco S, McElroy S, Verjee-Lorenz A, Erikson P; ISPOR Task Force for Translation and Cultural Adaptation. Principles of Good Practice for the Translation and Cultural Adaptation Process for Patient-Reported Outcomes (PRO) Measures: Report of the ISPOR Task Force for Translation and Cultural Adaptation. Value Health. 2005;8(2):94-104. DOI: 10.1111&#47;j.1524-4733.2005.04054.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;j.1524-4733.2005.04054.x</RefLink>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>Bortz J</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2005</RefYear>
        <RefBookTitle>Statistik f&#252;r Sozial- und Humanwissenschaftler</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Bortz J. Statistik f&#252;r Sozial- und Humanwissenschaftler. Heidelberg: Springer; 2005.</RefTotal>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>Hutcheson GD</RefAuthor>
        <RefAuthor>Sofroniou N</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>1999</RefYear>
        <RefBookTitle>The multivariate social scientist: Introductory statistics using generalized linear models</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Hutcheson GD, Sofroniou N. The multivariate social scientist: Introductory statistics using generalized linear models. London: Sage; 1999. DOI: 10.4135&#47;9780857028075</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.4135&#47;9780857028075</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 1: Reliability, descriptive statistics and variance clarification of the scales measured as reliable. </Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 1: &#220;bersichtstabelle &#252;ber Reliabilit&#228;ten, deskriptive Statistiken und Varianzaufkl&#228;rung der als reliabel gemessenen Skalen</Mark1></Pgraph></Caption>
        </Table>
        <Table format="png">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 2: Study 2 descriptive statistics for all subscales for both measuring points. The p-values refer to the post-hoc LSD tests of the MANOVA between both measuring points.</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 2: Deskriptiven Statistiken von Studie 2 f&#252;r alle Subskalen f&#252;r beide Messzeitpunkte. Die p-Werte beziehen sich auf die Post-hoc LSD Tests der MANOVA zwischen den beiden Messzeitpunkten.</Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>2</NoOfTables>
      </Tables>
      <Figures>
        <Figure format="png" height="629" width="490">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 1: schematic overview of the creation of the final version of the G-APSQ</Mark1><Mark1><Mark2>short</Mark2></Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 1: Schematische &#220;bersicht zur Erstellung der finalen Version des G-APSQ</Mark1><Mark1><Mark2>short</Mark2></Mark1></Pgraph></Caption>
        </Figure>
        <Figure format="png" height="399" width="512">
          <MediaNo>2</MediaNo>
          <MediaID language="en">2en</MediaID>
          <MediaID language="de">2de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Figure 2: Changes in individual scales of the G-APSQ</Mark1><Mark1><Mark2>short</Mark2></Mark1><Mark1> during the summer school &#8220;Errors in Medicine&#8221;</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Abbildung 2: Ver&#228;nderung der einzelnen Skalen des G-APSQ</Mark1><Mark1><Mark2>short</Mark2></Mark1><Mark1> &#252;ber die Summerschool &#8222;Fehler in der Medizin&#8220;</Mark1></Pgraph></Caption>
        </Figure>
        <NoOfPictures>2</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <Attachment>
          <MediaNo>1</MediaNo>
          <MediaID filename="zma001085.a1en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment 1.pdf" size="85553" url="">1en</MediaID>
          <MediaID filename="zma001085.a1de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang 1.pdf" size="91671" url="">1de</MediaID>
          <AttachmentTitle language="en">German Short Version of the Attitudes to Patient Safety Questionnaire G-APSQshort</AttachmentTitle>
          <AttachmentTitle language="de">Deutschsprachige Kurzversion des Attitudes towards Patient Safety Questionnaire (G-APSQshort)</AttachmentTitle>
        </Attachment>
        <Attachment>
          <MediaNo>2</MediaNo>
          <MediaID filename="zma001085.a2en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment 2.pdf" size="78613" url="">2en</MediaID>
          <MediaID filename="zma001085.a2de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang 2.pdf" size="62656" url="">2de</MediaID>
          <AttachmentTitle language="en">Factor loadings of items and their distribution on the 6 factors</AttachmentTitle>
          <AttachmentTitle language="de">Faktorenladungen der Items und deren Verteilung auf die 6 Faktoren</AttachmentTitle>
        </Attachment>
        <Attachment>
          <MediaNo>3</MediaNo>
          <MediaID filename="zma001085.a3en.pdf" language="en" mimeType="application/pdf" origFilename="Attachment 3.pdf" size="44624" url="">3en</MediaID>
          <MediaID filename="zma001085.a3de.pdf" language="de" mimeType="application/pdf" origFilename="Anhang 3.pdf" size="44529" url="">3de</MediaID>
          <AttachmentTitle language="en">Eigenvalues of the items before rotation</AttachmentTitle>
          <AttachmentTitle language="de">Anf&#228;ngliche Eigenwerte der 14 Items</AttachmentTitle>
        </Attachment>
        <NoOfAttachments>3</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>