<?xml version="1.0" encoding="ISO-8859-1"?><article xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
<front>
<journal-meta>
<journal-id>0120-4157</journal-id>
<journal-title><![CDATA[Biomédica]]></journal-title>
<abbrev-journal-title><![CDATA[Biomédica]]></abbrev-journal-title>
<issn>0120-4157</issn>
<publisher>
<publisher-name><![CDATA[Instituto Nacional de Salud]]></publisher-name>
</publisher>
</journal-meta>
<article-meta>
<article-id>S0120-41572005000200010</article-id>
<title-group>
<article-title xml:lang="es"><![CDATA[Validez interna y reproducibilidad de la prueba CAGE en Bucaramanga, Colombia]]></article-title>
<article-title xml:lang="en"><![CDATA[Internal validity and reliability of the CAGE test in Bucaramanga, Colombia]]></article-title>
</title-group>
<contrib-group>
<contrib contrib-type="author">
<name>
<surname><![CDATA[Herrán]]></surname>
<given-names><![CDATA[Oscar F]]></given-names>
</name>
<xref ref-type="aff" rid="A01"/>
</contrib>
<contrib contrib-type="author">
<name>
<surname><![CDATA[Ardila]]></surname>
<given-names><![CDATA[María F]]></given-names>
</name>
<xref ref-type="aff" rid="A02"/>
</contrib>
</contrib-group>
<aff id="A01">
<institution><![CDATA[,Universidad Industrial de Santander Escuela de Nutrición y Dietética ]]></institution>
<addr-line><![CDATA[Bucaramanga ]]></addr-line>
<country>Colombia</country>
</aff>
<aff id="A02">
<institution><![CDATA[,Universidad Industrial de Santander Escuela de Nutrición y Dietética Observatorio Epidemiológico de Enfermedades Cardiovasculares]]></institution>
<addr-line><![CDATA[Bucaramanga ]]></addr-line>
<country>Colombia</country>
</aff>
<pub-date pub-type="pub">
<day>00</day>
<month>06</month>
<year>2005</year>
</pub-date>
<pub-date pub-type="epub">
<day>00</day>
<month>06</month>
<year>2005</year>
</pub-date>
<volume>25</volume>
<numero>2</numero>
<fpage>231</fpage>
<lpage>241</lpage>
<copyright-statement/>
<copyright-year/>
<self-uri xlink:href="http://www.scielo.org.co/scielo.php?script=sci_arttext&amp;pid=S0120-41572005000200010&amp;lng=en&amp;nrm=iso"></self-uri><self-uri xlink:href="http://www.scielo.org.co/scielo.php?script=sci_abstract&amp;pid=S0120-41572005000200010&amp;lng=en&amp;nrm=iso"></self-uri><self-uri xlink:href="http://www.scielo.org.co/scielo.php?script=sci_pdf&amp;pid=S0120-41572005000200010&amp;lng=en&amp;nrm=iso"></self-uri><abstract abstract-type="short" xml:lang="es"><p><![CDATA[Objetivo. Evaluar la validez interna y la reproducibilidad de cutting down, annoyance by criticism, guilty feeling, and eye-openers (CAGE) en Bucaramanga, Colombia, de junio de 2002 a noviembre de 2003. Método. Estudio de consistencia interna y reproducibilidad de tecnología diagnóstica. Ciento nueve sujetos entre 18 y 60 años respondieron en dos ocasiones a CAGE y a una encuesta sobre variables biológicas, sociodemográficas y de dieta. La consistencia interna de CAGE se evaluó con el alfa de Cronbach y la reproducibilidad con el coeficiente de Spearman y el valor kappa de Cohen. Con regresión binomial obtuvimos medidas de asociación entre el riesgo de alcoholismo y las variables biológicas, sociodemográficas y de dieta. Resultados. El riesgo de alcoholismo para la población estudiada fue de 15,6% (IC, 9,0, 22,5). Los hombres presentaron un riesgo aumentado de alcoholismo tres veces mayor que las mujeres (p=0,02). El coeficiente alfa de Cronbach fue bajo para todas las preguntas de CAGE (mínimo, 0,08; máximo, 0,28). En la primera aplicación de CAGE se obtuvo un alfa de Cronbach de 0,20, y en la segunda, de 0,27 (p=0,226). El coeficiente de correlación de Spearman fue de 0,65 (IC, 0,53, 0,75) para la población; de 0,58 (IC, 0,36, 0,73) para hombres, y de 0,80 (IC, 0,68, 0,88) para mujeres. Los valores de kappas alcanzados están entre moderados y buenos. Ninguna variable biológica, sociodemográfica o de dieta se asoció con el riesgo de alcoholismo. Conclusión. La baja consistencia interna de CAGE es debida a la multidimensionalidad de la prueba; dada su reproducibilidad y estabilidad de las medidas de asociación derivadas, es útil en la investigación epidemiológica en esta población.]]></p></abstract>
<abstract abstract-type="short" xml:lang="en"><p><![CDATA[Objective. The internal validity and the reliability of the CAGE test (cutting down, annoyance by criticism, guilty feeling, and eye-openers) was examined for residents of Bucaramanga (northeastern Colombia). Methods. One hundred nine subjects between 18 and 60 years were given the CAGE test on two occasions. Each subject was surveyed for a suite of biological, socioeconomic and dietary variables. The internal consistency of the test was evaluated with Cronbach's alpha, and the reliability with Spearman's correlation coefficient, r, and Cohen´s kappa. A binomial regression produced association measures among the risk of alcoholism and the biological, socioeconomic and dietary variables. Results. The risk of alcoholism in the subjects was of 15.6% (CI 9.0 - 22.5%). The men presented a risk of alcoholism three times that of women (p=0.02). Cronbach's alpha was low for all test questions (min=0.08; max=0.28). In the first application of CAGE, the average for Cronbach's alpha was 0.20, in the second application 0.27. The overall Spearman's r was of 0.65 (CI 0.53 - 0.75), but with significant sexual difference: 0.58 (CI 0.36 - 0.73) for men and 0.80 (CI 0.68 -0.88) for women. Cohen's kappas ranged from moderate to good. Any biological, socioeconomic and dietary variables was associated positively with the risk of alcoholism. Conclusion. The low internal consistency of CAGE is due to the multiple aspects of the test; however, because of the high reliability and stability of the association measures, the test was recommended for continued use in epidemiological investigations.]]></p></abstract>
<kwd-group>
<kwd lng="es"><![CDATA[alcoholismo]]></kwd>
<kwd lng="es"><![CDATA[cribado]]></kwd>
<kwd lng="es"><![CDATA[validez]]></kwd>
<kwd lng="es"><![CDATA[reproducibilidad de resultados]]></kwd>
<kwd lng="es"><![CDATA[Colombia]]></kwd>
<kwd lng="en"><![CDATA[alcoholism]]></kwd>
<kwd lng="en"><![CDATA[screening]]></kwd>
<kwd lng="en"><![CDATA[validity]]></kwd>
<kwd lng="en"><![CDATA[reproducibility of results]]></kwd>
</kwd-group>
</article-meta>
</front><body><![CDATA[   <B><FONT FACE="Arial" SIZE=4>    <P ALIGN="CENTER">Validez interna y reproducibilidad de la prueba CAGE en Bucaramanga, Colombia</P> </B></FONT><FONT FACE="Arial">    <P ALIGN="CENTER">Oscar F. Herr&aacute;n <SUP>1,2</SUP>, Mar&iacute;a F. Ardila <SUP>2</P>     <P>1</SUP> Escuela de Nutrici&oacute;n y Diet&eacute;tica, Universidad Industrial de Santander, Bucaramanga, Colombia. </P> <SUP>    <P>2</SUP> Observatorio Epidemiol&oacute;gico de Enfermedades Cardiovasculares, Centro de Investigaciones </P>     <P>Epidemiol&oacute;gicas, Universidad Industrial de Santander, Bucaramanga, Colombia. </P> <B>    <P>Objetivo.</B> Evaluar la validez interna y la reproducibilidad de <I>cutting down, annoyance by criticism, guilty feeling, and eye-openers </I>(CAGE) en Bucaramanga, Colombia, de junio de 2002 a noviembre de 2003. </P> <B>    <P>M&eacute;todo.</B> Estudio de consistencia interna y reproducibilidad de tecnolog&iacute;a diagn&oacute;stica. Ciento nueve sujetos entre 18 y 60 a&ntilde;os respondieron en dos ocasiones a CAGE y a una encuesta sobre variables biol&oacute;gicas, sociodemogr&aacute;ficas y de dieta. La consistencia interna de CAGE se evalu&oacute; con el alfa de Cronbach y la reproducibilidad con el coeficiente de Spearman y el valor kappa de Cohen. Con regresi&oacute;n binomial obtuvimos medidas de asociaci&oacute;n entre el riesgo de alcoholismo y las variables biol&oacute;gicas, sociodemogr&aacute;ficas y de dieta. </P> <B>    <P>Resultados.</B> El riesgo de alcoholismo para la poblaci&oacute;n estudiada fue de 15,6% (IC, 9,0, 22,5). Los hombres presentaron un riesgo aumentado de alcoholismo tres veces mayor que las mujeres (p=0,02). El coeficiente alfa de Cronbach fue bajo para todas las preguntas de CAGE (m&iacute;nimo, 0,08; m&aacute;ximo, 0,28). En la primera aplicaci&oacute;n de CAGE se obtuvo un alfa de Cronbach de 0,20, y en la segunda, de 0,27 (p=0,226). El coeficiente de correlaci&oacute;n de Spearman fue de 0,65 (IC, 0,53, 0,75) para la poblaci&oacute;n; de 0,58 (IC, 0,36, 0,73) para hombres, y de 0,80 (IC, 0,68, 0,88) para mujeres. Los valores de kappas alcanzados est&aacute;n entre moderados y buenos. Ninguna variable biol&oacute;gica, sociodemogr&aacute;fica o de dieta se asoci&oacute; con el riesgo de alcoholismo. </P> <B>    <P>Conclusi&oacute;n.</B> La baja consistencia interna de CAGE es debida a la multidimensionalidad de la prueba; dada su reproducibilidad y estabilidad de las medidas de asociaci&oacute;n derivadas, es &uacute;til en la investigaci&oacute;n epidemiol&oacute;gica en esta poblaci&oacute;n. </P> <B>    ]]></body>
<body><![CDATA[<P>Palabras clave: </B>alcoholismo/epidemiolog&iacute;a, cribado, validez, reproducibilidad de resultados, Colombia. </P> <B>    <P>Internal validity and reliability of the CAGE test in Bucaramanga, Colombia </P>     <P>Objective. </B>The internal validity and the reliability of the CAGE test (<I>cutting down, annoyance by criticism, guilty feeling, and eye-openers</I>) was examined for residents of Bucaramanga (northeastern Colombia). </P> <B>    <P>Methods. </B>One hundred nine subjects between 18 and 60 years were given the CAGE test on two occasions. Each subject was surveyed for a suite of biological, socioeconomic and dietary variables. The internal consistency of the test was evaluated with Cronbach's alpha, and the reliability with Spearman's correlation coefficient, <I>r, </I>and Cohen´s kappa. A binomial regression produced association measures among the risk of alcoholism and the biological, socioeconomic and dietary variables. </P> <B>    <P>Results.</B> The risk of alcoholism in the subjects was of 15.6% (CI 9.0 - 22.5%). The men presented a risk of alcoholism three times that of women (p=0.02). Cronbach's alpha was low for all test questions (min=0.08; max=0.28). In the first application of CAGE, the average for Cronbach's alpha was 0.20, in the second application 0.27. The overall Spearman's <I>r</I> was of 0.65 (CI 0.53 - 0.75), but with significant sexual difference: 0.58 (CI 0.36 - 0.73) for men and 0.80 (CI 0.68 -0.88) for women. Cohen's kappas ranged from moderate to good. Any biological, socioeconomic and dietary variables was associated positively with the risk of alcoholism. </P> <B>    <P>Conclusion. </B>The low internal consistency of CAGE is due to the multiple aspects of the test; however, because of the high reliability and stability of the association measures, the test was recommended for continued use in epidemiological investigations. </P> <B>    <P>Key words: </B>alcoholism/ epidemiology, screening, validity, reproducibility of results. </P>     <P>Una de las herramientas m&aacute;s ampliamente utilizadas en los estudios epidemiol&oacute;gicos es la prueba de <I>Cutting down, annoyance by criticism, guilty feeling, and eye-openers,</I> CAGE (1). </P>     <P>La prueba CAGE se deriv&oacute; de un estudio cl&iacute;nico conducido en Carolina del Norte en 1968 para detectar sujetos alcoh&oacute;licos mediante cuatro preguntas clave que tienen que ver con la cr&iacute;tica social, la culpabilidad individual, la ingesti&oacute;n matutina y la necesidad sentida de consumir alcohol. Tiene alta especificidad (98%) (2), superior, incluso, a pruebas como la gamma-glutamil transpeptidasa, considerada como la mejor prueba de laboratorio para detectar el exceso del consumo de alcohol (m&aacute;s de 16 tragos por d&iacute;a) o para diagnosticar sujetos alcoh&oacute;licos (1). </P>     <P>Es una prueba discriminante (para tamizar o clasificar) que se aplica a sujetos consumidores de alcohol, compuesta por cuatro preguntas que toman el valor de 0 cuando la respuesta es negativa, o de 1 si es afirmativa. Dos o tres respuestas afirmativas permiten tener un alto grado de sospecha de alcoholismo; cuatro respuestas positivas son indicio de alcoholismo patol&oacute;gico (1). </P>     ]]></body>
<body><![CDATA[<P>La prueba CAGE no s&oacute;lo es un instrumento confiable, f&aacute;cil y barato de aplicar, sino tambi&eacute;n la mejor prueba y la menos intimidante para la clasificaci&oacute;n de sujetos alcoh&oacute;licos (1,3). Sin embargo, a pesar de su amplio uso, su validez es a&uacute;n controvertida (2,4,5). </P>     <P>La utilidad de cualquier instrumento est&aacute; determinada por tres elementos complementarios: 1) el grado de relaci&oacute;n entre los &iacute;tems de la prueba o la evaluaci&oacute;n de si alguno puede ser redundante, m&aacute;s conocida como la validez interna, homogeneidad o consistencia interna; 2) su validez externa o capacidad para clasificar sujetos tan bien o mejor que un referente externo considerado como el est&aacute;ndar de oro, y 3) la capacidad de reproducir en conjunto los resultados en diferentes aplicaciones, o reproducibilidad (6). </P>     <P>Como es dif&iacute;cil sustentar que el efecto del alcohol o la expresi&oacute;n fisiol&oacute;gica de su uso o abuso es diferente en sujetos humanos dada su cultura o su &aacute;rea geogr&aacute;fica, la cr&iacute;tica hacia CAGE no se ha centrado sobre su validez externa. La controversia con CAGE surge de su consistencia interna y de la reproducibilidad o estabilidad de sus resultados en el tiempo. </P>     <P>Los resultados sobre consistencia interna y reproducibilidad de CAGE, como los de cualquier otro instrumento, no tienen un comportamiento est&aacute;tico; dependen del contexto, es decir, de la prevalencia del evento que se va a medir, las expectativas sobre el consumo de bebidas alcoh&oacute;licas, el grado de entrenamiento de los encuestadores, las circunstancias que correspondan con la pregunta que se va a evaluar o que no lo hagan, las caracter&iacute;sticas cl&iacute;nicas y sociodemogr&aacute;ficas de los sujetos, el dise&ntilde;o del estudio y de las encuestas complementarias y el grado de enmascaramiento de los evaluadores, etc. </P>     <P>Como se ha demostrado, es necesario evaluar el comportamiento de cualquier prueba cada vez que se utilice en una poblaci&oacute;n diferente de aqu&eacute;lla en que se desarroll&oacute; (7). A pesar de que lo anterior es bastante l&oacute;gico, una investigaci&oacute;n sobre los estudios de validez en las pruebas de tamizaje y diagn&oacute;sticas publicados en cuatro importantes revistas, mostr&oacute; c&oacute;mo la calidad de la metodolog&iacute;a utilizada entre 1978 y 1993 estuvo entre mediocre y buena (8). Esto origin&oacute; una iniciativa para unificar los criterios sobre c&oacute;mo reportar los estudios de validez de diagn&oacute;sticos (9). </P>     <P>La prueba de CAGE cobra relevancia en la medida en que el uso y el abuso del alcohol se viene incrementando en el mundo y, con ello, la morbilidad, la mortalidad, el ausentismo laboral y la carga de los servicios de salud por sucesos relacionados (10). Adem&aacute;s, porque cada vez es m&aacute;s evidente que la cuantificaci&oacute;n del problema del alcoholismo es el primer paso en la comprensi&oacute;n de su compleja red causal. </P>     <P>En Centro y Suram&eacute;rica, la prueba CAGE es ampliamente utilizada lo cual ha permitido comparaciones del riesgo de alcoholismo en la regi&oacute;n (11). En Colombia, la prueba CAGE se ha utilizado desde 1987 como prueba tamiz en las encuestas nacionales sobre alcoholismo y consumo de sustancias psicoactivas (1988, 1993 y 1997) (12,13). </P>     <P>Si partimos de la premisa de que la prueba CAGE tiene validez externa (sensibilidad, 98%) (1,2) y de que el contexto en que se aplique define su utilidad en la investigaci&oacute;n epidemiol&oacute;gica, se realiz&oacute; este estudio con los objetivos de evaluar: 1) la consistencia interna entre los diferentes &iacute;tems de CAGE; 2) la reproducibilidad entre dos aplicaciones de CAGE, y 3) la estabilidad de las medidas de asociaci&oacute;n alcanzadas entre el riesgo de alcoholismo y variables biol&oacute;gicas, socio-demogr&aacute;ficas y de dieta en la poblaci&oacute;n adulta y consumidora de alcohol de una ciudad intermedia de Colombia, Suram&eacute;rica. </P> <B>    <P>Materiales y m&eacute;todos</B> </P>     <P>Durante 2002-2003 se realiz&oacute; un estudio de consistencia interna y reproducibilidad de tecnolog&iacute;a diagn&oacute;stica en el que, adem&aacute;s, se estableci&oacute; la estabilidad en la asociaci&oacute;n entre algunas variables biol&oacute;gicas, sociodemogr&aacute;ficas y de dieta con el riesgo de alcoholismo seg&uacute;n la prueba CAGE. </P> <B><I>    ]]></body>
<body><![CDATA[<P>Selecci&oacute;n de sujetos.</B></I> Por medio de muestreo aleatorio realizado en m&uacute;ltiples etapas, se seleccionaron 109 consumidores de alcohol como representativos por sexo de la poblaci&oacute;n de Bucaramanga. Este tama&ntilde;o de muestra, calculado con un valor alfa de 0,05 y un poder de 0,90, y asumiendo 10% de p&eacute;rdidas entre las dos aplicaciones de la prueba, permite obtener coeficientes de correlaci&oacute;n entre los puntajes por &iacute;tem y total de la prueba CAGE de 0,40 como m&iacute;nimo (Gilman J, Myatt M. EpiCalc 2000. versi&oacute;n 1.0. Atlanta: Centers for disease Conrol; 1997). </P>     <P>Este tama&ntilde;o de muestra tambi&eacute;n permite calcular hasta el 7% de riesgo alto de alcoholismo si se considera un alfa de 0,01 y un poder de 0,90. Por lo tanto, tuvimos un tama&ntilde;o de muestra suficiente para dos de las principales medidas de salida del estudio: los coeficientes de correlaci&oacute;n y el riesgo de alcoholismo. </P>     <P>Se declararon elegibles los sujetos que cumplieron los siguientes criterios: 1) no se declararon abstemios; 2) reconocieron ser consumidores de alcohol (aqu&eacute;llos que, por lo menos, al mes consumen como m&iacute;nimo un trago, 1 onza o 30 ml de cualquier licor o una botella de cerveza); 3) alfabetos, y 4) que hubieran residido dos a&ntilde;os en la ciudad, como m&iacute;nimo. </P>     <P>De un mapa de Bucaramanga se eligieron al azar manzanas y, luego, casas por estrato socio-econ&oacute;mico; en cada vivienda se realiz&oacute; un censo de los sujetos elegibles y se seleccion&oacute; aleatoriamente uno por vivienda. Se encuestaron despu&eacute;s de haberlos seleccionado e informardo de los objetivos y de haber obtenido su consentimiento escrito. </P> <B><I>    <P>Fuentes de informaci&oacute;n.</B></I> Se aplicaron dos encuestas por encuestadores previamente entrenados en la recolecci&oacute;n de datos en estudios de poblaci&oacute;n: 1) una encuesta sobre factores biol&oacute;gicos, incluido el &iacute;ndice de masa corporal (IMC) (14), sociodemogr&aacute;ficos y de dieta, incluida la frecuencia del consumo de bebidas alcoh&oacute;licas y el gusto por ellas; 2) prueba de CAGE, ampliamente utilizada en estudios de poblaci&oacute;n y cl&iacute;nicos (1,15). Esta &uacute;ltima se aplic&oacute; en el hogar y en dos ocasiones al mismo sujeto con un intervalo de dos meses, con el fin de que las respuestas de la segunda aplicaci&oacute;n no estuvieran influenciadas por la memoria. </P> <B><I>    <P>Calidad de los datos.</B></I> Los cuatro &iacute;tems de la prueba CAGE se retomaron de los utilizados en las encuestas nacionales sobre consumo. Durante la primera visita, y de manera secuencial, se realiz&oacute; la encuesta sobre variables biol&oacute;gicas, socioecon&oacute;micas y de dieta; por &uacute;ltimo, se aplic&oacute; la prueba CAGE. El gusto manifestado por las bebidas alcoh&oacute;licas fue el reporte sobre la percepci&oacute;n que del consumo tiene cada sujeto, el cual corresponde a una representaci&oacute;n social (16).     <BR> <!-- Generation of PM publication page 234 -->    <BR> Para permitir posteriores comparaciones de los resultados, el riesgo de alcoholismo se defini&oacute; como "bajo" cuando se obtuvo un puntaje inferior de 3 en la prueba de CAGE, y de "alto" cuando obtuvo un puntaje de 3 o 4; este punto de corte es el propuesto en la versi&oacute;n original de CAGE (1) y el utilizado en el pa&iacute;s en las encuestas nacionales sobre consumo (12,13). </P>     <P>Ni los sujetos encuestados ni los encuestadores conocieron los resultados de CAGE y los datos s&oacute;lo se conocieron por los c&oacute;digos en el momento de hacerse el an&aacute;lisis estad&iacute;stico. </P> <B><I>    <P>An&aacute;lisis estad&iacute;stico.</B></I> La normalidad de las variables continuas se evalu&oacute; utilizando las pruebas de Shapiro-Wilk y Shapiro-Francia (17). Para describir las categor&iacute;as de las variables biol&oacute;gicas, socioecon&oacute;micas y de dieta se calcularon medidas descriptivas y sus intervalos de confianza al 95% (IC95%). </P>     ]]></body>
<body><![CDATA[<P>Para establecer si exist&iacute;an diferencias estad&iacute;sticamente significativas entre las diferentes categor&iacute;as por sexo o aplicaciones de CAGE, se calcularon las pruebas t de Student, las pruebas de Anova y de c<SUP>2</SUP>. Para determinar la consistencia interna de CAGE, adem&aacute;s del c&aacute;lculo del coeficiente alfa de Cronbach, se estimaron los coeficientes de correlaci&oacute;n entre los &iacute;tem, los coeficientes de correlaci&oacute;n para cada &iacute;tem versus los restantes (18) y las medidas descriptivas para cada pregunta de CAGE y el puntaje acumulado. </P>     <P>La reproducibilidad (prueba-reprueba) entre las dos aplicaciones de CAGE se estim&oacute; por medio de: 1) el c&aacute;lculo de coeficientes de correlaci&oacute;n de Spearman (19) y sus respectivos IC95%, entre los puntajes alcanzados para cada &iacute;tem y el total acumulado; 2) la estabilidad en las medidas de asociaci&oacute;n entre el riesgo de alcoholismo por CAGE y las variables biol&oacute;gicas, socio-econ&oacute;micas y de dieta (razones de prevalencia) obtenidas mediante regresi&oacute;n binomial, y 3) el c&aacute;lculo de coeficientes seg&uacute;n la kappa de Cohen, que son equivalentes a los coeficientes de correlaci&oacute;n intraclase (20). </P>     <P>Para este coeficiente se estim&oacute; su m&aacute;ximo valor posible (valor m&aacute;ximo de kappa) dado el acuerdo observado (Po), logrado al reemplazar en el denominador de la formula cl&aacute;sica de Cohen, el valor de Po en lugar de 1: </P>     <P>valor m&aacute;ximo de kappa=(Po - Pe)/valor m&aacute;ximo de (Po - Pe), </P>     <P>donde Po es el acuerdo observado y Pe es el acuerdo esperado (21). Adem&aacute;s, los coeficientes de kappa de Cohen se ajustaron por el sesgo entre observadores (22) que se obtiene al reemplazar en una tabla de contiengencia los valores de b y c por su media m=(b+c)/2 para, luego, calcular el coeficiente </FONT><A HREF="#kappa1"><FONT FACE="Arial">kappa</FONT></A><FONT FACE="Arial">: </P>     <P><A NAME="kappa1"></A></P> </FONT>    <P ALIGN="CENTER"><IMG SRC="/img/revistas/bio/v25n2/2a10f1.jpg"></P> <FONT FACE="Arial">    <P>El ajuste del coeficiente kappa tambi&eacute;n se calcul&oacute; con la prevalencia alcanzada de alto riesgo de alcoholismo en cada una de las dos mediciones (PABAK) (22) que se obtiene al reemplazar, adem&aacute;s de lo anterior, los valores de a y d por su media m<SUB>1</SUB>= (a+d)/2: </P>     <P>PABAK=[(2m<SUB>1</SUB>/N) - 0,5/(1 - 0,5)]. </P>     <P>En t&eacute;rminos de Egglin <I>et al.</I>, los &iacute;ndices de concordancia de kappa se ajustaron por las caracter&iacute;sticas del contexto (23). </P>     ]]></body>
<body><![CDATA[<P>Todos los registros se digitaron por duplicado y se limpiaron con la aplicaci&oacute;n Validate de EpiInfo 6.04d (Centers for Disease Control. EpiInfo, versi&oacute;n 6.04d. Epidemiolog&iacute;a en ordenadores. Atlanta, GA: CDC; 2001). El procesamiento de datos y su an&aacute;lisis se hizo con Stata 8.2/SE (StataCorp. Stata Statistical Software, release 8.2. College Station, TX: Stata Corporation; 2003). </P>     <P>El Comit&eacute; de &Eacute;tica de la Facultad de Salud aprob&oacute; el protocolo de investigaci&oacute;n. </P> <B>    <P>Resultados</B> </P>     <P>Dado que los valores estimados no se modificaron al corregir por el efecto del dise&ntilde;o de la muestra (24), los reportados son similares a los obtenidos en un muestreo aleatorio simple. </P>     <P>Los 109 sujetos respondieron la prueba CAGE en dos ocasiones. El tiempo medio entre cada aplicaci&oacute;n fue de 56 d&iacute;as (IC95%, 55,6, 56,4). La edad media de los 54 hombres encuestados fue mayor en 3 a&ntilde;os que la de las mujeres (p=0,06). Al igual que la edad, la frecuencia de consumo de bebidas alcoh&oacute;licas fue mayor en los hombres (p=0,07). El gusto manifestado por las bebidas alcoh&oacute;licas no es diferente seg&uacute;n el sexo (p=0,96). La frecuencia de consumo semanal de alcohol en los hombres fue el doble del de las mujeres (28,5%) y la quincenal, un tercio mayor (29,6%). El alto riesgo de alcoholismo seg&uacute;n CAGE para toda la poblaci&oacute;n fue de 15,6% (IC95%, 9,0, 22,5). Los hombres presentaron un riesgo aumentado de alcoholismo tres veces mayor que las mujeres (p=0,02) (</FONT><A HREF="#cuadro1"><FONT FACE="Arial">cuadro 1</FONT></A><FONT FACE="Arial">).</P> <B><I>    <P><A NAME="cuadro1"></A></P> </B></I></FONT>    <P ALIGN="CENTER"><IMG SRC="/img/revistas/bio/v25n2/2a10t1.gif"></P> <B><I><FONT FACE="Arial">    <P>Consistencia interna de CAGE.</B></I> En la primera aplicaci&oacute;n de la prueba CAGE, la segunda pregunta "¿En el &uacute;ltimo a&ntilde;o se ha sentido molesto porque le critican su manera de beber?" fue la que alcanz&oacute; el mayor n&uacute;mero de respuestas negativas, 77%. En la segunda aplicaci&oacute;n, fue la <!-- Generation of PM publication page 236 -->tercera pregunta con 72%: "¿En el &uacute;ltimo a&ntilde;o se ha sentido alguna vez mal o culpable por su manera de beber?" La primera pregunta de CAGE; "¿En el &uacute;ltimo a&ntilde;o ha sentido alguna vez la necesidad de disminuir la cantidad de alcohol que toma?" fue la que alcanz&oacute; en las dos aplicaciones el menor n&uacute;mero de respuestas negativas, 25% y 33%, respectivamente. La diferencia media en el puntaje total alcanzado en cada una de las dos aplicaciones de CAGE fue de -0.09 (IC95%, -0,18, -0,00) (p=0,05). </P>     <P>La correlaci&oacute;n entre &iacute;tems fue baja para todas las preguntas en las dos aplicaciones (m&iacute;nima: 0,03; m&aacute;xima: 0,21). El coeficiente alfa de Cronbach fue bajo para todas las preguntas de la prueba CAGE (m&iacute;nimo: 0,08; m&aacute;ximo: 0,28). En la segunda aplicaci&oacute;n se obtuvo un aumento de 27% en el coeficiente alfa de Cronbach para el puntaje total con respecto al alcanzado en la primera aplicaci&oacute;n, 0,20 versus 0,27, respectivamente (p=0,226). De manera complementaria, los puntajes de la media global entre aplicaciones no fueron diferentes (p=0,337) (</FONT><A HREF="#cuadro2"><FONT FACE="Arial">cuadro 2</FONT></A><FONT FACE="Arial">).</P> <B><I>    <P><A NAME="cuadro2"></A></P> </B></I></FONT>    ]]></body>
<body><![CDATA[<P ALIGN="CENTER"><IMG SRC="/img/revistas/bio/v25n2/2a10t2.gif"></P> <B><I><FONT FACE="Arial">    <P>Reproducibilidad de CAGE.</B></I> Al comparar los puntajes totales obtenidos entre aplicaciones se obtuvo un coeficiente de correlaci&oacute;n de Spearman (<I>rs</I>) de 0,65 (IC95%, 0,53, 0,75) para toda la poblaci&oacute;n, de 0,58 (IC95%, 0,36, 0,73) para hombres y 0,80 (IC95%, 0,68, 0,88) para mujeres. La cuarta pregunta, "¿En el &uacute;ltimo a&ntilde;o ha tomado alguna vez un trago en la ma&ntilde;ana para calmar los nervios o quitar el guayabo?", fue la que present&oacute; el <I>rs </I>mayor, de manera consistente para toda la poblaci&oacute;n, los hombres y las mujeres. Para la segunda y tercera preguntas, los <I>rs</I> alcanzados fueron pobres, mientras que para la primera y cuarta preguntas pueden considerarse como aceptables (</FONT><A HREF="#cuadro3"><FONT FACE="Arial">cuadro 3</FONT></A><FONT FACE="Arial">).</P>     <P><A NAME="cuadro3"></A></P> </FONT>    <P ALIGN="CENTER"><IMG SRC="/img/revistas/bio/v25n2/2a10t3.gif"></P> <FONT FACE="Arial">    <P>Al evaluar el grado de acuerdo obtenido para el total de los puntajes por CAGE, se observaron coeficientes de kappa de Cohen considerados como buenos y muy buenos (mayores de 0,60). La raz&oacute;n entre el coeficiente kappa de Cohen y el coeficiente kappa m&aacute;ximo fue de 100% para toda la poblaci&oacute;n, 89% para los hombres y 78,1% para las mujeres. El coeficiente kappa corregido por el sesgo entre mediciones y por la prevalencia de alto riesgo de alcoholismo fue de 82% para toda la poblaci&oacute;n, 70% para los hombres y 93% para las mujeres (</FONT><A HREF="#cuadro4"><FONT FACE="Arial">cuadro 4</FONT></A><FONT FACE="Arial">). </P>     <P><A NAME="cuadro4"></A></P> </FONT>    <P ALIGN="CENTER"><IMG SRC="/img/revistas/bio/v25n2/2a10t4.gif"></P> <FONT FACE="Arial">    <P>La segunda y la tercera pregunta tuvieron los m&aacute;s bajos porcentajes de respuestas positivas (m&iacute;nimo: 18,2%; m&aacute;ximo: 50,0%). Al analizar la concordancia de los &iacute;tems de la prueba CAGE para estas dos preguntas, observamos que el coeficiente kappa de Cohen, as&iacute; como la raz&oacute;n entra el kappa y el kappa m&aacute;ximo y la PABAK, alcanzaron consistentemente los menores valores para toda la poblaci&oacute;n, hombres y mujeres (</FONT><A HREF="#cuadro4"><FONT FACE="Arial">cuadro 4</FONT></A><FONT FACE="Arial">). </P> <B><I>    <P>Estabilidad de las medidas de asociaci&oacute;n entre las variables biol&oacute;gicas, socioecon&oacute;micas y de dieta con la prueba CAGE.</B></I> No hubo diferencias entre aplicaciones para ninguna de las proporciones de alto riesgo de alcoholismo obtenidas por CAGE (p&gt;0,05). En la primera aplicaci&oacute;n, el alto riesgo de alcoholismo seg&uacute;n CAGE fue menor en las mujeres, raz&oacute;n de prevalencia de 0,30 (IC95%, 0,10, 0,87) (p=0,03), en la segunda, aun cuando se mantuvo la tendencia, no fue estad&iacute;sticamente significativa , raz&oacute;n de prevalencia de 0,54 (IC95%, 0,21, 1,34). Ninguna otra raz&oacute;n de prevalencia estimada para las variables biol&oacute;gicas, socioecon&oacute;micas y de dieta fue diferente entre aplicaciones (</FONT><A HREF="#cuadro5"><FONT FACE="Arial">cuadro 5</FONT></A><FONT FACE="Arial">). </P>     <P><A NAME="cuadro5"></A></P> </FONT>    ]]></body>
<body><![CDATA[<P ALIGN="CENTER"><IMG SRC="/img/revistas/bio/v25n2/2a10t5.gif"></P> <B><FONT FACE="Arial">    <P>Discusi&oacute;n</B> </P>     <P>Debido al dise&ntilde;o y los m&eacute;todos de recolecci&oacute;n utilizados, los resultados se derivaron de la poblaci&oacute;n adulta residente en la zona urbana de Bucaramanga, alfabeta, consumidora de alcohol y de los seis diferentes estratos socioecon&oacute;micos. Sin embargo, debido al amplio rango de edad de los encuestados y a que no hay datos confiables sobre esta variable para Bucaramanga, no pudimos verificar si en la muestra sigue la misma distribuci&oacute;n que la de la poblaci&oacute;n general. Debido al dise&ntilde;o, el nivel de educaci&oacute;n fue probablemente mayor en nuestra muestra. Por lo tanto, la inferencia de los resultados podr&iacute;a estar limitada para los sujetos con niveles bajos de educaci&oacute;n, <!-- Generation of PM publication page 237 -->    <BR> aun cuando la proporci&oacute;n de sujetos sin terminar la primaria en nuestra muestra (5,5%) es muy similar a la de la poblaci&oacute;n general, 4,7% (25). </P>     <P>El 15,6% de la poblaci&oacute;n estudiada est&aacute; en alto riesgo de alcoholismo, m&aacute;s del doble de lo reportado para el pa&iacute;s, 7,1% (IC95%, 5,5, 7,5) en el Estudio Nacional de Salud Mental y consumo de sustancias psicoactivas de Colombia (12) y 3% m&aacute;s que lo reportado en 1997 (13). En el Estudio Nacional de Salud Mental por cada 6 hombres se encontraba una mujer en alto riesgo. En Bucaramanga, por cada 3 hombres hay una mujer; este aumento del riesgo de alcoholismo en las mujeres tambi&eacute;n se report&oacute; en 1997 (13). </P>     <P>La prueba CAGE es, tal vez, el instrumento menos intimidante para tamizar consumidores con alto riesgo de alcoholismo y, a pesar de que se enfatiza en que el resultado positivo a CAGE no es un diagn&oacute;stico de alcoholismo, tres o cuatro respuestas positivas alcanzan una especificidad y valor pron&oacute;stico positivo superiores a 0,99 (26). Otros investigadores han utilizado puntos de corte diferentes al de este estudio, declarando el riesgo alto de alcoholismo con dos o, incluso, una sola respuesta positiva en la prueba CAGE (27-30). </P>     <P><!-- Generation of PM publication page 238 -->El punto de corte es una consecuencia ligada al contexto en que se aplique la prueba CAGE, pues se ha demostrado que cuando se hacen encuestas sobre el consumo de bebidas alcoh&oacute;licas previas a la aplicaci&oacute;n de CAGE, o cuando se realizan actividades de desensibilizaci&oacute;n, con dos respuestas positivas se logra alcanzar una especificidad de hasta el 95% (31). </P>     <P>A pesar de que nosotros aplicamos una encuesta sociodemogr&aacute;fica previa a la prueba CAGE e indagamos por variables biol&oacute;gicas y de dieta, nuestro caso no es el descrito anteriormente y, por lo tanto, un punto de corte de tres o m&aacute;s respuestas positivas es el recomendado (31). </P>     <P>En forma complementaria, dado que el principal uso de la prueba CAGE es como prueba tamiz y a que se ha demostrado que una o dos respuestas positivas, alcanzan el 62% y el 82%, respectiva-mente del valor pron&oacute;stico positivo, frente al 99% cuando se declara el riesgo alto con tres o cuatro respuestas positivas (2), este &uacute;ltimo es un punto de corte m&aacute;s sensible. Adem&aacute;s, permite comparaciones con las encuestas nacionales (12,13). </P>     <P>En cualquier circunstancia, una o dos respuestas positivas a la prueba CAGE reflejan en buena medida un consumo de alcohol problem&aacute;tico, sin que se alcance la categor&iacute;a de alcoh&oacute;lico (32). </P>     ]]></body>
<body><![CDATA[<P>La consistencia interna fue baja para cada uno de los &iacute;tems y en conjunto. Adem&aacute;s, no fue estad&iacute;sticamente diferente entre aplicaciones (p=0,226). Una baja consistencia interna es previsible en cuestionarios con pocos &iacute;tems como CAGE y podr&iacute;a estar asociada, en este caso particular, a la multidimensionalidad de la prueba (33). Este hallazgo es particularmente sorprendente, pues en otras evaluaciones de la consistencia interna de la prueba CAGE en poblaci&oacute;n colombiana, el coeficiente alfa de Cronbach fue sustancialmente mayor (0,69 a 0,75) (13, 32); estos valores se obtuvieron cuando la prueba <!-- Generation of PM publication page 239 -->CAGE se aplic&oacute; inmerso en otras preguntas sobre consumo, pero los autores aclaran que la confiabilidad es mayor cuando se aplica antes de otras relacionadas con el consumo de bebidas alcoh&oacute;licas, como se discuti&oacute; anteriormente. </P>     <P>La aplicaci&oacute;n repetida de la prueba CAGE, aun cuando aument&oacute; ligeramente el coeficiente alfa de Cronbach para el conjunto y cada &iacute;tem, no cambio su interpretaci&oacute;n "cl&aacute;sica" de inaceptable. Sin embargo, si entendemos que una alta consistencia interna se obtiene cuando los &iacute;tems de una prueba miden una misma expresi&oacute;n o dimensi&oacute;n lo que se debe esperar l&oacute;gicamente en la prueba CAGE es una consistencia interna baja, porque la prueba CAGE, adem&aacute;s de tener pocos &iacute;tems, es multidimensional. La consistencia interna vista de esta manera no es una medida de la calidad de una prueba, sino de su dimensionalidad, elemento que es muy importante en el dise&ntilde;o de la prueba y que permite evaluar su correspondencia con el sustento te&oacute;rico que la soporta, pero poco relevante cuando se pasa al uso en la investigaci&oacute;n aplicada. </P>     <P>Un inter&eacute;s particular de este estudio fue evaluar la reproducibilidad de la prueba CAGE en aplicaciones repetidas con suficiente tiempo entre ellas, para librarlas de la memoria. El coeficiente de correlaci&oacute;n de Spearman fue aceptable para la poblaci&oacute;n total y los hombres, y bueno para las mujeres. El alto <I>rs</I> en las mujeres est&aacute; condicionado por su baja proporci&oacute;n de alto riesgo de alcoholismo. La cuarta pregunta que es menos intimidante en t&eacute;rminos del autorreconocimiento de la culpabilidad y la que menos juzgamiento moral y social puede derivar por la cultura hacia el consumo de bebidas alcoh&oacute;licas, fue la que mejor reproducibilidad alcanz&oacute;. En el mismo sentido, la primera pregunta que puede ser liberadora del sentimiento de culpa y reivindicante, fue la que mayor proporci&oacute;n de respuestas positivas alcanz&oacute; (</FONT><A HREF="#cuadro4"><FONT FACE="Arial">cuadro 4</FONT></A><FONT FACE="Arial">). </P>     <P>Otra forma de evaluar la reproducibilidad de la prueba CAGE fue el medir el grado de concordancia alcanzado entre aplicaciones mediante los coeficientes kappa. La concordancia para cada &iacute;tem, en general, puede considerarse como baja. Sin embargo, es muy buena para la prueba CAGE en conjunto, incluso corregida por     <BR> el sesgo entre observador y por la prevalencia o contexto (PABAK). Lo anterior est&aacute; a favor de una alta estabilidad de los resultados al usar la prueba CAGE en la investigaci&oacute;n epidemiol&oacute;gica, elemento deseable para cualquier prueba. </P>     <P>El c&aacute;lculo de las razones de prevalencia confirm&oacute; que los resultados con las variables biol&oacute;gicas, socioecon&oacute;micas y de dieta son reproducibles y muy estables cuando se usa la prueba CAGE con un punto de corte de 3 o m&aacute;s (</FONT><A HREF="#cuadro5"><FONT FACE="Arial">cuadro 5</FONT></A><FONT FACE="Arial">). Bajo la premisa de que la prueba CAGE cuenta con validez externa, su reproducibilidad junto con la estabilidad de las medidas de asociaci&oacute;n derivadas de ella, son la mejor expresi&oacute;n de la utilidad en la investigaci&oacute;n epidemiol&oacute;gica aplicada. </P>     <P>Con excepci&oacute;n del sexo, en la primera aplicaci&oacute;n ninguna de las variables estudiadas se asoci&oacute; con el riesgo de alcoholismo (</FONT><A HREF="#cuadro5"><FONT FACE="Arial">cuadro 5</FONT></A><FONT FACE="Arial">). Cada vez es m&aacute;s evidente que las aproximaciones sociodemogr&aacute;ficas no permiten comprender ni intervenir el riesgo de alcoholismo y que la mejor alternativa es el estudio de las expectativas, definidas como "la anticipaci&oacute;n de una relaci&oacute;n sistem&aacute;tica entre eventos u objetos en una situaci&oacute;n futura" (34). El estudio de las expectativas ha sido uno de los principales aportes contempor&aacute;neos en el estudio de las adicciones (35,36). </P>     <P>El Estudio Nacional de Salud Mental afirma que las variables asociadas a la esfera familiar, las redes de apoyo, la valoraci&oacute;n social del consumo de alcohol y de las bebidas alcoh&oacute;licas, las relaciones intra e interfamiliares, la relaci&oacute;n de pareja, la percepci&oacute;n sobre la autoridad y las autoridades, el concepto de lo p&uacute;blico y de ciudadan&iacute;a y otras igualmente complejas de medir, son las determinantes del consumo de alcohol y del riego de alcoholismo. </P>     <P>Los dise&ntilde;os y los m&eacute;todos para el estudio de tecnolog&iacute;a diagn&oacute;stica est&aacute;n a&uacute;n en desarrollo (37). Aqu&iacute; se han presentado algunos &iacute;ndices considerados como los mejores para evaluar el comportamiento de una prueba que es ampliamente usada en poblaci&oacute;n adulta y consumidora de alcohol. Este es el primer paso para el estudio de los condicionantes del riesgo de alcoholismo. </P>     <P><!-- Generation of PM publication page 240 -->Los resultados de este estudio permiten afirmar que la baja consistencia interna de la prueba de CAGE es debida a la multidimensionalidad del constructo que lo respalda, lo que se convierte en una fortaleza de la prueba; adem&aacute;s, dada su alta reproducibilidad y estabilidad de las medidas de asociaci&oacute;n con variables biol&oacute;gicas, socio-econ&oacute;micas y de dieta, la prueba CAGE es muy &uacute;til en la investigaci&oacute;n epidemiol&oacute;gica que se realice en la poblaci&oacute;n adulta de Bucaramanga. </P>     ]]></body>
<body><![CDATA[<P>Podr&iacute;a afirmarse que la prueba CAGE como un todo permite medidas de asociaci&oacute;n confiables con variables biol&oacute;gicas, socioecon&oacute;micas y de dieta, no as&iacute; cuando &eacute;stas se relacionan con sus &iacute;tems particulares. Es importante resaltar una vez m&aacute;s que los resultados aqu&iacute; obtenidos fueron con un punto de corte de 3 o m&aacute;s, pues como se discuti&oacute; previamente, algunos reportes usan otro menos conservador de una o dos respuestas positivas. Finalmente, ser&iacute;a deseable el dise&ntilde;o y la ejecuci&oacute;n de estudios sobre la validez externa de la prueba con el fin de conocer los valores de sensibilidad, especificidad y los valores pron&oacute;sticos que alcanza la prueba CAGE en la poblaci&oacute;n colombiana. </P> <B>    <P>Conflicto de intereses</B> </P>     <P>Los autores manifestamos que no existe ning&uacute;n conflicto de inter&eacute;s, ni real ni potencial sobre los resultados presentados. </P> <B>    <P>Financiaci&oacute;n</B> </P>     <P>Este trabajo fue financiado por el Instituto Colombiano para el Desarrollo de la Ciencia y la Tecnolog&iacute;a "Francisco Jos&eacute; de Caldas" (Colciencias, contrato No. 127- 2002; c&oacute;digo 1102-04-11720) y la Universidad Industrial de Santander. </P> <B>    <P>Referencias</B> </P>     <!-- ref --><P>1. <B>Ewing JA.</B> Detecting alcoholism. The CAGE questionnaire. JAMA 1984;252:1905-7. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000099&pid=S0120-4157200500020001000001&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>2. <B>Bisson J, Nadeau L, Demers A.</B> The validity of the CAGE scale to screen for heavy drinking and drinking problems in a general population survey. Addiction 1999;94:715-22. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000100&pid=S0120-4157200500020001000002&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>3. <B>Soderstrom CA, Smith GS, Kufera JA, Dischinger PC, Hebel JR, McDuff DR <I>et al</I>.</B> The accuracy of the CAGE, the Brief Michigan Alcoholism Screening Test, and the Alcohol Use Disorders Identification Test in screening trauma center patients for alcoholism<B><I>. </B></I>J Trauma 1997;43:962-9. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000101&pid=S0120-4157200500020001000003&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>4. <B>Knight JR, Sherritt L, Harris SK, Gates EC, Chang G.</B> Validity of brief alcohol screening tests among adolescents: a comparison of the AUDIT, POSIT, CAGE, and CRAFFT. Alcohol Clin Exp Res 2003;27:67-73. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000102&pid=S0120-4157200500020001000004&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>5. <B>Watkins JP, Eisele GR, Matthews KO.</B> Occupational medical program alcohol screening. Utility of the CAGE and BMAST. J Subst Abuse Treat 2000;19:51-7. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000103&pid=S0120-4157200500020001000005&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>6. <B>Bland JM, Altman DG.</B> Statistics notes: validating scales and indexes. BMJ 2002;324:606. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000104&pid=S0120-4157200500020001000006&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>7. <B>Chmura H.</B> Evaluating medical test. London: Sage Publications; 1992. p.266-85. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000105&pid=S0120-4157200500020001000007&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>8. <B>Reid MC, Lachs MS, Feinstein AR.</B> Use of methodological standard in diagnostic test research. Getting better but still not good. JAMA 1995;274:645-51. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000106&pid=S0120-4157200500020001000008&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>9. <B>Bossuyt PM, Reitsma JB, Bruns DE, Gatsonis CA, Glasziou PP, Irwig LM <I>et al.</B></I> The STARD statement for reporting studies of diagnostic accuracy: explanation and elaboration. Clin Chem 2003;49:7-18. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000107&pid=S0120-4157200500020001000009&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>10. <B>Klatsky AL, Armstrong AA, Friedman GD.</B> Alcohol and mortality. Ann Intern Med 1992;117:646-54. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000108&pid=S0120-4157200500020001000010&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>11. <B>Orpinas P.</B> Who is violent? Factors associated with aggressive behaviors in Latin America and Spain. Rev Panam Salud P&uacute;blica 1999;5:232-44. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000109&pid=S0120-4157200500020001000011&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>12. <B>Torres Y, Posada V, Rojas MC.</B> Estudio Nacional de Salud Mental y Consumo de Sustancias Sicoactivas. Bogot&aacute;: Ministerio de Salud; 1993. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000110&pid=S0120-4157200500020001000012&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>13. <B>Torres de GY.</B> Alcohol: prevalencia de consumo y dependencia en Colombia. Revista de Medicina CES<B> </B>1999;12:1-9. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000111&pid=S0120-4157200500020001000013&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>14. <B>Bray GA.</B> Obesity in America. An overview of the Second Fogarty International Conference on obesity. Int J Obes 1979;3:363-75. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000112&pid=S0120-4157200500020001000014&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>15. <B>Tate DG.</B> Alcohol use among spinal cord-injured patients. Am J Phys Med Rehabil 1993;72:192-5. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000113&pid=S0120-4157200500020001000015&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>16. <B>V&aacute;zquez G, Prada GE, Herr&aacute;n OF.</B> ¿Cu&aacute;nto se percibe? Una aproximaci&oacute;n a la ingesta dietaria. Salud UIS 2002;34:89-98. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000114&pid=S0120-4157200500020001000016&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>17. <B>Gould WW.</B> Final summary of test of normality. Stata Technical Bulletin 1992;5:10-1. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000115&pid=S0120-4157200500020001000017&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>18. <B>Reynaldo J, Santos A.</B> Cronbach´s alpha: tool for assessing the reliability of scales. Journal of Extensi&oacute;n 1999; 37. Disponible en: </FONT><A HREF="http://joe.org/joe/1999april/tt3.html">http://joe.org/joe/1999april/tt3.html</A><FONT FACE="Arial">. Acceso el 10 de mayo de 2004. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000116&pid=S0120-4157200500020001000018&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>19.<B> Altman DG. </B>Practical statistics for medical research. New York: Chapman &amp; Hall/CRC; 1999. p.285-8. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000117&pid=S0120-4157200500020001000019&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>20. <B>Bartfay E, Donner A.</B> The effect of collapsing multinomial data when assessing agreement. Int J Epidemiol 2000; 29:1070-5. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000118&pid=S0120-4157200500020001000020&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P><!-- Generation of PM publication page 241 -->21. <B>Feinstein AR, Cicchetti DV.</B> High agreement but low kappa: I. The problems of two paradoxes. J Clin Epidemiol 1990;43:543-9. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000119&pid=S0120-4157200500020001000021&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>22. <B>Byrt T, Bishop J, Carlin JB.</B> Bias, prevalence and kappa. J Clin Epidemiol 1993;46:423-9. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000120&pid=S0120-4157200500020001000022&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>23. <B>Egglin TK, Feinstein AR.</B> Context bias. A problem in diagnostic radiology. JAMA 1996;276:1752-5. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000121&pid=S0120-4157200500020001000023&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>24. <B>Eltinge JL, Sribney WM.</B> Estimation of means, totals, ratios, and proportions for survey data. Stata Technical Bulletins Reprints 1996;6:213-35. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000122&pid=S0120-4157200500020001000024&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>25. <B>Profamilia.</B> Encuesta Nacional de Demograf&iacute;a y Salud. Resumen Regi&oacute;n Oriental, 2000. Bogot&aacute;, Colombia: Profamilia; 2000. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000123&pid=S0120-4157200500020001000025&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>26. <B>Bush B, Shaw S, Cleary P, Delbanco TL, Aronson M.</B> Screening for alcohol abuse using the CAGE questionnaire. Am J Med 1987;82:231-5. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000124&pid=S0120-4157200500020001000026&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>27. <B>Colhoun H, Ben-Shlomo Y, Dong W, Bost L</B>, <B>Marmot M.</B> Ecological analysis of collectivity of alcohol consumption in England: importance of average drinker. BMJ 1997;314:1164-8. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000125&pid=S0120-4157200500020001000027&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>28. <B>Saitz R, Lepore MF, Sullivan LM, Amaro H, Samet JH.</B> Alcohol abuse and dependence in Latinos living in the United States: validation of the CAGE (4M) questions. Arch Intern Med 1999;159:718-24. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000126&pid=S0120-4157200500020001000028&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>29. <B>Moreira LB, Fuchs FD, Moraes RS, Bredemeier M, Cardozo S, Fuchs SC <I>et al.</B></I> Alcoholic beverage consumption and associated factors in Porto Alegre, a southern Brazilian city: a population-based survey. J Stud Alcohol 1996;57:253-9. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000127&pid=S0120-4157200500020001000029&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>30. <B>Masur J, Monteiro MG.</B> Validation of the "CAGE" alcoholism screening test in a Brazilian psychiatric inpatient hospital setting. Braz J Med Biol Res 1983;16: 215-8. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000128&pid=S0120-4157200500020001000030&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>31.<B> Steinweg DL, Worth H.</B> Alcoholism: the keys to the CAGE. Am J Med 1993;94:520-3. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000129&pid=S0120-4157200500020001000031&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>32. <B>Mayfield D, McLeod G, Hall P.</B> The CAGE questionnaire: validation of a new alcoholism instrument. Am J Psychiatry 1974;131:1121-3. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000130&pid=S0120-4157200500020001000032&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>33. <B>Gliem JA, Gliem RR.</B> Calculating, interpreting, and reporting Cronbach´s alpha coefficient for likert. type scales. Presented at the Midwest research to practice conference in adult, continuing, and community education. The Ohio State University, Columbus, OH, October 8-10, 2003. Disponible en </FONT><A HREF="http://www.alumniosu.org/midwest/midwest%20papers/Gliem%20&amp;%20Gliem-Done.pdf">www.alumniosu.org/midwest/midwest%20papers/Gliem%20&amp;%20Gliem-Done.pdf</A><FONT FACE="Arial">. Acceso el 10 de mayo de 2004. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000131&pid=S0120-4157200500020001000033&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>34. <B>Mora J, Natera</B> <B>G.</B> Expectativas, consumo de alcohol y problemas asociados en estudiantes universitarios de la ciudad de M&eacute;xico. Salud P&uacute;blica de M&eacute;x 2001;43: 89-96. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000132&pid=S0120-4157200500020001000034&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>35. <B>Goldman S, Brown SA, Christiansen BA.</B> Expectancy theory: thinking about drinking. En: Blane HT, Leonard KE, editors. Psychological theories of drinking and alcoholism. New Cork: Guilford Press; 1987. p.181-226. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000133&pid=S0120-4157200500020001000035&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>36. <B>Brown S, Christiansen BA, Goldman MS.</B> The alcohol expectancy questionnaire: an instrument for the assessment of adolescent and adult alcohol expectancies. J Stud Alcohol 1987;48:483-91. &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000134&pid=S0120-4157200500020001000036&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><P>37. <B>Sackett DL, Haynes RB.</B> The architecture of diagnostic research. En: Knottnerus JA, editor. The evidence base of clinical diagnosis. London: BMJ Publishing Group; 2002. p.19-38.&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=000135&pid=S0120-4157200500020001000037&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --> ]]></body><back>
<ref-list>
<ref id="B1">
<label>1</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Ewing]]></surname>
<given-names><![CDATA[JA]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Detecting alcoholism: The CAGE questionnaire.]]></article-title>
<source><![CDATA[JAMA]]></source>
<year>1984</year>
<volume>252</volume>
<page-range>1905-7</page-range></nlm-citation>
</ref>
<ref id="B2">
<label>2</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bisson]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
<name>
<surname><![CDATA[Nadeau]]></surname>
<given-names><![CDATA[L]]></given-names>
</name>
<name>
<surname><![CDATA[Demers]]></surname>
<given-names><![CDATA[A]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The validity of the CAGE scale to screen for heavy drinking and drinking problems in a general population survey]]></article-title>
<source><![CDATA[Addiction]]></source>
<year>1999</year>
<volume>94</volume>
<page-range>715-22</page-range></nlm-citation>
</ref>
<ref id="B3">
<label>3</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Soderstrom]]></surname>
<given-names><![CDATA[CA]]></given-names>
</name>
<name>
<surname><![CDATA[Smith]]></surname>
<given-names><![CDATA[GS]]></given-names>
</name>
<name>
<surname><![CDATA[Kufera]]></surname>
<given-names><![CDATA[JA]]></given-names>
</name>
<name>
<surname><![CDATA[Dischinger]]></surname>
<given-names><![CDATA[PC]]></given-names>
</name>
<name>
<surname><![CDATA[Hebel]]></surname>
<given-names><![CDATA[JR]]></given-names>
</name>
<name>
<surname><![CDATA[McDuff]]></surname>
<given-names><![CDATA[DR]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The accuracy of the CAGE, the Brief Michigan Alcoholism Screening Test, and the Alcohol Use Disorders Identification Test in screening trauma center patients for alcoholism]]></article-title>
<source><![CDATA[J Trauma]]></source>
<year>1997</year>
<volume>43</volume>
<page-range>962-9</page-range></nlm-citation>
</ref>
<ref id="B4">
<label>4</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Knight]]></surname>
<given-names><![CDATA[JR]]></given-names>
</name>
<name>
<surname><![CDATA[Sherritt]]></surname>
<given-names><![CDATA[L]]></given-names>
</name>
<name>
<surname><![CDATA[Harris]]></surname>
<given-names><![CDATA[SK]]></given-names>
</name>
<name>
<surname><![CDATA[Gates]]></surname>
<given-names><![CDATA[EC]]></given-names>
</name>
<name>
<surname><![CDATA[Chang]]></surname>
<given-names><![CDATA[G]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Validity of brief alcohol screening tests among adolescents: a comparison of the AUDIT, POSIT, CAGE, and CRAFFT]]></article-title>
<source><![CDATA[Alcohol Clin Exp Res]]></source>
<year>2003</year>
<volume>27</volume>
<page-range>67-73</page-range></nlm-citation>
</ref>
<ref id="B5">
<label>5</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Watkins]]></surname>
<given-names><![CDATA[JP]]></given-names>
</name>
<name>
<surname><![CDATA[Eisele]]></surname>
<given-names><![CDATA[GR]]></given-names>
</name>
<name>
<surname><![CDATA[Matthews]]></surname>
<given-names><![CDATA[KO]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Occupational medical program alcohol screening: Utility of the CAGE and BMAST.]]></article-title>
<source><![CDATA[J Subst Abuse Treat]]></source>
<year>2000</year>
<volume>19</volume>
<page-range>51-7</page-range></nlm-citation>
</ref>
<ref id="B6">
<label>6</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bland]]></surname>
<given-names><![CDATA[JM]]></given-names>
</name>
<name>
<surname><![CDATA[Altman]]></surname>
<given-names><![CDATA[DG]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Statistics notes: validating scales and indexes.]]></article-title>
<source><![CDATA[BMJ]]></source>
<year>2002</year>
<volume>324</volume>
<page-range>606</page-range></nlm-citation>
</ref>
<ref id="B7">
<label>7</label><nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Chmura]]></surname>
<given-names><![CDATA[H]]></given-names>
</name>
</person-group>
<source><![CDATA[Evaluating medical test]]></source>
<year>1992</year>
<page-range>266-85</page-range><publisher-loc><![CDATA[London ]]></publisher-loc>
<publisher-name><![CDATA[Sage Publications]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B8">
<label>8</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Reid]]></surname>
<given-names><![CDATA[MC]]></given-names>
</name>
<name>
<surname><![CDATA[Lachs]]></surname>
<given-names><![CDATA[MS]]></given-names>
</name>
<name>
<surname><![CDATA[Feinstein]]></surname>
<given-names><![CDATA[AR]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Use of methodological standard in diagnostic test research. Getting better but still not good.]]></article-title>
<source><![CDATA[JAMA]]></source>
<year>1995</year>
<volume>274</volume>
<page-range>645-51</page-range></nlm-citation>
</ref>
<ref id="B9">
<label>9</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bossuyt]]></surname>
<given-names><![CDATA[PM]]></given-names>
</name>
<name>
<surname><![CDATA[Reitsma]]></surname>
<given-names><![CDATA[JB]]></given-names>
</name>
<name>
<surname><![CDATA[Bruns]]></surname>
<given-names><![CDATA[DE]]></given-names>
</name>
<name>
<surname><![CDATA[Gatsonis]]></surname>
<given-names><![CDATA[CA]]></given-names>
</name>
<name>
<surname><![CDATA[Glasziou]]></surname>
<given-names><![CDATA[PP]]></given-names>
</name>
<name>
<surname><![CDATA[Irwig]]></surname>
<given-names><![CDATA[LM]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The STARD statement for reporting studies of diagnostic accuracy: explanation and elaboration]]></article-title>
<source><![CDATA[Clin Chem]]></source>
<year>2003</year>
<volume>7-18</volume>
<page-range>49:</page-range></nlm-citation>
</ref>
<ref id="B10">
<label>10</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Klatsky]]></surname>
<given-names><![CDATA[AL]]></given-names>
</name>
<name>
<surname><![CDATA[Armstrong]]></surname>
<given-names><![CDATA[AA]]></given-names>
</name>
<name>
<surname><![CDATA[Friedman]]></surname>
<given-names><![CDATA[GD]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Alcohol and mortality]]></article-title>
<source><![CDATA[Ann Intern Med]]></source>
<year>1992</year>
<volume>117</volume>
<page-range>646-54</page-range></nlm-citation>
</ref>
<ref id="B11">
<label>11</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Orpinas]]></surname>
<given-names><![CDATA[P]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Who is violent?: Factors associated with aggressive behaviors in Latin America and Spain]]></article-title>
<source><![CDATA[Rev Panam Salud Pública]]></source>
<year>1999</year>
<volume>5</volume>
<page-range>232-44</page-range></nlm-citation>
</ref>
<ref id="B12">
<label>12</label><nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Torres]]></surname>
<given-names><![CDATA[Y]]></given-names>
</name>
<name>
<surname><![CDATA[Posada]]></surname>
<given-names><![CDATA[V]]></given-names>
</name>
<name>
<surname><![CDATA[Rojas]]></surname>
<given-names><![CDATA[MC]]></given-names>
</name>
</person-group>
<source><![CDATA[Estudio Nacional de Salud Mental y Consumo de Sustancias Sicoactivas.]]></source>
<year>1993</year>
<publisher-loc><![CDATA[Bogotá ]]></publisher-loc>
<publisher-name><![CDATA[Ministerio de Salud]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B13">
<label>13</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Torres]]></surname>
<given-names><![CDATA[de GY]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[Alcohol: prevalencia de consumo y dependencia en Colombia]]></article-title>
<source><![CDATA[Revista de Medicina CES]]></source>
<year>1999</year>
<volume>12</volume>
<page-range>1-9</page-range></nlm-citation>
</ref>
<ref id="B14">
<label>14</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bray]]></surname>
<given-names><![CDATA[GA]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Obesity in America. An overview of the Second Fogarty International Conference on obesity.]]></article-title>
<source><![CDATA[Int J Obes]]></source>
<year>1979</year>
<volume>3</volume>
<page-range>363-75</page-range></nlm-citation>
</ref>
<ref id="B15">
<label>15</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Tate]]></surname>
<given-names><![CDATA[DG]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Alcohol use among spinal cord-injured patients]]></article-title>
<source><![CDATA[Am J Phys Med Rehabil]]></source>
<year>1993</year>
<volume>72</volume>
<page-range>192-5</page-range></nlm-citation>
</ref>
<ref id="B16">
<label>16</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Vázquez]]></surname>
<given-names><![CDATA[G]]></given-names>
</name>
<name>
<surname><![CDATA[Prada]]></surname>
<given-names><![CDATA[GE]]></given-names>
</name>
<name>
<surname><![CDATA[Herrán]]></surname>
<given-names><![CDATA[OF.]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[Cuánto se percibe? Una aproximación a la ingesta dietaria.]]></article-title>
<source><![CDATA[Salud UIS]]></source>
<year>2002</year>
<volume>34</volume>
<page-range>89-98</page-range></nlm-citation>
</ref>
<ref id="B17">
<label>17</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Gould]]></surname>
<given-names><![CDATA[WW]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[Final summary of test of normality]]></article-title>
<source><![CDATA[Stata Technical Bulletin]]></source>
<year>1992</year>
<volume>5</volume>
<page-range>10-1</page-range></nlm-citation>
</ref>
<ref id="B18">
<label>18</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Reynaldo]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
<name>
<surname><![CDATA[Santos]]></surname>
<given-names><![CDATA[A]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Cronbach´s alpha: tool for assessing the reliability of scales.]]></article-title>
<source><![CDATA[Journal of Extensión]]></source>
<year>1999</year>
<page-range>37</page-range></nlm-citation>
</ref>
<ref id="B19">
<label>19</label><nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Altman]]></surname>
<given-names><![CDATA[DG]]></given-names>
</name>
</person-group>
<source><![CDATA[Practical statistics for medical research]]></source>
<year>1999</year>
<page-range>285-8</page-range><publisher-loc><![CDATA[New York ]]></publisher-loc>
<publisher-name><![CDATA[Chapman & Hall/CRC]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B20">
<label>20</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bartfay]]></surname>
<given-names><![CDATA[E]]></given-names>
</name>
<name>
<surname><![CDATA[Donner]]></surname>
<given-names><![CDATA[A]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The effect of collapsing multinomial data when assessing agreement.]]></article-title>
<source><![CDATA[Int J Epidemiol]]></source>
<year>2000</year>
<volume>29</volume>
<page-range>1070-5</page-range></nlm-citation>
</ref>
<ref id="B21">
<label>21</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Feinstein]]></surname>
<given-names><![CDATA[AR]]></given-names>
</name>
<name>
<surname><![CDATA[Cicchetti]]></surname>
<given-names><![CDATA[DV]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[High agreement but low kappa: I. The problems of two paradoxes]]></article-title>
<source><![CDATA[J Clin Epidemiol]]></source>
<year>1990</year>
<volume>43</volume>
<page-range>543-9</page-range></nlm-citation>
</ref>
<ref id="B22">
<label>22</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Byrt]]></surname>
<given-names><![CDATA[T]]></given-names>
</name>
<name>
<surname><![CDATA[Bishop]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
<name>
<surname><![CDATA[Carlin]]></surname>
<given-names><![CDATA[JB]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Bias, prevalence and kappa]]></article-title>
<source><![CDATA[J Clin Epidemiol]]></source>
<year>1993</year>
<volume>46</volume>
<page-range>423-9</page-range></nlm-citation>
</ref>
<ref id="B23">
<label>23</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Egglin]]></surname>
<given-names><![CDATA[TK]]></given-names>
</name>
<name>
<surname><![CDATA[Feinstein]]></surname>
<given-names><![CDATA[AR]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Context bias: A problem in diagnostic radiology]]></article-title>
<source><![CDATA[JAMA]]></source>
<year>1996</year>
<volume>276</volume>
<page-range>1752-5</page-range></nlm-citation>
</ref>
<ref id="B24">
<label>24</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Eltinge]]></surname>
<given-names><![CDATA[JL]]></given-names>
</name>
<name>
<surname><![CDATA[Sribney]]></surname>
<given-names><![CDATA[WM]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Estimation of means, totals, ratios, and proportions for survey data]]></article-title>
<source><![CDATA[Stata Technical Bulletins Reprints]]></source>
<year>1996</year>
<volume>6</volume>
<page-range>213-35</page-range></nlm-citation>
</ref>
<ref id="B25">
<label>25</label><nlm-citation citation-type="book">
<collab>Profamilia</collab>
<source><![CDATA[Encuesta Nacional de Demografía y Salud. Resumen Región Oriental, 2000]]></source>
<year>2000</year>
<publisher-loc><![CDATA[Bogotá, Colombia ]]></publisher-loc>
<publisher-name><![CDATA[Profamilia]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B26">
<label>26</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bush]]></surname>
<given-names><![CDATA[B]]></given-names>
</name>
<name>
<surname><![CDATA[Shaw]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
<name>
<surname><![CDATA[Cleary]]></surname>
<given-names><![CDATA[P]]></given-names>
</name>
<name>
<surname><![CDATA[Delbanco]]></surname>
<given-names><![CDATA[TL]]></given-names>
</name>
<name>
<surname><![CDATA[Aronson]]></surname>
<given-names><![CDATA[M]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Screening for alcohol abuse using the CAGE questionnaire.]]></article-title>
<source><![CDATA[Am J Med]]></source>
<year>1987</year>
<volume>82</volume>
<page-range>231-5</page-range></nlm-citation>
</ref>
<ref id="B27">
<label>27</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Colhoun]]></surname>
<given-names><![CDATA[H]]></given-names>
</name>
<name>
<surname><![CDATA[Ben-Shlomo]]></surname>
<given-names><![CDATA[Y]]></given-names>
</name>
<name>
<surname><![CDATA[Dong]]></surname>
<given-names><![CDATA[W]]></given-names>
</name>
<name>
<surname><![CDATA[Bost]]></surname>
<given-names><![CDATA[L]]></given-names>
</name>
<name>
<surname><![CDATA[Marmot]]></surname>
<given-names><![CDATA[M]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Ecological analysis of collectivity of alcohol consumption in England: importance of average drinker]]></article-title>
<source><![CDATA[BMJ]]></source>
<year>1997</year>
<volume>314</volume>
<page-range>1164-8</page-range></nlm-citation>
</ref>
<ref id="B28">
<label>28</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Saitz]]></surname>
<given-names><![CDATA[R]]></given-names>
</name>
<name>
<surname><![CDATA[Lepore]]></surname>
<given-names><![CDATA[MF]]></given-names>
</name>
<name>
<surname><![CDATA[Sullivan]]></surname>
<given-names><![CDATA[LM]]></given-names>
</name>
<name>
<surname><![CDATA[Amaro]]></surname>
<given-names><![CDATA[H]]></given-names>
</name>
<name>
<surname><![CDATA[Samet]]></surname>
<given-names><![CDATA[JH]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Alcohol abuse and dependence in Latinos living in the United States: validation of the CAGE (4M) questions]]></article-title>
<source><![CDATA[Arch Intern Med]]></source>
<year>1999</year>
<volume>159</volume>
<page-range>718-24</page-range></nlm-citation>
</ref>
<ref id="B29">
<label>29</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Moreira]]></surname>
<given-names><![CDATA[LB]]></given-names>
</name>
<name>
<surname><![CDATA[Fuchs]]></surname>
<given-names><![CDATA[FD]]></given-names>
</name>
<name>
<surname><![CDATA[Moraes]]></surname>
<given-names><![CDATA[RS]]></given-names>
</name>
<name>
<surname><![CDATA[Bredemeier]]></surname>
<given-names><![CDATA[M]]></given-names>
</name>
<name>
<surname><![CDATA[Cardozo]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
<name>
<surname><![CDATA[Fuchs]]></surname>
<given-names><![CDATA[SC]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Alcoholic beverage consumption and associated factors in Porto Alegre, a southern Brazilian city: a population-based survey]]></article-title>
<source><![CDATA[J Stud Alcohol]]></source>
<year>1996</year>
<volume>57</volume>
<page-range>253-9</page-range></nlm-citation>
</ref>
<ref id="B30">
<label>30</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Masur]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
<name>
<surname><![CDATA[Monteiro]]></surname>
<given-names><![CDATA[MG]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Validation of the "CAGE" alcoholism screening test in a Brazilian psychiatric inpatient hospital setting]]></article-title>
<source><![CDATA[Braz J Med Biol Res]]></source>
<year>1983</year>
<volume>16</volume>
<page-range>215-8</page-range></nlm-citation>
</ref>
<ref id="B31">
<label>31</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Steinweg]]></surname>
<given-names><![CDATA[DL]]></given-names>
</name>
<name>
<surname><![CDATA[Worth]]></surname>
<given-names><![CDATA[H]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Alcoholism: the keys to the CAGE.]]></article-title>
<source><![CDATA[Am J Med]]></source>
<year>1993</year>
<volume>94</volume>
<page-range>520-3</page-range></nlm-citation>
</ref>
<ref id="B32">
<label>32</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Mayfield]]></surname>
<given-names><![CDATA[D]]></given-names>
</name>
<name>
<surname><![CDATA[McLeod]]></surname>
<given-names><![CDATA[G]]></given-names>
</name>
<name>
<surname><![CDATA[Hall]]></surname>
<given-names><![CDATA[P]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The CAGE questionnaire: validation of a new alcoholism instrument.]]></article-title>
<source><![CDATA[Am J Psychiatry]]></source>
<year>1974</year>
<volume>131</volume>
<page-range>1121-3</page-range></nlm-citation>
</ref>
<ref id="B33">
<label>33</label><nlm-citation citation-type="confpro">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Gliem]]></surname>
<given-names><![CDATA[JA]]></given-names>
</name>
<name>
<surname><![CDATA[Gliem]]></surname>
<given-names><![CDATA[RR]]></given-names>
</name>
</person-group>
<source><![CDATA[Calculating, interpreting, and reporting Cronbach´s alpha coefficient for likert. type scales]]></source>
<year></year>
<conf-name><![CDATA[ Presented at the Midwest research to practice conference in adult, continuing, and community education]]></conf-name>
<conf-date>October 8-10, 2003</conf-date>
<conf-loc>Columbus, OH </conf-loc>
</nlm-citation>
</ref>
<ref id="B34">
<label>34</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Mora]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
<name>
<surname><![CDATA[Natera]]></surname>
<given-names><![CDATA[G]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[Expectativas, consumo de alcohol y problemas asociados en estudiantes universitarios de la ciudad de México]]></article-title>
<source><![CDATA[Salud Pública de Méx]]></source>
<year>2001</year>
<volume>43</volume>
<page-range>89-96</page-range></nlm-citation>
</ref>
<ref id="B35">
<label>35</label><nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Goldman]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
<name>
<surname><![CDATA[Brown]]></surname>
<given-names><![CDATA[SA]]></given-names>
</name>
<name>
<surname><![CDATA[Christiansen]]></surname>
<given-names><![CDATA[BA]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Expectancy theory: thinking about drinking.]]></article-title>
<person-group person-group-type="editor">
<name>
<surname><![CDATA[Blane]]></surname>
<given-names><![CDATA[HT]]></given-names>
</name>
<name>
<surname><![CDATA[Leonard]]></surname>
<given-names><![CDATA[KE]]></given-names>
</name>
</person-group>
<source><![CDATA[Psychological theories of drinking and alcoholism]]></source>
<year>1987</year>
<page-range>181-226</page-range><publisher-loc><![CDATA[New Cork ]]></publisher-loc>
<publisher-name><![CDATA[Guilford Press]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B36">
<label>36</label><nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Brown]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
<name>
<surname><![CDATA[Christiansen]]></surname>
<given-names><![CDATA[BA]]></given-names>
</name>
<name>
<surname><![CDATA[Goldman]]></surname>
<given-names><![CDATA[MS]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The alcohol expectancy questionnaire: an instrument for the assessment of adolescent and adult alcohol expectancies]]></article-title>
<source><![CDATA[J Stud Alcohol]]></source>
<year>1987</year>
<volume>48</volume>
<page-range>483-91</page-range></nlm-citation>
</ref>
<ref id="B37">
<label>37</label><nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Sackett]]></surname>
<given-names><![CDATA[DL]]></given-names>
</name>
<name>
<surname><![CDATA[Haynes]]></surname>
<given-names><![CDATA[RB]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The architecture of diagnostic research.]]></article-title>
<person-group person-group-type="editor">
<name>
<surname><![CDATA[Knottnerus]]></surname>
<given-names><![CDATA[JA]]></given-names>
</name>
</person-group>
<source><![CDATA[The evidence base of clinical diagnosis]]></source>
<year>2002</year>
<page-range>19-38</page-range><publisher-loc><![CDATA[London ]]></publisher-loc>
<publisher-name><![CDATA[BMJ Publishing Group]]></publisher-name>
</nlm-citation>
</ref>
</ref-list>
</back>
</article>
