You are on page 1of 10

Mdulo IV

Publicacin de Ensayos Clnicos


en Revistas Cientficas

1206Rev Esp Cardiol. 2006;59(11):1206-14


PG I NA DEL EDI TO R

Publicacin de ensayos clnicos en revistas cientficas:


consideraciones editoriales
Fernando Alfonsoa, Javier Segoviab, Magda Herasc y Javier Bermejob

a
Editor Jefe.
b
Editor Asociado.
c
Editora de Suplementos REVISTA ESPAOLA DE CARDIOLOGA.

Desde la ltima actualizacin de las recomendacio- En este artculo revisaremos: a) los principales ses-
nes del Comit Internacional de Editores de Revistas gos en la investigacin mdica que afectan a los EC;
Mdicas (CIERM)1, que asumimos en REVISTA ESPA- b) las recomendaciones para mejorar la descripcin de
OLA DE CARDIOLOGA2-5, una de las aportaciones ms los EC en revistas biomdicas; c) las implicaciones ge-
importantes producidas en este campo es la sugeren- nerales derivadas de la iniciativa de registrar los EC, y
cia de registrar todos los ensayos clnicos (EC) d) las adaptaciones de nuestra poltica editorial.
antes de su publicacin definitiva en revistas biomdi-
cas6-11. El CIERM considera necesario que los EC
ENSAYOS CLNICOS Y SESGOS EN LA
sean registrados desde su concepcin en bases de da-
INVESTIGACIN Y LA PUBLICACIN
tos pblicas fcilmente accesibles tanto para autores,
investigadores y agencias reguladoras como para el Muchas publicaciones con resultados falsos positi-
pblico en general. El objetivo principal de esta ini- vos han sido consecuencia de la presin que experi-
ciativa es mejorar la credibilidad de los trabajos final- mentan los diferentes grupos de investigacin que
mente publicados y garantizar que la metodologa em- compiten en un mismo campo por publicar resultados
pleada, los resultados y la informacin cientfica que confirmen las hiptesis fisiopatolgicas ms atrac-
generada por estos estudios puedan estar libremente tivas. Ioannidis12 analiz los resultados de los trabajos
disponibles para ser analizados por la comunidad que, tras ser publicados en las revistas mdicas con
cientfica internacional6-11. mayor factor de impacto, fueron posteriormente ms
La propia definicin de EC ha suscitado controver- citados. Un tercio de estos artculos fue cuestionado
sia. El EC podra definirse de forma amplia como por estudios posteriores, mejor diseados o con mayor
un estudio de investigacin en voluntarios humanos nmero de pacientes, que descartaban o reducan sig-
para responder a problemas especficos de salud7. nificativamente los efectos de la intervencin analiza-
Esta definicin inicial incluira los estudios observa- da. Los estudios de mayor tamao y los que tenan un
cionales y tambin los estudios de intervencin sin diseo aleatorizado fueron los que mejor resistieron el
grupo control. Sin embargo, desde el punto de vista paso del tiempo12.
editorial, y teniendo en cuenta las implicaciones que Sin embargo, el hecho de que gran parte del peso
luego veremos, la definicin propuesta por el CIERM de la investigacin se haya visto desplazada desde los
es ms pragmtica y tambin ms aceptada11. As, el centros acadmicos y universitarios hacia contratos
EC se define como un proyecto de investigacin que, directos entre patrocinadores y organizaciones priva-
de forma prospectiva, asigna a los sujetos a una de- das para investigacin por contrato13,14 resalta la gra-
terminada intervencin o a un grupo de comparacin, dual prdida de influencia del estamento cientfico-
con el objeto de estudiar las relaciones causa-efecto acadmico en el control de la agenda investigadora.
entre dicha intervencin mdica y sus efectos sobre En un estudio reciente15 se ha demostrado que, aun-
la salud11. Las intervenciones incluyen frmacos, pro- que los artculos ms citados siguen teniendo mayori-
cedimientos quirrgicos y dispositivos, pero tambin tariamente autores con filiaciones acadmicas, el n-
tratamientos de conducta o cambios en los procesos mero de estudios financiados de manera exclusiva por
asistenciales11. la industria se ha incrementado de forma espectacular.
El peligro potencial de este cambio es doble. Por una
parte, cuestiones cientficamente relevantes quedan
hurfanas y cada vez es ms difcil que sean inves-
Correspondencia: Revista Espaola de Cardiologa.
Nuestra Seora de Guadalupe, 5-7. 28028 Madrid. Espaa
tigadas. Por otro lado, mltiples autores16-19 han cons-
Correo electrnico: rec@revespcardiol.org tatado que, en relacin con los estudios no patrocina-

Rev Esp Cardiol. 2006;59(11):1206-14 1207


Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

dos, los estudios patrocinados se publican con menos que sustentan la regulacin de la financiacin y pu-
frecuencia y, adems, tienen una probabilidad 3 veces blicacin de los EC25,26.
mayor de obtener resultados favorables que los no pa- Aunque la crtica se ha centrado fundamentalmente
trocinados16-19. Curiosamente, estas diferencias no pa- en los estudios patrocinados por empresas farmacuti-
recen deberse a una peor calidad metodolgica de los cas, tambin se han detectado problemas importantes
estudios financiados por la industria. Este problema en muchos estudios financiados por agencias guberna-
tambin ha sido analizado especficamente en el m- mentales. Chan et al27 demostraron que en los estudios
bito de la cardiologa. En un provocador trabajo en el realizados en la dcada de los aos noventa en Canad
que se incluyeron 324 EC cardiovasculares publica- hubo importantes diferencias entre los protocolos ini-
dos entre los aos 2000 y 2005 en las 3 revistas mdi- ciales y las publicaciones finales. As, se encontraron
cas con mayor factor de impacto, Ridker et al20 anali- datos incompletos en el objetivo de valoracin de efica-
zaron la probabilidad de que los resultados fueran cia y en los objetivos de valoracin de riesgo en el 31 y
positivos segn la fuente de financiacin. Los estu- el 59% de los estudios, respectivamente. Ms preocu-
dios financiados por la industria presentaron con ms pante fue la demostracin de diferencias en la descrip-
frecuencia resultados favorables al frmaco o disposi- cin del objetivo primario entre los protocolos enviados
tivo analizado que los estudios financiados por orga- a los comits ticos y las publicaciones definitivas. Este
nizaciones sin nimo de lucro. Adems, los resultados mismo grupo realiz otro estudio similar con los datos
fueron ms favorables en los EC con objetivos de va- de los comits ticos de Dinamarca28. Ms de la mitad
loracin subrogados que los que tenan objetivos de de los objetivos de valoracin sobre efectividad o ries-
valoracin clnicos20. gos fueron comunicados de forma incompleta, de ma-
Segn la Declaracin de Helsinki21, los EC slo nera que favorecan los resultados de la intervencin y
pueden hacerse con sujetos voluntarios y, por tanto, ocultaban efectos adversos.
los progresos mdicos se basan en la generosidad de Todo lo expuesto resalta la problemtica de los ses-
personas que libremente aceptan participar en los en- gos de publicacin. Algunos anlisis sobre la efectivi-
sayos. Aunque estos sujetos asumen riesgos, su par- dad de frmacos han encontrado resultados positivos
ticipacin en un EC les permite optar a un mayor cuando solamente se evalan los estudios publicados,
beneficio clnico o, al menos, permite que los resulta- mientras que la inclusin de todos los estudios realiza-
dos obtenidos mejoren el tratamiento de otros pacien- dos (publicados y no publicados) muchas veces ha de-
tes22. Como el objetivo primordial de la investigacin mostrado que los efectos perjudiciales incluso pueden
es aumentar el conocimiento, parece ticamente re- superar los beneficios29,30. Los metaanlisis sufren de
probable no hacer pblico el conocimiento generado forma especial las consecuencias de los sesgos de pu-
por los EC22. Sin embargo, en la investigacin corpo- blicacin30.
rativa pueden producirse sesgos cuando sobre el inte- Los editores de revistas mdicas deben favorecer
rs cientfico priman las razones de imagen o, sobre la publicacin de los trabajos correctamente disea-
todo, las motivaciones econmicas. Estas ltimas con dos y realizados sobre temas clnicamente relevantes
frecuencia subyacen en el problema de la publicacin para sus lectores, tanto si los resultados del estudio
selectiva de resultados y en la ocultacin de datos. son negativos como si son positivos 11. Las ltimas
Una reciente revisin demostr que el 91% de los recomendaciones del CIERM insisten en resaltar as-
protocolos especificaba limitaciones en el derecho de pectos de autora, conflicto de inters y control de
publicacin de los investigadores23,24. En ms de la los datos, que deben poder ser analizados e interpre-
mitad de los casos se mencionaba que los datos eran tados directamente por los investigadores de los
propiedad del patrocinador, el cual, adems, deba EC11. Adems, nos recuerdan que la falta de envo
aprobar el manuscrito antes de ser enviado para su para publicacin por parte de los autores o la falta
publicacin23,24. Muchos contratos realizados entre de aceptacin por parte de los editores de estu-
los patrocinadores y los investigadores prohben a s- dios, simplemente por presentar resultados negati-
tos difundir o comentar los resultados que les han vos, constituyen sesgos de publicacin11. Sin embar-
sido presentados en el mbito privado8. Ni siquiera la go, muchos estudios negativos son simplemente
poderosa Food and Drug Administration (FDA) ame- trabajos no concluyentes, por lo que es lgico que
ricana puede hacer pblicos todos los datos que exa- obtengan una baja prioridad para la publicacin11.
mina 8. Estos sesgos limitan la informacin disponi- Algunas instituciones (Cochrane Library31) se han
ble, condicionan nuestro conocimiento lo que afecta mostrado especialmente interesadas en acoger los
de manera particular a la medicina basada en la evi- datos de todos estos estudios11. La poltica de regis-
dencia y, lo que es ms importante, pueden perjudi- trar todos los EC est encaminada a facilitar el acce-
car la atencin que reciben los pacientes. Por desgra- so pblico a toda la informacin cientficamente re-
cia, slo la demostracin de algunos escndalos levante que, por diferentes motivos, pueda tener
suscitados por la ocultacin de acontecimientos ad- dificultades en ver la luz en publicaciones conven-
versos graves ha permitido remover los cimientos cionales.
1208Rev Esp Cardiol. 2006;59(11):1206-14
Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

RECOMENDACIONES PARA LA de los EC para que su validez pudiera ser juzgada de


PUBLICACIN DE ENSAYOS CLNICOS manera adecuada por los lectores33. La declaracin ini-
(RECOMENDACIONES CONSORT) cial de 1996 fue actualizada en 2001, ao en el que
adems se elabor un documento adicional con ejem-
Los estudios aleatorizados a pesar de sus limitacio- plos, explicaciones y un glosario de trminos para ga-
nes representan el patrn de referencia para conocer rantizar su correcta aplicacin34. Se explicaron los fun-
la eficacia de un determinado tratamiento. De he- damentos cientficos para la eleccin de las variables y
cho, en la era de la medicina basada en la evidencia, se resalt la coherencia de la lista finalmente seleccio-
los EC han sido entronizados en lo ms alto de la esca- nada. La versin ms actualizada de las recomendacio-
la jerrquica de lo probado19. Sin embargo, se ha de- nes CONSORT puede encontrarse en su pgina web 35.
mostrado que con frecuencia la calidad de la infor- Algunos aspectos importantes, que finalmente no
macin en los estudios controlados es deficiente30,32. pudieron ser incorporados, suscitaron debate. As, al-
Durante su anlisis, los lectores pueden experimentar gunas variables interesantes (aprobacin del comit
frustracin al apreciar que falta informacin sobre as- tico, fuentes de financiacin y nmero de registro) no
pectos relevantes del estudio. Moher et al30 y Schulz et fueron incluidas en la lista33. Como veremos ms ade-
al32 demostraron que una inadecuada descripcin de lante, los registros de EC ya permiten obtener esta in-
los estudios aleatorizados se asociaba con un sesgo en formacin. Algunos investigadores echaron de menos
la estimacin de los efectos de las intervenciones eva- una variable en la que se hiciera explcito el papel del
luadas que tenda a sobrestimar los efectos del trata- patrocinador en el diseo, la realizacin, el anlisis, la
miento. interpretacin y la escritura del estudio36. Otros sugi-
La declaracin CONSORT (Consolidated Standards rieron que se detallara mejor el proceso que garantiza
of Reporting Trials) fue desarrollada por un grupo de una revisin sistemtica y estructurada de la informa-
investigadores, epidemilogos, estadsticos y editores cin disponible, ya que slo una minora de los EC
de revistas biomdicas para mejorar la presentacin de analizaban sistemticamente la informacin previa37,38.
los estudios clnicos aleatorizados. La propuesta in- La presentacin de una revisin sistemtica que justifi-
clua el seguimiento de una lista de variables basadas que el estudio garantiza a los participantes que su dise-
en la evidencia (tabla 1) y un diagrama de flujo (fig. 1) o es ptimo37,38. En algunos foros se lleg a sugerir
durante el proceso de escritura, revisin y anlisis de que todas las revisiones sistemticas fueran de libre
los EC33. El diagrama de flujo detalla de forma porme- acceso37-39. Tambin se propuso que se definiera expl-
norizada el paso de los participantes por 4 momentos citamente la utilizacin de los datos que faltan (mis-
clave del estudio: inclusin, asignacin a la interven- sing values) y el cumplimiento del tratamiento de los
cin, seguimiento y anlisis. El objetivo fue proporcio- pacientes40. Finalmente, se sugiri que en la lista de
nar una herramienta de trabajo, flexible y permanente- variables se incluyera la descripcin del anlisis eco-
mente actualizada, que permitiera presentar de forma nmico para saber si ser posible realizar estudios so-
sistematizada y con total transparencia los resultados bre la eficiencia de las intervenciones evaluadas41.

Valorados: elegibilidad (n =)

Excluidos (n =)
Sin criterios de inclusin (n =)
[1] Rechazan participar (n =)
Otras razones (n =)

Aleatorizados (n =)

Asignados a la intervencin (n =) Asignados a la intervencin (n =)


[2] Reciben intervencin asignada (n =) Reciben intervencin asignada (n =)
No reciben intervencin asignada (razn) (n =) No reciben intervencin asignada (razn) (n =)

Perdidos seguimiento (razn) (n =) Perdidos seguimiento (razn) (n =)


[3] Intervencin no continuada (razn) (n =) Intervencin no continuada (razn) (n =)
Fig. 1. Diagrama de flujo de los
sujetos participantes en las di-
ferentes fases de un estudio
Analizados (n =) Analizados (n =) aleatorizado. [1] Perodo de in-
[4] Excluidos del anlisis (razn) (n =) Excluidos del anlisis (razn) (n =) clusin; [2] asignacin a la in-
tervencin; [3] seguimiento; [4]
anlisis.

Rev Esp Cardiol. 2006;59(11):1206-14 1209


Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

TABLA 1. Lista de variables CONSORT


Variable (nmero) Descripcin

Ttulo y resumen (1) Cmo se asign a los pacientes a la intervencin (asignacin aleatorizada, aleatorizados
o asignados aleatoriamente)
Introduccin
Antecedentes (2) Antecedentes cientficos y explicacin de la hiptesis
Mtodos
Participantes (3) Criterios de elegibilidad de los participantes y situacin y lugar donde los datos fueron obtenidos
Intervenciones (4) Detalles precisos de las intervenciones planeadas en cada grupo y cmo y cundo fueron finalmente
realizadas
Objetivos (5) Objetivos e hiptesis especficos
Resultados (6) Definicin clara de los objetivos de valoracin de resultados primarios y secundarios y, en su caso,
de los mtodos utilizados para mejorar la calidad de las mediciones (p. ej., observaciones
mltiples, entrenamiento de los valoradores)
Tamao de muestra (7) Cmo se determin el tamao muestral y, en su caso, explicacin de cualquier anlisis interino
y de las reglas para la finalizacin del estudio
Aleatorizacin
Generacin de la secuencia (8) Mtodo utilizado para generar la secuencia de asignacin aleatoria, incluyendo los detalles de
cualquier restriccin (p. ej., bloques, estratificacin)
Ocultacin de la asignacin (9) Mtodo utilizado para implementar la secuencia de asignacin aleatoria (sistemas cerrados
numerados, central telefnica) especificando si la secuencia permaneci oculta hasta el momento
de la asignacin a la intervencin
Implementacin (10) Quin gener la secuencia de asignacin, quin incluy a los participantes y quin asign a los
participantes a sus grupos respectivos
Cegamiento (enmascaramiento) (11) Especificar si los participantes, las personas que realizaron o asignaron la intervencin y las que
valoraron los resultados conocan a qu grupo estaban asignados los pacientes. En caso
contrario, cmo se valor el xito del enmascaramiento
Mtodos estadsticos (12) Mtodos estadsticos utilizados para comparar la variable de valoracin de resultado primaria entre
los grupos. Mtodos empleados en los anlisis adicionales, como los anlisis de subgrupos y
ajustes
Resultados
Flujo de participantes (13) Flujo de participantes en cada fase del estudio (se recomienda encarecidamente usar un diagrama).
De forma especfica se debe detallar en cada grupo el nmero de pacientes asignados a cada
tratamiento, los que recibieron el tratamiento previsto, los que completaron el protocolo de
estudio y los que fueron analizados para la variable principal de resultado. Describir las
desviaciones del protocolo inicial y sus razones
Seleccin (14) Fechas que definan los perodos de seleccin y seguimiento
Datos basales (15) Caractersticas demogrficas y clnicas basales de cada grupo
Nmeros analizados (16) Nmero de participantes (denominador) de cada grupo incluido en cada anlisis especificando si el
anlisis se realiz por intencin de tratar. Si es posible, indicar los resultados con nmeros
absolutos (p. ej., 10/20, no 50%)
Resultados y estimaciones (17) Para cada variable de valoracin de resultado primaria y secundaria, indicar resumidamente los
resultados en cada grupo y la estimacin de la importancia del efecto y de su precisin (p. ej., IC
del 95%)
Anlisis secundarios (18) Valorar la presencia de multiplicidad presentando cualquier otro anlisis realizado, incluyendo anlisis
de subgrupos y ajustes, indicando los que fueron preespecificados y los de carcter exploratorio
Acontecimientos adversos (19) Indicar todos los acontecimientos adversos importantes o los efectos secundarios en cada grupo
de intervencin
Discusin
Interpretacin (20) Interpretacin de resultados en la que se tenga en cuenta la hiptesis del estudio, las posibles
fuentes de sesgos o imprecisiones y los peligros asociados con la multiplicidad de anlisis y de
resultados
Generabilidad (21) Generabilidad (validez externa) de los resultados del estudio
Evidencia global (22) Interpretacin general de los resultados en el contexto de la evidencia actualmente disponible
En una columna adicional (derecha) debe especificarse en qu pgina se encuentra descrita cada variable. Adaptada de Moher et al33.

Nuevas propuestas os, riesgos y efectos adversos en los EC. El grupo


CONSORT ha desarrollado una lista con 10 variables
Probablemente, el avance ms interesante producido para mejorar la descripcin de los riesgos y las com-
en este campo es el de optimizar la descripcin de da- plicaciones, que se superpone perfectamente sobre los
1210Rev Esp Cardiol. 2006;59(11):1206-14
Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

22 puntos iniciales42. Se pretende concienciar acerca CONSORT aborda especficamente este tema, en la
de la importancia de difundir los problemas de seguri- mayora de los trabajos no se define adecuadamente si
dad detectados en los EC. los subgrupos son preespecificados, si el anlisis esta-
Tambin se han producido adaptaciones de las reco- dstico considera la multiplicidad de comparaciones ni
mendaciones iniciales para estudios con diseos espe- si se han valorado las interacciones 54. Finalmente,
cficos. As, el grupo CONSORT ha elaborado recien- Nuovo et al55 han insistido en que, a pesar de todas las
temente un documento43,44 para los estudios que recomendaciones, tan slo un reducido nmero de EC
aleatorizan grupos de pacientes (cluster trials), ya especifica el nmero de pacientes que es necesario tra-
que se haba demostrado que estos estudios presenta- tar y la reduccin absoluta del riesgo.
ban problemas especficos (diseo, tamao de muestra Estos datos confirman que debemos seguir realizan-
efectivo, coeficiente correlacin intragrupo y seleccin do esfuerzos para mejorar la presentacin de los estu-
tras la aleatorizacin)43-45. Otras adaptaciones se diri- dios aleatorizados en las revistas biomdicas. Altman56
gen a los estudios con diseos de equivalencia o de no revis las instrucciones para los autores en 167 revis-
inferioridad, con cruce de tratamientos o con mltiples tas con alto impacto publicadas en 2003. Slo el 23%
grupos de intervencin. Previamente, se haba detecta- de las revistas mencionaba las recomendaciones CON-
do deficiencias en la publicacin de estudios con dise- SORT y el 43% citaba las recomendaciones del
o de no inferioridad o de equivalencia46. En estos es- CIERM, muchas veces con citas no actualizadas. Las
tudios es preciso predefinir los mrgenes de no revistas de medicina general eran ms rigurosas que
inferioridad o de equivalencia y su justificacin clni- las de especialidades, y las que adoptaban las propues-
ca, mencionar los intervalos de confianza y analizar tas CONSORT tambin seguan las del CIERM.
los resultados, tanto por intencin de tratar como por
protocolo47. REGISTRO DE LOS ENSAYOS CLNICOS
La idea de registrar los EC surgi hace ms de 30
Resultados y retos en su implementacin
aos como un intento de evitar los sesgos de publica-
Se ha demostrado que la implementacin de los cri- cin8. Se ha calculado que tan slo la mitad del milln
terios CONSORT mejora la calidad de la informacin de EC realizados en los ltimos 50 aos ha sido publi-
publicada en los estudios aleatorizados. Moher et al48 cado y, de ellos, un nmero considerable no est dis-
demostraron que la calidad de la presentacin de los ponible en MEDLINE8. El resultado neto es un claro
EC mejor sensiblemente al seguir estos criterios. En sesgo hacia la publicacin de resultados positivos que,
particular, la incorporacin de los diagramas de flujo sistemticamente, favorecen los tratamientos ms no-
ayud a mejorar la calidad de las publicaciones 49. De- vedosos y ms caros. Adems, los efectos adversos
vereaux et al50 demostraron que las revistas que se ad- son habitualmente silenciados o comunicados con re-
heran a las recomendaciones CONSORT mejoraban traso. Este problema afecta a las recomendaciones de
sus criterios de calidad y aumentaban el nmero de as- la guas de prctica clnica57 y, por ltimo, a la salud
pectos metodolgicos descritos. Yank et at51 compara- de los pacientes57. La cuestin es fundamentalmente
ron los criterios de calidad de 300 EC publicados antes tica: son los resultados de los EC propiedad exclusi-
de 1997 en 5 prestigiosas revistas mdicas con 300 EC va de sus patrocinadores o son tambin propiedad de
publicados tras 1997. La descripcin del consenti- la comunidad cientfica internacional al repercutir de
miento informado y aprobacin por el comit tico manera directa en la salud de los ciudadanos? Desde el
mejoraron significativamente durante el perodo de es- punto de vista editorial la respuesta es clara 6-11. De he-
tudio. Sin embargo, aunque hay una correlacin entre cho, la propuesta del CIERM ha significado el impulso
la descripcin de los estudios aleatorizados y su cali- ms efectivo para implementar los registros de EC6-11.
dad metodolgica, se sigue observando importantes di- La Declaracin de Helsinki21 requiere que el diseo de
ferencias de calidad en los estudios bien presentados 52. los estudios est a disposicin pblica. A la larga, na-
Hewitt et al53 demostraron que la descripcin del ocul- die gana con la liberacin selectiva de informacin de
tamiento al grupo al que los pacientes eran asignados los EC6-11. Por ello, los investigadores y los patrocina-
era habitual en las revistas adheridas al CONSORT, dores tienen la importante responsabilidad de presen-
pero infrecuente en otras revistas. Este aspecto afecta a tar los hallazgos y los posibles efectos adversos en
la credibilidad de los resultados, ya que los EC que no un plazo de tiempo razonable6-11. Finalmente, los co-
mencionan la ocultacin de la asignacin presentan mits ticos deben colaborar exigiendo el registro de
con ms frecuencia resultados positivos en su criterio los EC antes de su aceptacin definitiva7.
de valoracin principal53. Entre las ventajas de registrar los EC6-11,58 destacan:
Recientemente se ha descrito que hasta un 70% de a) aspectos ticos; b) evitar daos a los pacientes al
los estudios aleatorizados sobre enfermedades cardio- permitir acceder a informacin no publicada sobre
vasculares utiliza anlisis de subgrupos y que stos no riesgos y efectos adversos; c) evitar duplicar las inves-
siempre estn bien realizados54. A pesar de que la lista tigaciones, lo cual optimiza la eficiencia de la investi-
Rev Esp Cardiol. 2006;59(11):1206-14 1211
Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

TABLA 2. Datos mnimos que deben registrarse en los ensayos clnicos


Variable Comentario

1. Nmero de estudio nico Establecido por el propio registro


2. Fecha de registro Establecido por el propio registro
3. Identificaciones secundarias Asignadas por el patrocinador u otras entidades interesadas
4. Financiacin Nombre de la organizacin que financia el estudio
5. Patrocinador principal Entidad principal responsable de la investigacin
6. Patrocinador secundario Entidades secundarias responsables de la investigacin
7. Persona responsable de contacto Persona para contacto pblico del estudio y con los pacientes
8. Persona de contacto de la investigacin Persona de contacto sobre las dudas cientficas del estudio
9. Ttulo del estudio Titulo breve elegido por el grupo investigador
10. Ttulo cientfico oficial del estudio Debe incluir el tipo de intervencin, la enfermedad estudiada y el resultado analizado
11. Revisin comit tico de investigacin Especificar s/no. Se asume que todos los estudios deben ser aprobados antes de comenzar
12. Enfermedad estudiada Patologa mdica analizada
13. Intervencin Descripcin de la intervencin estudiada y de la utilizada en la comparacin o grupo control.
Nombre genrico en caso de medicacin registrada. Debe especificarse la duracin de la
intervencin
14. Principales criterios de inclusin/exclusin Principales caractersticas de los pacientes que condicionan su elegibilidad para el estudio
15. Tipo de estudio La base de datos debe proporcionar listas de especificaciones seleccionables: aleatorizado o
no, tipo de enmascaramiento (doble ciego, etc.), tipo de control (activo o placebo),
asignacin de los grupos (paralelo, cruce, factorial)
16. Fecha anticipada de comienzo Fecha estimada de inclusin del primer paciente
17. Clculo del tamao de muestra Nmero total de pacientes que los investigadores planean incluir en el estudio
18. Estado del reclutamiento Especificar si est disponible y, en su caso, proporcionar la informacin
19. Objetivo primario Criterio de valoracin de resultado primario. Debe especificarse exactamente cundo se
analiza
20. Objetivos secundarios Criterios de valoracin de resultado secundarios definidos en el protocolo. Debe describirse
el momento en el que se analizan
Propuesta de la Organizacin Mundial de la Salud adoptada por el Comit Internacional de Editores de Revistas Mdicas (CIERM).
Adaptada de De Angelis et al9.

gacin y ayuda a disear mejor los nuevos estudios; d) paa farmacutica. Sin embargo, los intentos de algu-
evitar los sesgos de publicacin; e) mejorar la transpa- nas asociaciones de la industria para intentar unificar
rencia, para impedir cambios en el diseo de los EC y sus registros todava no han dado los resultados espe-
favorece una mejor interpretacin de sus resultados, y rados8. Adems, debido a los inherentes conflictos de
f) elevar la calidad global de la investigacin58. A su inters, estas iniciativas no parecen ser la mejor solu-
vez, entre sus posibles limitaciones se han mencionado cin al problema y difcilmente podremos aspirar a
las siguientes: a) falta de registros que cumplan con una unificacin de estos registros.
todos los criterios exigidos; b) incremento de los tr- Las ltimas recomendaciones del CIERM especifi-
mites burocrticos ya de por s complejos para la in- can la obligacin de registrar los EC6-11,59. De esta
vestigacin; c) presentacin de resultados antes de ser forma, los editores respondan en 2004 a un creciente
analizados y criticados en el proceso de revisin por clamor que demandaba un aumento en la transparencia
pares; d) interpretacin incorrecta de resultados no de los EC. El registro debe ser universal, pblico, f-
suficientemente explicados por el pblico general; e) cilmente accesible (de forma electrnica) y gratuito.
prdida de las ventajas (y de los beneficios econmi- Debe permanecer abierto de forma prospectiva para
cos resultantes) de las compaas que invierten en in- permitir actualizar los datos y debe estar gestionado
vestigacin e innovacin, en beneficio de sus competi- por una organizacin sin nimo de lucro. Cada EC tie-
dores, y f) falta de medidas efectivas que penalicen la ne un nmero de registro nico que debe figurar al fi-
falta de registro de los EC58. nal del resumen del estudio. Finalmente, es importante
Desde 2004 las principales compaas farmacuti- poder garantizar la validez de los datos incluidos. En
cas mundiales han colaborado decididamente para fa- la tabla 2 se presentan las recomendaciones del
vorecer los registros de EC. De hecho, muchas de ellas CIERM, adaptadas de la propuesta de la Organizacin
han desarrollado medidas proactivas dirigidas a restau- Mundial de la Salud (OMS), con los datos mnimos
rar el clima de confianza en la investigacin financiada que deben incluirse en cada registro9.
por la industria8. Algunas iniciativas se han centrado Estas recomendaciones son menos exigentes que las
en desarrollar registros particulares, pero fcilmente propuestas en la Declaracin de Ottawa, mucho ms
accesibles, de todos los EC auspiciados por cada com- ambiciosa, y en la que participaron mltiples organiza-
1212Rev Esp Cardiol. 2006;59(11):1206-14
Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

ciones, incluida la Cochrane Collaboration60,61. En ella Problemas y consecuencias de su aplicacin


se sugiere que se registren todos los estudios prospec-
tivos, incluidos tambin los estudios en fase I, con o Algunos temas han generado una considerable dis-
sin grupo control. Adems, deben detallarse las en- cusin. Segn el CIERM, el registro debe ser de pro-
miendas realizadas y presentarse los resultados finales, piedad pblica y no debe tener nimo de lucro11. Sin
si bien se acepta un tiempo de retraso para permitir su embargo, los editores del British Medical Journal con-
publicacin60,61. sideraron que la propiedad pblica del registro, aunque
deseable, podra ser un criterio innecesariamente res-
Registros disponibles trictivo y, de hecho, esta diferencia aparentemente me-
nor les llev a no firmar la ltima declaracin del
1. El repositorio norteamericano ClinicalTrial.gov CIERM72. Adems, aunque el CIERM no lo exige, al-
cumple todos los requisitos del CIERM. Esta base de gunos investigadores insisten en la utilidad de extender
datos desarrollada por la National Library of Medicine los registros a los estudios en fase I y, sobre todo, en la
se encuentra disponible en internet62 y, aunque depen- necesidad de presentar los resultados finales58. Tam-
de de la FDA y del National Institute of Health, permi- bin es importante ver cmo evolucionan la iniciativa
te incluir estudios internacionales. Este registro ha de la OMS68-71 y la Declaracin de Ottawa60,61. Final-
sido criticado por algunos investigadores europeos por mente, es preciso evaluar de forma peridica los resul-
estar demasiado centrado en los EC americanos y por tados y las implicaciones de esta nueva poltica edito-
no incorporar informacin sobre los resultados fina- rial.
les6-11. El estudio de Zarin et al73 constat la importante in-
2. Una compaa privada britnica (Current Contro- fluencia de la iniciativa del CIERM para el registro de
lled Trials63) desarroll la idea del nmero estndar in- los EC. En septiembre de 2005 se produjo un evidente
ternacional de registro. A finales de 2005 la propiedad efecto pico en el nmero de EC registrados. Se con-
de esta base de datos fue transferida a una organizacin firm una progresiva mejora de la calidad de los datos
sin nimo de lucro cumpliendo los requerimientos del registrados, incluidos el nombre de la intervencin
CIERM. Ahora, tambin este registro (International analizada y el criterio de valoracin principal. Sin em-
Standard Randomised Controlled Trial Number64) es bargo, se apreciaron diferentes sensibilidades a la hora
vlido desde el punto de vista editorial10. de desvelar la informacin y muchos estudios fueron
3. La Comunidad Europea, mediante una directiva registrados simplemente como frmaco en fase de in-
especfica de armonizacin (2001/20/EC) introdujo la vestigacin en vez de especificar el nombre concreto
legislacin que obligaba a registrar los estudios clni- de la intervencin73. Mientras que la correcta cumpli-
cos sobre productos mdicos para uso humano y de- mentacin de estos campos en los EC financiados por
sarroll la base de datos EudraCT65 controlada por la instituciones acadmicas era prcticamente universal,
Agencia Europea del Medicamento. Aunque esta base los EC patrocinados por la industria utilizaban con fre-
de datos podra ser muy til para los investigadores cuencia trminos vagos al describir estas importantes
europeos, de momento no cumple con algunos requisi- variables22.
tos del CIERM al ser un registro confidencial, slo ac-
cesible a las agencias reguladoras y organizaciones fi-
CONSIDERACIONES DE POLTICA EDITORIAL
nanciadoras10.
4. Muchos pases, incluido Espaa, han recogido la Desde REVISTA ESPAOLA DE CARDIOLOGA hemos
informacin de todos los EC aunque, de nuevo, estos realizado una revisin editorial sobre este tema. A di-
datos no son accesibles pblicamente10. ferencia de algunas importantes revistas americanas,
5. Algunas especialidades mdicas, como la pedia- ninguna publicacin europea dedicada a las enferme-
tra, han sido especialmente sensibles a los problemas dades cardiovasculares exige todava el registro de los
ticos en la investigacin. En 2004 se estableci un re- EC. Sin embargo, este aspecto ya ha sido suscitado en
gistro de evaluacin de frmacos en nios (DEC-net66) la ltima reunin de editores nacionales de la Sociedad
patrocinado directamente por la Unin Europea y que Europea de Cardiologa. Adems, el grupo HEART
cumple a la perfeccin los requisitos de CIERM 67. (Heart Editors Action Round Table) est trabajando
6. Finalmente, la OMS ha desarrollado una pla- activamente para estimular acuerdos entre los editores
taforma internacional para organizar los registros de las revistas cardiovasculares que faciliten una pol-
de los EC y asumir el liderazgo de esta iniciati- tica global de registro de los EC.
va 68-71. La OMS colabora con otras organizaciones El nmero de estudios aleatorizados recibidos en
en proyectos destinados a garantizar que se con- nuestra Revista durante los ltimos aos ha sido de tan
sense el nmero mnimo de datos del registro, la slo 2-3 al ao. Sin embargo, durante este intervalo
fiabilidad de la informacin registrada y la imple- hemos publicado un importante nmero de subestu-
mentacin de un sistema nico de numeracin inter- dios, anlisis de subgrupos y seguimientos de diferen-
nacional68-71. tes EC. A partir de ahora los estudios aleatorizados
Rev Esp Cardiol. 2006;59(11):1206-14 1213
Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

que se publiquen en nuestra Revista debern adaptarse 16. Bekelman JE, Li Y, Gross CP. Scope and impact of financial con-
flicts of interes in biomedical research: a systematic review.
a las recomendaciones CONSORT. Adems, estaremos JAMA. 2003;298:454-465.
atentos para adaptar nuestras instrucciones para auto- 17. Lexchin J, Bero LA, Djulbegovic B, Clark O. Pharmaceutical in-
res a los avances que se vayan produciendo sobre el dustry sponsorship and research outcome and quality: a systema-
registro de EC, tanto desde la perspectiva de requeri- tic review. BMJ. 2003;326:1167-70.
18. Finucane TE, Boult CE. Association of funding and findings of
mientos editoriales como adecundose a la legislacin
pharmaceutical research at a meeting of a medical professional
vigente. Esperamos que las consideraciones aqu ex- society. Am J Med. 2004;117:842-5.
puestas ayuden a presentar los EC con la mayor clari- 19. Peir S. Se puede confiar en los resultados de la investigacin
dad metodolgica posible. De esta forma mejoraremos clnica? Humanitas. Humanidades Mdicas. 2006;5:1-16
la calidad de la publicacin final de estos estudios tan 20. Ridker PM, Torres J. Reported outcomes in major cardiovascular
clinical trials funded by for profit and not-for-profit organiza-
trascendentes para el avance del conocimiento cientfi- tions: 2000-2005. JAMA. 2006;295:2270-4.
co. Confiamos en que estas iniciativas editoriales, uni- 21. World Medical Association. Declaration of Helsinki. Oct 9. 2004
das a las adoptadas previamente74-76, contribuyan a me- [accedido 15 May 2006]. Disponible en: http://www.wma.net/
jorar la calidad y credibilidad de REVISTA ESPAOLA DE e/policy/b3.htm
22. Drazen JM, Wood AJJ. Trial registration report card. N Engl J
CARDIOLOGA. Med. 2005;353:2809-11.
23. Gotzsche PC, Hrobjartsson A, Johansen HK, Haahr MT, Altman
DG, Chan AW, et al. Constrains on publication rights in industry-
initiated clinical trials. JAMA. 2006;295:1645-6.
24. Steinbrook R. Gag clauses in clinical-trial agreements. N Engl J
Med. 2005;352:2160-2162.
BIBLIOGRAFA 25. Topol EJ. Failng the public health: rofecoxib, Merck and the
FDA. N Engl J Med. 2004;351:1707-9.
1. Comit Internacional de Editores de Revistas Mdicas. Requisitos 26. Kondro W. Drug company experts advised staff to withhold data
de uniformidad para los manuscritos enviados a revistas biomdi- about SSRI use in children. CMAJ. 2004;170:783.
cas: escritura y proceso editorial para la publicacin de trabajos 27. Chan AW, Krleza-Jerik K, Schmid I, Altman DG. Outcome re-
biomdicos. Rev Esp Cardiol. 2004;57:539-58. porting bias in randomized trials funded by the Canadian Institute
2. Alfonso F, Bermejo J, Segovia J. Nuevas recomendaciones del of Health Research. CMAJ. 2004;171:735-40.
comit internacional de editores mdicos. Cambiando el nfasis: 28. Chan AW, Hrobjartsson A, Haarhr MT, Gotzsche PC, Altman
de la uniformidad de los requisitos tcnicos a los aspectos bioti- DG. Empirical evidence for selective reporting of outcomes in
cos. Rev Esp Cardiol. 2004;57:592-3. randomized trials: comparison of protocols to published articles.
3. Alfonso F, Bermejo J. Revista Espaola de Cardiologa: en cami- JAMA. 2004;291:2457-65.
no. Rev Esp Cardiol. 2004;57:1-3. 29. Whittington CJ, Kendall T, Fonagly P, Cottrell D, Cotgrove A,
4. Bosch X, Villacastn JP, Alfonso F. Medicina basada en la credi- Boddington E. Selective serotonin reuptake inhibitors in childho-
bilidad. Rev Esp Cardiol. 2001;54:1343-4. od depression: systematic review of published versus unpublished
5. Alfonso F, Bermejo J, Segovia J. Revista Espaola de Cardiolo- data. Lancet. 2004;363:1341-5.
ga. Actividad, difusin internacional e impacto cientfico. Rev 30. Moher D, Pham B, Jones A, Cook DJ, Jadad AR, Moher M, et al.
Esp Cardiol. 2004;57:1245-9. Does the quality of reports of randomised trials affects estimates
6. De Angelis C, Drazen JM, Frizelle FA, Haug C, Hoey J, Horton of intervention efficacy reported in meta-analyses? Lancet.
R, et al. Clinical trial registration: a statement from the Internatio- 1998;352:609-13.
nal Committee of Medical Journal Editors. N Engl J Med. 31. Cochrane Library. Disponible en: www.cochrane.org
2004;351:1250-1. 32. Schulz KF, Chalmers I, Hayes RJ, Altman DG. Empirical eviden-
7. Steinbrook R. Public Registration of clinical trials. N Engl J Med. ce of bias: dimensions of methodological quality associated with
2004;351:315-7. estimates of treatment effects in controlled trials. JAMA. 1995;
8. Rennie D. Trial registration. A great idea switches from ignored 273:408-12.
to irresistible. JAMA. 2004;292:1359-62. 33. Moher D, Schulz K, Altman DG, for the CONSORT group. The
9. De Angelis CD, Drazen JM, Frizelle FA, Haug C, Hoey J, Horton CONSORT statement: revised recommendations for improving
R, et al. Is this clinical trial fully registered? A statement from the quality of reports of parallel-group randomised trials. Lancet.
the International Committee of Medical Journal Editors. N Engl J 2001;357:1191-4.
Med. 2005;352:2436-8. 34. Altman DG, Schulz KF, Moher D, Egger M, Davidoff F, Elbour-
10. Haug C, Gotzsche PC, Schroeder TV. Registries and registration ne D, et al. for the CONSORT Group. The revised CONSORT
of clinical trials. N Engl J Med. 2005;353:2811-2. statement for reporting randomized trials: explanation and elabo-
11. International Committee of Medical Journal Editors. Uniform re- ration. Ann Intern Med. 2001;134:663-94.
quirements for manuscripts submitted to biomedical journals. Up- 35. Disponible en: www.consort-statement.org
date posted on October 2005. Disponible en: www.ICMJE.org 36. Counsell C. Reporting of randomized controlled trials (letter).
12. Ioannidis JP. Contradicted and initially stronger effects in highly Lancet. 2001;358:585..
cited clinical research. JAMA. 2005;294:218-28. 37. Clarke M, Chalmers I. Discussion sections in reports of contro-
13. Davidoff F, De Angelis CD, Drazen JM, Hoey J, Hjgaard L, Hor- lled trials published in five general medical journals. Islands in
ton R, et al. Sponsorship, authorship and accountability. Lancet. search of continents? JAMA. 1998;280-280-2.
2001;358:854-6. 38. Clarke M. Doing new research? Dont forget the old. PLoS Medi-
14. Johns MM, Barners M, Florencio PS. Restoring balance to in- cine. 2004;1:e35:100-102.
dustry-academia relationships in an era of institutional financial 39. Clarke M, Alderson P, Chambers I. Discussion sections in reports
conflicts of interest: promoting research while maintaining trust. of controlled trials published in general medical journals. JAMA.
JAMA. 2003;289:741-6. 2002;287:2799-801.
15. Patsopoulos NA, Analatos AA, Ioannidis JP. Origin and funding 40. Shapiro S. The revised CONSORT statement: honing the cut-
of the most frequently cited papers in medicine: database analy- ting edge of the randomized controlled trial. CMAJ. 2001;164:
sis. BMJ. 2006;332:1061-4. 1157-8.

1214Rev Esp Cardiol. 2006;59(11):1206-14


Alfonso F et al. Publicacin de ensayos clnicos en revistas cientficas: consideraciones editoriales

41. Freemantle N, Mason JM, Haines A, Eccles MP. An important 57. Alfonso F, Bermejo J, Segovia J. Guas Europeas de Prctica Cl-
step toward evidence-based health care. Ann Intern Med. 1997; nica en Revista Espaola de Cardiologa. Hacia una completa
127:81-3. globalizacin de la asistencia cardiovascular? Rev Esp Cardiol.
42. Ioannidis JPA, Evans SJW, Gotzsche PC, ONeill RT, Altman 2004;57:1000-2.
DG, Schulz K, et al, for the CONSORT group. Better reporting of 58. Stone JH, Lockshin MD, Katz PP, Yelin EH. New journal policy
harms in randomized trials: an extension of the CONSORT state- regarding registration of clinical trials. Arthritis Rheum.
ment. Ann Intern Med. 2004;141:781-8. 2005;52:2243-7.
43. Campbell MK, Elbourne DR, Altman DG, for the CONSORT 59. Steinbrook R. Registration of clinical trials: voluntary of manda-
Group. CONSORT statement: extension to cluster randomized tory? N Engl J Med. 2004;351:1820-2.
trials. BMJ. 2004;328:702-8. 60. Krleza-Jeric K, Chan AW, Dickersin K, Sim I, Grimshaw J,
44. Campbell MJ. Extending CONSORT to include cluster trials. Gluud C, for the Ottawa Group. Principles for international regis-
BMJ. 2004;328:654-5. tration of protocol information and results from human trials of
45. Puffer S, Torgerson D, Watson J. Evidence for risk of bias in health-related interventions: Ottawa statement (part I). BMJ.
cluster randomized trials:review of recent trials published in three 2005;330:956-58. Fe de erratas en: BMJ 2005;330:1258.
general medical journals. BMJ. 2003;327:785-9. 61. Krleza-Jeric K. Clinical trials registration: The differing views of
46. Le Henanff A, Giraudeau B, Baron G, Ravaud P. Quality of re- industry, the WHO and the Ottawa group. PloS Medicine.
porting of noninferiority or equivalence trials. JAMA. 2006;295: 2005;2:e378(1093-1097).
1147-51. 62. National Library of Medicine. Disponibe en: http://prsinfo.Clini-
47. Piaggio G, Elbourne DR, Altman DG, Pocock SJ, Evans SJW, for calTrials.gov
the CONSORT group. Reporting of noninferiority and equivalen- 63. Current Controlled Trials. Disponible en: www.controlled-
ce randomized trials. An extension of the CONSORT statement. trials.com
JAMA. 2006;295:1152-60. 64. International Standard Randomised Controlled Trial Number.
48. Moher D, Jones A, Lepage L, for the CONSORT group. Use of Disponible en: www.isrctn.org
the CONSORT statement and quality of reports of randomized 65. EudraCT. Disponible en: http://eudract.emea.eu.int
trials: a comparative before and after evaluation. JAMA. 2001; 66. DEC-net. Disponible en: www.dec-net.org
285:1992-5. 67. Bonati M, Pandolfini C. Trial registration, the international com-
49. Egger M, Jni P, Bartlett C, for the CONSORT group. Value of mittee of medical journals editors statement and pediatric jour-
flow diagrams in reports of randomised controlled trials. JAMA. nals. Pediatric Anesthesia. 2006;16:92-9.
2001;285:1996-9. 68. Evans T, Gulmezoglu AM, Pang T. Registering clinical trials: an
50. Devereaux PJ, Manns BJ, Ghali WA, Quan H, Guyatt GH. The essential role for WHO. Lancet. 2004;363:1413.
reporting of methodological factors in randomized controlled 69. Gulmezoglu AN, Pang T, Horton R, Dickersin K. WHO facilita-
trials and the association with a journal policy to promote adhe- tes international collaboration in setting the standards for clinical
rence to the consolidated standards of reporting trials (CON- trials registration. Lancet. 2005;365:1829-31.
SORT) checklist. Controlled Clinical Trials. 2002;23:380-8. 70. Sim I, Chan AW, Gulmezoglu AM, Evans T, Pang T. Clinical
51. Yank V, Rennie D. Reporting of informed consent and ethics trials registration: transparency is the watchword. Lancet. 2006;
committee approval in clinical trials. JAMA. 2002;287:2835-8. 367:1631-3.
52. Huwiler-Mntener K, Jni P, Junker C, Egger M. Quality of re- 71. Horton R. Trial registers: protecting patients, advancing trust.
porting of randomized trials as a measure of methodologic qua- Lancet. 2006;367:1633-5.
lity. JAMA. 2002;287:2801-4. 72. Abbasi K, Godlee F. Next steps in trial registration. Minimun cri-
53. Hewitt C, Hahn S, Torgerson DJ, Watson J, Bland JM. Ade- teria have been agreed, and intentions restated. BMJ.
quacy of reporting of allocation concealment: review of recent 2005;330:1222-3.
trials published in four general medical journals. BMJ. 2005; 73. Zarin DA, Tse T, Ide N. Trial registration at ClinicalTrials.gov
330:1057-8. between May and October 2005. N Engl J Med. 2005;353:
54. Hernndez AV, Boersma E, Murray GD, Habbema JD. Subgroup 2779-87.
analyses in the therapeutic cardiovascular clinical trials. Are most 74. Alfonso F, Bermejo J, Segovia J. Publicacin duplicada o re-
of them misleading? Am Heart J. 2006;151:257-64. dundante: podemos permitirnoslo? Rev Esp Cardiol. 2005;58:
55. Nuovo J, Melnikow J, Chang D. Reporting number needed to tre- 601-4.
at and absolute risk reduction in randomized controlled trials. 75. Alfonso F, Segovia J, Bermejo J. Revista Espaola de Cardiolo-
JAMA. 2002;287:2813-4. ga 2005: Actividad y Reconocimiento Cientfico. Rev Esp Car-
56. Altman DG. Endorsement of the CONSORT statement by high diol. 2005;58:601-4.
impact medical journals: survey of instructions to authors. BMJ. 76. Alfonso F, Bermejo J, Segovia J. Impactologa, impactitis, im-
2005;330:1056-7. pactoterapia. Rev Esp Cardiol. 2005;58:1239-45.

Rev Esp Cardiol. 2006;59(11):1206-14 1215

You might also like