Professional Documents
Culture Documents
Copia para uso personal, se prohbe la transmisin de este documento por cualquier medio o formato.
Original
Vicedireccin de Docencia e Investigacin, Centro Nacional de Informacin de Ciencias Mdicas, La Habana, Cuba
Vicedireccin de Servicios Informativos Especiales, Centro Nacional de Informacin de Ciencias Mdicas, La Habana, Cuba
r e s u m e n
Objetivos: Discutir conceptualmente la pertinencia de las demandas prevalecientes acerca de lo que debe
de muestra en estudios publicados, y aquilatar el grado
comunicarse sobre la determinacin del tamano
en que tales demandas son satisfechas por autores y exigidas por rbitros y editores.
Mtodos: Se llev adelante una bsqueda bibliogrca con el n de conocer y debatir crticamente los
razonamientos que pudieran haberse expuesto para respaldar la norma segn la cual los autores deben
muestral. A continuacin se valor el cumplimiento de dicha norma en los artculos
justicar el tamano
originales publicados a lo largo de 2009 en las seis revistas de ms alto factor de impacto en el campo de
la salud.
muestral empleado
Resultados: Las razones esgrimidas para respaldar la exigencia de explicar el tamano
resultan escasas y endebles, a la vez que hay no pocas razones para no suscribirlas. Se constat que dicha
pauta es mayoritariamente ignorada en la literatura actual de mayor impacto. En el 56% (intervalo de
empleado y slo el 27%
conanza del 95% [IC95%]: 52-59) de los artculos no se fundamenta el tamano
(IC95%: 23-30) cumple con todas las exigencias de las guas a las que se adhieren las propias revistas
estudiadas.
Conclusiones: El estudio permite concluir que no hay argumentos convincentes para exigir que en un
muestral. Tal exigencia carece de utilidad y
artculo publicado se explique cmo se lleg a cierto tamano
no promueve, sino que ms bien menoscaba, la transparencia del reporte de las investigaciones.
2011 SESPAS. Publicado por Elsevier Espaa, S.L. Todos los derechos reservados.
Palabras clave:
de muestra
Tamano
Gua
Ensayo clnico controlado
Estadsticas
Artculo de revista
Objectives: To discuss the theoretical relevance of current requirements for explanations of the sample
sizes employed in published studies, and to assess the extent to which these requirements are currently
met by authors and demanded by referees and editors.
Methods: A literature review was conducted to gain insight into and critically discuss the possible rationale underlying the requirement of justifying sample sizes. A descriptive bibliometric study was then
carried out based on the original studies published in the six journals with the highest impact factor in
the eld of health in 2009.
Results: All the arguments used to support the requirement of an explanation of sample sizes are feeble,
and there are several reasons why they should not be endorsed. These instructions are neglected in most
of the studies published in the current literature with the highest impact factor. In 56% (95%CI: 52-59)
of the articles, the sample size used was not substantiated, and only 27% (95%CI: 23-30) met all the
requirements contained in the guidelines adhered to by the journals studied.
Conclusions: Based on this study, we conclude that there are no convincing arguments justifying the
requirement for an explanation of how the sample size was reached in published articles. There is no
sound basis for this requirement, which not only does not promote the transparency of research reports
but rather contributes to undermining it.
2011 SESPAS. Published by Elsevier Espaa, S.L. All rights reserved.
Introduccin
La inferencia estadstica se ha ido agenciando un papel particularmente relevante en el contexto de la investigacin clnica y
0213-9111/$ see front matter 2011 SESPAS. Publicado por Elsevier Espaa, S.L. Todos los derechos reservados.
doi:10.1016/j.gaceta.2012.01.017
Documento descargado de http://www.elsevier.es el 19/02/2013. Copia para uso personal, se prohbe la transmisin de este documento por cualquier medio o formato.
54
Mtodos
Con el n de identicar los trabajos en que se aborda la nece de la muestra
sidad de exponer cmo se determin el tamano
se realiz una bsqueda bibliogrca en las bases especializadas
EBSCO, PUBMED y MEDLINE usando sample size y sin imponer restricciones temporales. A partir de esa informacin se identicaron
los razonamientos que pudieran haberse esgrimido para respaldar
Resultados
Fundamentacin de las exigencias vigentes
Goodman y Berlin14 , si bien enfatizan que la aparicin de los
muestral carece de
clculos realizados para determinar el tamano
utilidad alguna a los efectos de interpretar los resultados, esbozan
algunas razones que pudieran justicarla. Sostienen que la comunicacin de dichos detalles pudiera dar una idea de la calidad de
la planicacin y de la ejecucin de la investigacin, la cual podra
muestral planicado a priori con el
vericarse cotejando el tamano
anadido
como posible alerta, ya que en caso de faltar esta informacin, los lectores deben interpretar cautelosamente los resultados
reportados. Anaden
que negarse a reportar el clculo del tamano
muestral indicara una ingenuidad metodolgica que pudiera
senalar
otros problemas.
El otro polo del debate se expresa embrionariamente en algunos
artculos recientes16-18 en los cuales se ha comenzado a reaccionar
contra los rituales arraigados en esta materia. En los dos primeros
que las convenciones actuales en cuanto
se reexiona sobre el dano
muestral producen al proceso de investigacin; se fundaal tamano
menta que los informes de estudios completos no deberan incluir
muestral,
la informacin relativa a cmo se determin el tamano
dado que su exigencia promueve la interpretacin incorrecta de los
Documento descargado de http://www.elsevier.es el 19/02/2013. Copia para uso personal, se prohbe la transmisin de este documento por cualquier medio o formato.
Artculos examinados
(%)
Total
An Intern Med
BMJ
JAMA
Lancet
New Engl J Med
PloS Med
Total
73
169
158
129
176
49
754
(80)
(69)
(90)
(76)
(78)
(64)
(77)
91
244
175
169
226
77
982
estudios, inhibe la innovacin, erosiona la integridad de los investigadores que recurren con frecuencia a una variedad de estrategias
de muestra
manipuladoras de los clculos para justicar un tamano
que fue realmente elegido por otros motivos, y provee a los revisores de un poder arbitrario. El tercero advierte de que este poder
es especialmente bienvenido por las grandes empresas farmacuticas, que cincelan la idea de que los esfuerzos que no salen de
grandes estudios (que slo ellos pueden realizar) son intiles.
Bacchetti19 alerta sobre un importante problema derivado de
esta exigencia formal: el efecto negativo que su vigencia suele tener
en el proceso de revisin por pares de los artculos. Apoyados en
muestral,
la ambigedad inherente a la planicacin del tamano
y no pocas
los revisores pudieran siempre objetar dicho tamano,
veces lo hacen, incluso sin invocar argumento alguno o esgrimiendo
los que dimanan de su propia subjetividad.
Informacin sobre la determinacin del tama
no de muestra en las
revistas de alto impacto
2009 se publicaron 982 artculos originales en
Durante el ano
las seis revistas mdicas seleccionadas. Tras aplicar los criterios de
exclusin establecidos, se mantuvieron para el anlisis 754 (77%)
(tabla 1). El anlisis se realiz sobre estos 754 trabajos, entre los que
predominaban los estudios observacionales, que ascendieron a 415
(55%); de los otros 339, de naturaleza experimental, 327 (97%) eran
ensayos clnicos controlados aleatorizados.
Se delimit el grado en que los artculos que se publican en la
actualidad cumplen las dos exigencias establecidas por las revistas:
muestral y que se den los
que se explique cmo se arrib al tamano
datos necesarios para que el lector pueda corroborar los clculos.
En el 56% (IC95%: 52-59) de los trabajos no se ofrecan razones
de muestra anunciado. Con excepcin
que justicasen el tamano
de una de las seis revistas estudiadas (Lancet), en menos de la
muestral. La ausenmitad de los artculos se justica el tamano
cia de justicacin fue notablemente mayor entre los trabajos
observacionales (92%; IC95%: 89-94) que entre los experimentales
(12%; IC95%: 8-15) (tabla 2).
muestral, el
De los 333 artculos en que se justicaba el tamano
98% empleaba frmulas con ese n, y de stos (327) eran observacionales 34 y ensayos clnicos 293. Slo en 16 de los primeros (47%;
IC95%: 45-49) y en 143 de los segundos (49%; IC95%: 43-55) se
comunicaron todos los datos necesarios para reproducir el clculo.
55
Este es el panorama general, pero no todas las revistas examinadas hacen las mismas exigencias: si bien las seis emplean CONSORT
para los ensayos clnicos, ni JAMA ni New Engl J Med se adhieren
explcitamente a STROBE para los observacionales. Tal circunstancia determina que slo para 564 de los 754 artculos estudiados
puede examinarse el grado en que las revistas son consecuentes
Tabla 2
de muestra, segn tipo de estudio y revista. Ano
2009
Artculos examinados en que no se justica el tamano
Revista
An Intern Med
BMJ
JAMA
Lancet
New Engl J Med
PloS Med
Total
Observacionales
Experimentales
Totales
No se justica
(%)
Total
No se justica
(%)
Total
No se justica
40
110
90
40
69
32
381
(98)
(96)
(84)
(85)
(97)
(94)
(92)
41
115
107
47
71
34
415
3
1
3
6
22
5
40
(9)
(2)
(6)
(7)
(21)
(33)
(12)
32
54
51
82
105
15
339
43
111
93
46
91
37
421
(%)
(59)
(66)
(59)
(36)
(52)
(76)
(56)
Total
IC95%
73
169
158
129
176
49
754
48-70
59-73
51-67
27-44
44-59
63-88
52-59
Documento descargado de http://www.elsevier.es el 19/02/2013. Copia para uso personal, se prohbe la transmisin de este documento por cualquier medio o formato.
56
contribuyendo a la perpetuacin del uso ritual de procedimientos estadstico-metodolgicos. Como consecuencia, la demanda
que estamos valorando podra generar ms problemas de los
que resuelve en lo que se reere al reporte transparente de la
investigacin16 .
El cumplimiento en la prctica de lo pautado acerca de lo que
muestral ha
supuestamente ha de comunicarse sobre el tamano
recientes, en especial en
sido examinado en profundidad en anos
el rea de los ensayos clnicos. Es notable el grupo de trabajos
muestral
que encuentran prevalencias de justicacin del tamano
muy bajas. Un repaso a los ms recientes arroja unas altas tasas de
incumplimiento en el marco de los ensayos clnicos (nunca inferiores al 50% y con frecuencia por encima del 70%). En el ms reciente
muesde ellos, Hopewell et al29 hallaron que el clculo del tamano
tral se explicaba slo en el 45% de los informes de ensayos clnicos
indexados en PubMed en 2006, mientras que, en este mismo tipo
muestral se
de estudios, Mills et al30 encuentran que el tamano
justica en apenas una quinta parte de los 116 que haban sido
indexados en 2002, y Charles et al31 observan un patrn similar.
Tal panorama concuerda por completo con lo hallado en la presente
investigacin.
Si nos cenimos
a los artculos que incluyen las frmulas emplea muestral, una fraccin muy notable
das para llegar al tamano
reporta de manera incompleta los datos necesarios para corroborar dicho clculo. Esencialmente, el mismo patrn se expresa con
32,33 . De nuevo, nuestros
regularidad a lo largo de los ltimos anos
datos se ajustan en su totalidad a ese patrn en lo que concierne
a los estudios experimentales. La literatura consultada no aborda
el tema para los estudios observacionales, para los cuales nuestro
estudio encuentra incumplimientos muchsimo mayores. Tal realidad puede deberse a que la insistencia en la necesidad de justicar
los tamanos,
aunque gura como demanda en STROBE, ha sido histricamente mucho menor, y a que la controvertida idea de que de
cada trabajo aislado hay que sacar una conclusin tiene muchsimo
menos arraigo.
de la muestra en
En resumen, la justicacin del tamano
la investigacin sanitaria contempornea aparece escasamente y
con mucha frecuencia de manera incompleta en los artculos. Es
un hecho que ni revisores ni editores toman muy en serio la
obligacin de explicar en los trabajos cientcos cmo determi de la muestra, aun cuando ello gura en las guas
naron el tamano
de publicacin a las que se adhieren las propias revistas biomdicas
que acogen los trabajos.
muestral no se justique en ms de la mitad
Que el tamano
de las publicaciones ms encumbradas de la investigacin sanitaria contempornea constituye un indicio de que tal informacin
es esencialmente estril, y conrma de manera indirecta su naturaleza superua. Si fuera realmente necesario o importante, slo
excepcionalmente se permitira tal violacin. Pero el hecho es que
se trata de una informacin que no agrega nada sustantivo a lo que
informa el trabajo sobre la pregunta que ste procura responder, ni
a la valoracin de su calidad.
muestral es crucial para
El modo en que se arrib a un tamano
quien ha de decidir si el trabajo se hace o no, si se nancia o no.
es algo ya consumado y lo que
Pero, una vez realizado, el tamano
interesa al lector es saber qu puede sacar en limpio de lo que objetivamente se ha hecho, no las motivaciones que pudo haber para
tomar una u otra decisin (sea del investigador o del nanciador)
real haya sido
en esta materia. Bien pudiera ocurrir que el tamano
la mitad de lo inicialmente deseado en virtud de limitaciones nancieras; o que fuera el triple, debido a que el autor decidi emplear el
Documento descargado de http://www.elsevier.es el 19/02/2013. Copia para uso personal, se prohbe la transmisin de este documento por cualquier medio o formato.
Conclusiones
La demanda de explicar en un artculo publicado cmo se lleg
muestral (incluida en las guas de publicacin a
a cierto tamano
las que se adhieren la mayora de las revistas biomdicas) carece
(5 anos).
Qu anade el trabajo realizado a la literatura?
Lo que se anade
en esencia es un juicio conceptualmente
fundamentado acerca de por qu determinadas prcticas rituales, aunque estn extendidas, deberan ser erradicadas. Se
introducen elementos no tratados anteriormente en torno a
este asunto. En cuanto a la zona emprica, se hacen un examen
general (todo tipo de estudios) y un escrutinio exhaustivo de
lo publicado en poca muy reciente (2009) en las seis revistas
de ms alto impacto.
Contribuciones de autora
Los dos autores contribuyeron por igual en todos los aspectos
del trabajo.
Financiacin
Ninguna.
Conictos de intereses
Ninguno.
57
Bibliografa
1. Silva LC. Cultura estadstica e investigacin cientca en el campo de la salud:
una mirada crtica. Madrid: Daz de Santos; 1997. p. 390.
2. Gigerenzer G, Krauss S, Vitouch O. The null ritual: what you always wanted to
know about signicance testing but were afraid to ask. En: Kaplan D, editor.
The handbook of methodology for the social sciences. Thousand Oaks, CA: Sage
Publications; 2004. p. 391408.
3. Silva LC. Una ceremonia estadstica para identicar factores de riesgo. Salud
Colectiva. 2005;1:30922.
4. Gore S, Jones IG, Rytter EC. Misuses of statistical methods: critical assessments
of articles in BMJ from January to March, 1976. BMJ. 1977;1:85.
5. Silva LC. Los laberintos de la investigacin biomdica. En defensa de la racionalidad para la ciencia del siglo XXI. Madrid: Daz de Santos; 2009. p. 492.
6. Matthews RA. Facts versus factions: the use and abuse of subjectivity in scientic
research. European Science and Environment Forum Working Paper; reprinted in Rethinking Risk and the Precautionary Principle. Morris J, editor. Oxford:
Butterworth; 2000.
7. Ioannidis JPA. Why most published research ndings are false? PLoS Med.
2005;2:e124.
8. Fernandes S, Hyun HK, Reeder RN, et al. Common statistical and research design
problems in manuscripts submitted to high-impact medical journals. BMC Res
Notes. 2011;4:304.
9. Schulz KF, Altman DG, Moher D, for the CONSORT Group. CONSORT 2010 statement: updated guidelines for reporting parallel group randomised trials. BMJ.
2010;340:c332.
10. Vandenbroucke JP, von Elm E, Altman DG, et al. Strengthening the reporting of
observational studies in epidemiology (STROBE): explanation and elaboration.
PLoS Med. 2007;4:e297.
razonado de muestras y captacin de datos para la investigacin
11. Silva LC. Diseno
sanitaria. Madrid: Daz de Santos; 2000. p. 332.
12. Thomson Scientic Institute of Scientic Information. Journal Citation Reports.
2009. (Consultado el 10/12/2011.) Disponible en: http://thomsonreuters.com/
products services/science/science products/a-z/journal citation reports