9.1: Manejo de Datos

Última actualización
Guardar como PDF

Page ID: 150621

\( \newcommand{\vecs}[1]{\overset { \scriptstyle \rightharpoonup} {\mathbf{#1}} } \) \( \newcommand{\vecd}[1]{\overset{-\!-\!\rightharpoonup}{\vphantom{a}\smash {#1}}} \)\(\newcommand{\id}{\mathrm{id}}\) \( \newcommand{\Span}{\mathrm{span}}\) \( \newcommand{\kernel}{\mathrm{null}\,}\) \( \newcommand{\range}{\mathrm{range}\,}\) \( \newcommand{\RealPart}{\mathrm{Re}}\) \( \newcommand{\ImaginaryPart}{\mathrm{Im}}\) \( \newcommand{\Argument}{\mathrm{Arg}}\) \( \newcommand{\norm}[1]{\| #1 \|}\) \( \newcommand{\inner}[2]{\langle #1, #2 \rangle}\) \( \newcommand{\Span}{\mathrm{span}}\) \(\newcommand{\id}{\mathrm{id}}\) \( \newcommand{\Span}{\mathrm{span}}\) \( \newcommand{\kernel}{\mathrm{null}\,}\) \( \newcommand{\range}{\mathrm{range}\,}\) \( \newcommand{\RealPart}{\mathrm{Re}}\) \( \newcommand{\ImaginaryPart}{\mathrm{Im}}\) \( \newcommand{\Argument}{\mathrm{Arg}}\) \( \newcommand{\norm}[1]{\| #1 \|}\) \( \newcommand{\inner}[2]{\langle #1, #2 \rangle}\) \( \newcommand{\Span}{\mathrm{span}}\)\(\newcommand{\AA}{\unicode[.8,0]{x212B}}\)

“Dados suficientes globos oculares, todos los bichos son superficiales”.

—Eric S. Raymond

Hemos hablado sobre los errores comunes que cometen los científicos, y cómo la mejor manera de detectarlos es un poco de escrutinio externo. La revisión por pares proporciona parte de este escrutinio, pero un revisor por pares no tiene tiempo para reanalizar ampliamente los datos y leer el código en busca de errores tipográficos; los revisores solo pueden verificar que la metodología tenga sentido. A veces detectan errores obvios, pero generalmente se pasan por alto problemas sutiles. ⁵²

Es por ello que muchas revistas y sociedades profesionales requieren que los investigadores pongan sus datos a disposición de otros científicos que lo soliciten. Los conjuntos de datos completos suelen ser demasiado grandes para imprimirlos en las páginas de una revista, por lo que los autores reportan sus resultados y envían los datos completos a otros científicos si solicitan una copia. Quizás encuentren un error o un patrón que los científicos originales se perdieron.

O así va en teoría. En 2005, Jelte Wicherts y colegas de la Universidad de Ámsterdam decidieron analizar cada artículo reciente en varias revistas destacadas de la American Psychological Association para conocer sus métodos estadísticos. Eligieron la APA en parte porque requiere que los autores acepten compartir sus datos con otros psicólogos que busquen verificar sus afirmaciones.

De los 249 estudios para los que buscaron datos, sólo habían recibido datos de 64 seis meses después. Casi tres cuartas partes de los autores del estudio nunca enviaron sus datos. ⁶¹

Por supuesto, los científicos son personas ocupadas, y tal vez simplemente no tuvieron tiempo para compilar sus conjuntos de datos, producir documentos que describan lo que significa cada variable y cómo se midió, y así sucesivamente.

Wicherts y sus colegas decidieron que probarían esto. Revisaron todos los estudios buscando errores comunes que pudieran detectarse al leer el artículo, como resultados estadísticos inconsistentes, mal uso de diversas pruebas estadísticas y errores tipográficos ordinarios. Al menos la mitad de los trabajos tuvieron un error, generalmente menor, pero\(15\)% reportó al menos un resultado estadísticamente significativo que solo fue significativo por un error.

A continuación, buscaron una correlación entre estos errores y una falta de voluntad para compartir datos. Había una relación clara. Los autores que se negaron a compartir sus datos tenían más probabilidades de haber cometido un error en su trabajo, y su evidencia estadística tendió a ser más débil. ⁶⁰ Debido a que la mayoría de los autores se negaron a compartir sus datos, los Wicherts no pudieron indagar en busca de errores estadísticos más profundos, y muchos más pueden estar al

Esto ciertamente no es una prueba de que los autores ocultaron sus datos por temor a que sus errores puedan ser descubiertos, o incluso que los autores supieran de los errores en absoluto. La correlación no implica causalidad, pero sí mueve las cejas sugestivamente y hace gestos furtivos mientras habla de “mirar hacia allá”. \(^{[1]}\)

Notas al pie

[1] Broma descaradamente robada del texto alterno de http://xkcd.com/552/.