“Llegará el día en el que el pensamiento estadístico será una condición tan necesaria para la convivencia eficiente como la capacidad de leer y escribir” — H.G. Wells
Posts tagged General
El sofisma frecuentista
Apr 25th
Milan Kundera, “antiguo colaborador” expresa algunos de mis razonamientos en su magnífica obra: <<La Insoportable Levedad del Ser>>
Primero: definición del espacio muestral:
Existe en el reino de lo posible una cantidad infinita de amores no realizados por otros hombres.
Segundo: Definición del concepto de variable aleatoria y realización:
Hace siete años se produjo casualmente en el hospital de la ciudad de Teresa un caso de enfermedad cerebral… en la ciudad había cinco hoteles, pero Tomás fue a parar justo a aquel donde trabajaba Teresa, casualmente le sobró un poco de tiempo para ir al restaurante. Teresa casualmente estaba de servicio y casualmente atendió la mesa de Tomas, hizo falta que se produjeran seis casualidades para empujar a tomas hacia Teresa, como si él mismo no tuviera ganas.
Tercero: Teoría de los sucesos aleatorios y falencias frecuentistas:
¿Cómo podía saberlo? ¿Cómo podía comprobarlo? Cualquier colegial podía hacer experimentos durante la clase de física y comprobar si determinada hipótesis científica es cierta. Pero el hombre dado que vive sólo una vida, nunca tiene la posibilidad de comprobar una hipótesis mediante un experimento y por eso nunca llega a averiguar si debía haber prestado oído a un sentimiento o no…
El hombre nunca puede saber qué debe querer porque vive sólo una vida y no tiene modo de compararla con sus vidas precedentes ni enmendarla en sus vidas posteriores.
!!! Gracias Milan !!!
Confesión
Jul 22nd
Para mi colaborador anónimo PARCE …

Confieso que la estadística es muy densa, tanto así que escribir acerca de esta bella aventura se me antoja casi imposible, máxime con la idiosincrasia de los integrantes activos de nuestra pequeña comunidad de estadísticos. Sin embargo encuentro muchos colaboradores con los que me siento muy identificado, otros con lo que la afinidad va mermando con el paso del tiempo, algunos colaboradores que tal vez ya no están vivos, colaboradores que no me conocen (pero que yo quisiera conocer), colaboradores no estadísticos, colaboradores escépticos de la estadística, colaboradores mudos, colaboradores infinitos y colaboradores que con sus comentarios punzantes hacen que cada vez más quiera escribir. Qué bendición es la lectura… la lectura de blogs, revistas seriadas, libros clásicos, libros nuevos… sin esta clase de colaboración este blog no sería una realidad… sería un sueño en la mente de nosotros que queremos divulgar lo que en el camino hemos encontrado… y sería una frustración para aquellos que quieren criticar destructivamente.
Orhan Pamuk (premio nobel 2006) me colabora con el siguiente fragmento de su obra maestra El Libro Negro:
Galip recordó las noches en las que Celâl había hablado durante horas sobre el arte del pastiche, afirmando que era el único arte auténtico. Mientras Rüya picoteaba los pasteles que habían comprado por el camino, Celâl decía que había escrito muchas de sus columnas, quizá todas, gracias a la ayuda de otros, añadía que lo importante no era «crear» algo nuevo sino, cambiando un rinconcito, un extremo de las maravillas que miles de inteligencias habían creado previamente a lo largo de miles de años, poder decir algo completamente nuevo y afirmaba que todas sus columnas las había copiado de otros. Lo que le crispaba los nervios a Galip, haciéndole perder su fe optimista sobre la realidad de los objetos de la habitación y de los papeles sobre la mesa, no era descubrir que las historias que durante años había supuesto que eran de tal, pertenecían en realidad a otros, sino ciertas posibilidades a las que apuntaba aquella realidad.
Este blog es un elogio del pastiche, este blog no pretende ser una publicación seriada internacional, este blog procura dar a conocer el pensamiento estadístico de los autores que los autores leímos y que nos influencian… no confundirlo con una vulgar copia de otros interesantes blogs en materia estadística como los de Andrew Gelman o John Cook… no confundir el propósito del mismo… Qué viva el pastiche y que viva la divulgación estadística… qué viva la colaboración entre autores y que viva la crítica desviada de sus verdaderos propósito porque nos incentiva a investigar más, a divulgar los intrincados recodos del pensamiento estadístico.
Ehh lector!!! Una vez más rinde tributo a tus colaboradores que seguramente fueron ayudados por sus respectivos colaboradores anónimos… una vez más qué bendición es la lectura!!!
Gracias lectores, gracias por hacer de éste, el blog estadístico hispano más leído…
Estadística
Dec 23rd
“El futuro de la Estadística” por Bradley Efron.
Primero, Efron da una revisión al desarrollo acelerado de la Estadística en el último siglo. Él comenta que “La historia de la estadística en el siglo veinte está dada por la sorprendente y asombrosa historia de una colección de métodos numéricos caprichosos que se fusionan dentro de un vehículo central para el descubrimiento de la ciencia”.
Efron cita un ejemplo simple para ilustrar las limitaciones de la estadística clásica en los problemas concernientes a la selección de modelos y también hace un comentario, en forma figurativa, refiriéndose a que “La historia parece repetirse: hemos regresado a la era de procedimientos heurísticos promovidos con energía pero sin ninguna dirección”
Efron es un ejemplo interesante de un investigador estadístico que ha desarrollado y usado un conjunto diverso de herramientas como Bayes empírico basado en modelos y bootstrap no paramétrico o pruebas de permutaciones.
El vicio del pragmatismo en el desarrollo estadístico
Oct 29th
El pragmatismo es la noción de que el significado o valor de algo viene determinado por consecuencias prácticas. Se acerca bastante al utilitarismo, la creencia de que la utilidad es la medida de lo que es bueno. Para una persona pragmática o utilitaria, si una técnica o curso de acción tiene el efecto deseado, es bueno. Si no parece funcionar debe ser errado.… El pragmatismo tiene sus raíces en el darwinismo y en el humanismo. Posee un relativismo inherente que rechaza la noción de lo absoluto. En últimas define como verdadero todo aquello que es útil, lucrativo y ventajoso. Las ideas que no parecen viables son rechazadas como falsas.
Una vez más, imagínese el difícil trabajo de un estadístico zorro si pensara pragmáticamente… se quedaría frustrado con los mínimos cuadrados. El pragmatismo como examen de verdad debería tener menor peso en un ambiente de desarrollo académico en estadística porque los supuestos mismos en los que se basan la mayoría de los métodos estadísticos no pueden ser valorados por resultados porque incluso algunos ni siquiera son comparables.
Se debería dar una mayor ponderación al que a mi parecer es el único juicio de verdad admisible: la calidad y el buen desarrollo teórico de los métodos basados en sus supuestos.
Las estadísticas son zorras
Oct 7th
Los grandes científicos se dividen en dos clases, que Isaiah Berlín, citando al poeta Archilochus del siglo séptimo A.C., llamó zorros y erizos. Los zorros saben muchos trucos, los erizos solamente uno. Los zorros están interesados en todo y se mueven fácilmente de un problema a otro. Los erizos están interesados solamente en pocos problemas que consideren fundamentales, y trabajan con los mismos problemas por años o décadas. La mayor parte de los grandes descubrimientos son hechos por los erizos, la mayoría de los pequeños descubrimientos por los zorros.
La ciencia necesita de los erizos y de los zorros para su crecimiento sano: erizos para cavar profundamente en la naturaleza de cosas, zorros para explorar los detalles complicados de nuestro universo maravilloso
Albert Einstein era un erizo y Richard Feynman era un zorro.
Los principales estadísticos parecen haber trabajado en porciones de problemas grandes. Aunque sí tenemos unos cuantos erizos, las ideas sistemáticas desarrolladas a través de los años, se han convertido en una serie de útiles herramientas.
-
Laplace: posiblemente fuera un erizo en la teoría de las probabilidades, pero se conviertió en un zorro pues, con su trabajo en la estadística social (con encuestas), dió la motivación necesaria para desarrollar métodos bayesianos prácticos.
-
Gauss: los mínimos cuadrados son un gran logro. Estos se convirtieron en una herramienta matemática particular para solucionar algunos problemas del error de medida. En el contexto de su carrera, es un zorro.
-
Galton: se podría llamar un “erizo” por su obsesión con la regresión, pero pienso en él como un zorro.
-
Fisher: Es un zorro. Desarrolló métodos según lo necesitado.
-
Pearson: La familia de distribuciones huele a erizo, pero su legado, incluyendo las pruebas Ji, dan buenas pruebas de zorro.
-
Neyman: Quizás deseó ser un erizo, pero en última instancia era un zorro, él muchas hizo contribuciones a diversos problemas de estimación y juzgamiento de hipótesis.
¿Qué se puede decir sobre los principales estadísticos del siglo veinte?
Cox: zorro
Cochran: zorro
Tukey: estupendo zorro
Efron: zorro
Rubin: zorro
Tal vez, América Latina tendría un desarrollo significativo en materia de teoría y actualización estadística si fueramos un poco más zorros, si tuvieramos la mente abierta y nos permitieramos aprender cosas nuevas y aplicaciones desde otro punto de vista. Mi percepción es que la educación estadísitica tiene que ser integral, antes que nada somos estadísticos!!!
La gente no cree en cajas negras
Sep 19th
Profesores de Estadística
Facultad de Ciencias
Universidad Nacional de Colombia
Los dos más recientes directores del Departamento Nacional de Estadística, Dane, han renunciado de manera abrupta ante la sorpresa del país. En ambos casos, los directores han afirmado que su salida de la institución se relaciona con que al Gobierno Nacional no le satisface la información estadística que ha producido el Dane. Naturalmente, el Gobierno ha refutado estas versiones.
Más allá de la cuota de verdad en estas razones, es importante para el país enfrentar el debate permanente en que participan gremios, sindicatos, congreso e incluso algunas dependencias del mismo poder ejecutivo sobre la credibilidad de las cifras generadas por el Dane, más aún cuando el Director del Departamento que evalúa el desempeño del Gobierno a través de estadísticas es nombrado por el mismo Gobierno.
Este no es un fenómeno exclusivo de Colombia. Viendo las cosas en perspectiva, en casi todas partes y en forma recurrente ocurren este tipo de crisis. Lo definitivo no es dejarlas de lado, sino enfrentarlas.
La academia y los diversos institutos colombianos de investigación no han podido acceder a la información detallada ni a las metodologías empleadas en la realización del Censo Nacional de Población y Vivienda 2005, por cuanto la dirección del Dane, alegando que debe mantenerse confidencialidad estadística y protegerse la identidad de las fuentes de información, no ha entregado el llamado microdato.
No es cierto que se quiebre la confidencialidad estadística cuando se entrega el microdato. Por el contrario, con él y con las metodologías empleadas en la generación de las cifras se gana transparencia. La metodología de generación de indicadores de empleo no está disponible en la página web del Dane, por lo que para los académicos no es posible opinar sobre la integridad del método y la consistencia de los resultados.
Las metodologías de producción de cifras críticas para la generación de políticas públicas deben ser accesibles a la comunidad científica nacional, que constituye una masa crítica suficiente para garantizar en permanente revisión de la idoneidad de los métodos. La falta de transparencia mina la credibilidad del sistema.
Ante esta situación, profesores de estadística de la Universidad Nacional de Colombia proponen que se cambie la dirección del Dane, no el director, ni las características del director, sino que la cabeza del sistema estadístico nacional sea manejada de manera técnica y colegiada, para que así sea menos vulnerable a los avatares de la vida política y a los caprichos de un director transitorio.
El caso del censo 2005 alarma sobre la vulnerabilidad del Dane ante el manejo de un director: profundos cambios metodológicos se introdujeron en esta medición trascendental para el país, perdiendo comparabilidad con censos anteriores. Gran cantidad de recursos económicos, logísticos, informativos y una tradición estadística fueron puestos a disposición de una única persona.
No se cuestionan aquí los resultados del censo, ya se afirmó que datos y método aún son una caja negra, sino la vulnerabilidad del sistema estadístico y la falta de consistencia y continuidad de procesos, dados los cambios abruptos que genera un director, con un poder desmesurado sobre la institución, que toma decisiones unipersonales.
Profesores de estadística de la UN no están de acuerdo con lo propuesto por algunos líderes de opinión sobre que el Dane sea totalmente independiente del Gobierno Nacional. Primero, porque la generación de este tipo de cifras es obligación del Estado y porque la tendencia mundial indica que las instancias generadoras de estas cifras suelen estar vinculadas de manera directa con los gobiernos.
Lo que se propone aquí es que la conducción del Dane sea colegiada, con una Junta Directiva cuyos miembros sean idóneos técnicos conocedores de muestreo, encuestas, modelación de series temporales, medición de cambio de precios, modelos de evaluación, cuentas nacionales, modelos econométricos e indicadores de empleo, entre otros.
El Director del Dane, nombrado por el Presidente de la República, sería el Secretario General de esta Junta Directiva en la que no debe existir prevalencia de intereses sectoriales, ni políticos, sino un compromiso técnico que permita continuidad, consistencia y comparabilidad en la información generada por el sistema estadístico nacional, que mantenga una comunicación transparente y clara con los usuarios de los datos estadísticos: Estado, gremios y sociedad civil.
La declaración de Estambul
Sep 10th

Hace unos días llegó a mi correo, a través de la CCE (gran ausente en este blog), una carta abierta … de funcionarios del DANE. Ésta era una carta anónima que denunciaba, entre otros, la manipulación y el encubrimiento del micro dato. Aunque no estoy de acuerdo con el anonimato, sí estoy de acuerdo en que las estadísticas oficiales son un bien de dominio público. Los funcionarios y directivos de esta institución pueden tomarse unos minutos y revisar la declaración de Estambul (2007) y sobre todo aprenderse los principios fundamentales de las estadísticas oficiales (1994).
-
animar a las comunidades para que consideren, para sí mismos, lo que significa el “progreso” en el siglo XXI;
-
compartir las mejores prácticas en la medición del progreso social y aumentar el conocimiento de la necesidad de hacerlo con metodologías sanas y confiables;
-
estimular el debate internacional, basado en datos estadísticos sólidos e indicadores, en aplicaciones globales como el progreso y las comparaciones sociales del progreso;
-
producir una comprensión más amplia, compartida y de dominio público sobre las condiciones cambiantes, y destacar las áreas de cambio significativo o de conocimiento inadecuado;
-
abogar por la inversión apropiada en capacidad de construcción estadística, especialmente en países en vía de desarrollo, para mejorar la disponibilidad de los datos y de los indicadores necesitados para dirigir programas e informar sobre el desarrollo del progreso hacia metas internacionales, tales como las metas del desarrollo del milenio.”
Mejor dicho, ni mandado a hacer !!!
Introducción
Sep 2nd
Cualquier idea interesante con su contraparte práctica será publicada, específicamente trataremos temas de metodologías de muestreo, modelos lineales, estadística bayesiana y computacional, series de tiempo, y métodos multivariados.
Por supuesto, los comentarios que incentiven, corrijan y sugieran soluciones serán muy bien recibidos. Este blog es posible gracias al compromiso de profesionales en estadística con una amplia experiencia práctica y académica.








Comentarios