El Departamento de Defensa (DoD) de Estados unidos invertir\u00e1 7,6 millones de d\u00f3lares en el desarrollo de un sistema de inteligencia artificial capaz de evaluar la credibilidad de estudios en ciencias sociales y del comportamiento. Ese programa, bautizado con el nombre de Score, una sigla que en ingl\u00e9s significa Sistematizaci\u00f3n de la Confianza en Evidencias y en Investigaci\u00f3n Abierta, tendr\u00e1 una duraci\u00f3n de tres a\u00f1os. La meta del Pent\u00e1gono consiste en la creaci\u00f3n de una herramienta automatizada que le asigne una puntuaci\u00f3n a los resultados de las investigaciones cient\u00edficas en disciplinas tales como psicolog\u00eda, antropolog\u00eda y sociolog\u00eda, de acuerdo con un grado de confianza previamente estipulado. Esa clasificaci\u00f3n apunta a orientar a los usuarios de informaciones cient\u00edficas con respecto al nivel de incertidumbre de las conclusiones presentadas.<\/p>\n
Seg\u00fan el antrop\u00f3logo Adam Russell, quien se desempe\u00f1a como coordinador de la iniciativa, el Pent\u00e1gono aprovecha a menudo las evidencias recopiladas por soci\u00f3logos y psic\u00f3logos para elaborar planes relacionados con ciertos retos que se le plantean a la seguridad nacional, construir modelos que involucran sistemas sociales humanos y encauzar inversiones. \u201cCon todo, ciertos trabajos emp\u00edricos recientes y meta an\u00e1lisis revelan que la capacidad de reproducir o replicar esos resultados en forma independiente var\u00eda de manera dram\u00e1tica\u201d, escribi\u00f3 Russell, que ocupa el cargo de gerente de programas de la Darpa, la agencia de investigaciones del Pent\u00e1gono. El cient\u00edfico se refiere a lo que se denomina \u201ccrisis de reproducibilidad\u201d, una sucesi\u00f3n de casos de art\u00edculos cient\u00edficos, sobre todo en \u00e1reas tales como la medicina, ciencias de la vida y psicolog\u00eda, que cayeron en descr\u00e9dito porque sus resultados no pudieron confirmarse en experimentos ulteriores. Uno de los esc\u00e1ndalos tuvo como protagonista a Diederick Stapel, docente de psicolog\u00eda social en la Universidad de Tilburg, en Holanda, quien tuvo 30 art\u00edculos suyos retractados por manipulaci\u00f3n de datos<\/a>. Hace tres a\u00f1os, una colaboraci\u00f3n internacional para analizar estudios de psicolog\u00eda experimental solo pudo reproducir los resultados obtenidos en 36 de los 100 art\u00edculos evaluados.<\/p>\n El mes pasado, la Darpa anunci\u00f3 que el programa contar\u00e1 con la colaboraci\u00f3n del Centro para la Ciencia Abierta (COS, en ingl\u00e9s), una organizaci\u00f3n no gubernamental vinculada a la Universidad de Virginia que tiene experiencia en replicaci\u00f3n de experimentos cient\u00edficos. El COS se hizo conocido porque entre 2013 y 2018 comand\u00f3 la Iniciativa de Reproductibilidad, un esfuerzo para evaluar si 50 medicamentos potenciales contra el c\u00e1ncer, descritos en art\u00edculos cient\u00edficos, ten\u00edan alguna posibilidad de llegar a las farmacias. \u201cLos an\u00e1lisis sobre la credibilidad de las investigaciones cient\u00edficas pueden ayudar a los cient\u00edficos a seleccionar objetos de investigaci\u00f3n, a las agencias, en la toma de decisiones al respecto de qu\u00e9 financiar y a los formuladores de pol\u00edticas p\u00fablicas a elegir las mejores evidencias\u201d, dijo el bi\u00f3logo Tim Errington, investigador del COS.<\/p>\n El objetivo no consiste en sustituir al hombre por m\u00e1quinas, sino en combinar el trabajo ambos, dice el antrop\u00f3logo Adam Russell<\/p><\/blockquote>\n El programa Score estar\u00e1 dividido en cuatro fases. En primera instancia se montar\u00e1 un banco de datos con los resultados de alrededor de 30 mil art\u00edculos cient\u00edficos, que tambi\u00e9n acopiar\u00e1 evidencias extra\u00eddas de los propios papers<\/em> e informaciones de otras fuentes, tales como la cantidad de citas recibidas por cada trabajo, si sus datos primarios se encuentran disponibles p\u00fablicamente y si la investigaci\u00f3n fue previamente registrada, una garant\u00eda de que no se alter\u00f3 la hip\u00f3tesis a testear durante el desarrollo del experimento. Esta etapa contar\u00e1 con la colaboraci\u00f3n de investigadores de las universidades de Siracusa y de Pensilvania. A continuaci\u00f3n, se seleccionar\u00e1n 3 mil de esos art\u00edculos que ser\u00e1n analizados exhaustivamente por expertos, atribuy\u00e9ndole a cada uno una puntuaci\u00f3n conforme a la posibilidad aparente de que sus resultados puedan replicarse.<\/p>\n La idea es prestarle especial atenci\u00f3n a los par\u00e1metros que se relacionan con la calidad de los resultados, tales como el tama\u00f1o de las muestras, eventuales conflictos de intereses, reputaci\u00f3n del autor y de su instituci\u00f3n madre, entre otros. Una vez hecho eso, los procedimientos utilizados por los expertos para puntuar a cada art\u00edculo ser\u00e1n analizados por cient\u00edficos de la computaci\u00f3n y servir\u00e1n como base para la creaci\u00f3n de algoritmos que reproduzcan en forma autom\u00e1tica el m\u00e9todo adoptado. Finalmente, equipos de investigadores intentar\u00e1n reproducir los experimentos de esos 3 mil art\u00edculos con el objetivo de evaluar si el algoritmo es capaz de predecir si son o no replicables. \u201cLa propuesta no se reduce a sustituir hombres por m\u00e1quinas, sino a encontrar la mejor manera de combinar el trabajo de ambos\u201d, le dijo Russell a la revista Nature<\/em>.<\/p>\n Naturalmente, existen riesgos de fracaso. La Iniciativa de Reproductibilidad liderada por el COS moviliz\u00f3 a decenas de equipos cient\u00edficos y acab\u00f3 generando resultados limitados. Las dificultades para poder reunir las condiciones apropiadas motivaron que el programa fuera cancelado luego de analizar menos de la mitad de los 50 estudios previstos. De cualquier manera, de una tanda inicial de 10 estudios que se analizaron, tan solo cinco pudieron considerarse fidedignos y con el resto se arrib\u00f3 a resultados inconclusos o negativos. Adam Russell, el coordinador del Score, tiene experiencia en proyectos con ese tipo de complejidad. Antes de trabajar en el DoD, fue administrador de programas en Iarpa, una agencia vinculada a la oficina del director nacional de inteligencia de Estados Unidos, especializada en proyectos de alto riesgo involucrando innovaciones. Este organismo financia investigaciones en empresas y universidades que involucran a expertos en matem\u00e1tica, ciencias de la computaci\u00f3n, neurociencia y psicolog\u00eda cognitiva, entre otras \u00e1reas.<\/p>\n Para el psic\u00f3logo Brian Nosek, docente de la Universidad de Virginia y l\u00edder del COS, existe la posibilidad de que el esfuerzo fracase y el programa falle en su objetivo de aportar una perspectiva fiel acerca de la credibilidad de las investigaciones cient\u00edficas en el caso de que no logre generar un banco de datos s\u00f3lido o realizar experimentos de reproducci\u00f3n de alta calidad. De todos modos, considera que el riesgo vale la pena. \u201cCualquiera sea el resultado vamos a aprender mucho sobre los procesos de la ciencia y c\u00f3mo mejorarlos\u201d.<\/p>\n","protected":false},"excerpt":{"rendered":"El Pent\u00e1gono desarrollar\u00e1 una herramienta para predecir si los resultados de investigaciones en ciencias sociales y del comportamiento son fidedignos","protected":false},"author":11,"featured_media":278327,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"_exactmetrics_skip_tracking":false,"_exactmetrics_sitenote_active":false,"_exactmetrics_sitenote_note":"","_exactmetrics_sitenote_category":0,"footnotes":""},"categories":[178],"tags":[299],"coauthors":[98],"class_list":["post-323658","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-buenas-practicas","tag-etica-es"],"acf":[],"_links":{"self":[{"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/posts\/323658","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/users\/11"}],"replies":[{"embeddable":true,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/comments?post=323658"}],"version-history":[{"count":5,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/posts\/323658\/revisions"}],"predecessor-version":[{"id":325635,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/posts\/323658\/revisions\/325635"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/media\/278327"}],"wp:attachment":[{"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/media?parent=323658"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/categories?post=323658"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/tags?post=323658"},{"taxonomy":"author","embeddable":true,"href":"https:\/\/revistapesquisa.fapesp.br\/es\/wp-json\/wp\/v2\/coauthors?post=323658"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}