{"id":4777,"date":"2013-12-27T10:31:37","date_gmt":"2013-12-27T13:31:37","guid":{"rendered":"http:\/\/www.schwartzman.org.br\/sitesimon\/?p=4777"},"modified":"2022-10-03T20:56:46","modified_gmt":"2022-10-03T23:56:46","slug":"publicar-ou-morrer","status":"publish","type":"post","link":"https:\/\/www.schwartzman.org.br\/sitesimon\/publicar-ou-morrer\/","title":{"rendered":"Publicar ou morrer"},"content":{"rendered":"<div class='__iawmlf-post-loop-links' style='display:none;' data-iawmlf-post-links='[{&quot;id&quot;:460,&quot;href&quot;:&quot;https:\\\/\\\/archive.org\\\/details\\\/UsesAndAbusesOfEducationAssessmentsInBrazil&quot;,&quot;archived_href&quot;:&quot;&quot;,&quot;redirect_href&quot;:&quot;&quot;,&quot;checks&quot;:[],&quot;broken&quot;:false,&quot;last_checked&quot;:null,&quot;process&quot;:&quot;done&quot;}]'><\/div>\n<p><a href=\"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-content\/uploads\/2013\/12\/images.jpg\"><img loading=\"lazy\" decoding=\"async\" class=\"alignright size-full wp-image-4778\" src=\"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-content\/uploads\/2013\/12\/images.jpg\" alt=\"images\" width=\"270\" height=\"187\" \/><\/a>Na medida em que aumenta a import\u00e2ncia do conhecimento, em sua produ\u00e7\u00e3o, transmiss\u00e3o e uso, tamb\u00e9m aumenta a preocupa\u00e7\u00e3o com a maneira pela qual a produ\u00e7\u00e3o de conhecimento e a educa\u00e7\u00e3o s\u00e3o avaliados. Este tema foi objeto de mat\u00e9ria recente no\u00a0Suplemento Sobre Cultura da revista Ci\u00eancia Hoje, para o qual colaborei com uma nota que reproduzo abaixo. \u00a0Recentemente foi publicada uma importante &#8220;Declara\u00e7\u00e3o de S\u00e3o Francisco&#8221; sobre a avalia\u00e7\u00e3o da pesquisa, criticando o uso indiscriminado do chamado &#8220;fator de impacto&#8221; das revistas cient\u00edficas como crit\u00e9rio de avalia\u00e7\u00e3o, que pode ser assinada por pessoas que concordem com o seu teor. Para quem se interessar, publiquei tamb\u00e9m um artigo meses atr\u00e1s sobre os <a href=\"https:\/\/archive.org\/details\/UsesAndAbusesOfEducationAssessmentsInBrazil\" target=\"_blank\" rel=\"noopener\">usos e abusos \u00a0da avalia\u00e7\u00e3o \u00a0educacional no Brasil<\/a>, que est\u00e1 dispon\u00edvel em ingl\u00eas. Transcrevo abaixo a nota da revista <em>Ci\u00eancia Hoje<\/em> e uma tradu\u00e7\u00e3o do texto introdut\u00f3rio da Declara\u00e7\u00e3o de S\u00e3o Francisco (DORA),<\/p>\n<p><strong>Publicar ou perecer<\/strong><\/p>\n<p>A ideia de que cientistas e pesquisadores precisam ser avaliados por sua produtividade, e que essa produtividade se expressa em produtos tang\u00edveis \u2013 artigos, patentes e outros \u2013 \u00e9 correta. N\u00e3o h\u00e1 d\u00favida de que ela coloca os pesquisadores sob tens\u00e3o, mas isso \u00e9 parte da vida. N\u00e3o h\u00e1 nada de errado no \u2018produtivismo\u2019 \u2013 se esses profissionais querem ser financiados e sustentados pelo seu trabalho, n\u00e3o h\u00e1 de ser pelos seus belos olhos ou boas inten\u00e7\u00f5es. Eles precisam mostrar o que fazem.<\/p>\n<p>Existem, no entanto, alguns riscos importantes que surgem sem\u2022pre que se busca colocar essa ideia na pr\u00e1tica. O primeiro \u00e9 quando se toma uma tend\u00eancia geral \u2013 uma correla\u00e7\u00e3o \u2013 como v\u00e1lida e aplic\u00e1vel a situa\u00e7\u00f5es individuais. Dados mostram que os melhores pesquisadores publicam muito e s\u00e3o muito citados, mas podem existir aqueles com muitas publica\u00e7\u00f5es desinteressantes, e outros com poucas publica\u00e7\u00f5es e trabalhos, mas de grande impacto. A \u00fanica maneira de lidar com isso \u00e9 entender que o dado estat\u00edstico, o indicador, \u00e9 apenas um dado, que precisa ser interpretado caso a caso pelos pares. Quando pesquisadores ou departamentos de pesquisa s\u00e3o avaliados exclusivamente por seus indicadores, muitas vezes por pessoas ou institui\u00e7\u00f5es que nem sequer entendem do conte\u00fado dos trabalhos, a chance de erros \u00e9 muito grande.<\/p>\n<p>O segundo problema, bastante geral nas avalia\u00e7\u00f5es, \u00e9 quando o indicador passa a ser mais importante do que aquilo que ele deveria indicar. Se o que importa \u00e9 o n\u00famero de publica\u00e7\u00f5es e cita\u00e7\u00f5es, e n\u00e3o o que est\u00e1 sendo publicado ou citado, isso abre a porta para manipular os indicadores \u2013 dividir um artigo em tr\u00eas; dar prefer\u00eancia a projetos de curto prazo, em detrimento de projetos de dura\u00e7\u00e3o mais longa; aprender como escrever para agradar os editores das revistas, sem correr riscos; e combinar com os amigos cita\u00e7\u00f5es cruzadas \u2013 eu cito voc\u00ea, voc\u00ea me cita, e n\u00f3s dois subimos nos rankings.<\/p>\n<p>O terceiro problema \u00e9 o chamado \u2018efeito Mateus\u2019, descrito pelo soci\u00f3logo estadunidense Robert Merton (1910-2003) anos atr\u00e1s para descrever a concentra\u00e7\u00e3o da pesquisa nos principais centros e ao redor dos nomes mais famosos (\u201cao que tem, se lhe dar\u00e1 e ter\u00e1 em abund\u00e2ncia, mas ao que n\u00e3o tem ser\u00e1 tirado at\u00e9 mesmo o que tem\u201d \u2013 Mateus 13:2). Como os que mais t\u00eam trabalham e publicam em ingl\u00eas nas revistas mais famosas dos pa\u00edses centrais, ent\u00e3o mais vale colocar um artigo mais bem comportado junto a esses do que publicar um artigo mais brilhante e criativo em uma revista que ningu\u00e9m importante vai ler ou comentar.<\/p>\n<p>Existem outros riscos, como os de valorizar mais as publica\u00e7\u00f5es acad\u00eamicas do que os trabalhos aplicados, e a pesquisa p\u00fablica em detrimento da pesquisa industrial, ou supor que \u00e1reas de estudo e pesquisa como as ci\u00eancias sociais, as humanidades e as engenharias deveriam ter o mesmo padr\u00e3o de publica\u00e7\u00f5es do que as ci\u00eancias naturais.<\/p>\n<p>Nada disso significa que os indicadores de produtividade n\u00e3o sejam importantes, mas sim que eles n\u00e3o podem ser aplicados de forma burocr\u00e1tica e autom\u00e1tica. Em \u00faltima an\u00e1lise, indicadores de publica\u00e7\u00f5es e cita\u00e7\u00f5es n\u00e3o s\u00e3o dados \u2018objetivos\u2019, mas agrega\u00e7\u00f5es das avalia\u00e7\u00f5es subjetivas feitas pelos editores das revistas e pelos leitores dos artigos. Essa subjetividade n\u00e3o pode ser ignorada, mas precisa ser ponderada pelo ju\u00edzo cr\u00edtico dos pares que t\u00eam a responsabilidade de decidir sobre a qualidade e o futuro profissional de seus colegas em cada caso. \u00c9 como um m\u00e9dico que precisa usar de sua experi\u00eancia e do conhecimento do paciente para avaliar o resultado de um exame de laborat\u00f3rio; uma responsabilidade que n\u00e3o pode ser transferida a indicadores de nenhum tipo, por melhores que sejam.<\/p>\n<p><strong>Declara\u00e7\u00e3o de S\u00e3o Francisco (introdu\u00e7\u00e3o)<\/strong><\/p>\n<p>Os produtos da pesquisa cient\u00edfica s\u00e3o muitos e variados, e incluem artigos de pesquisa relatando novos conhecimentos, dados , reagentes e software; propriedade intelectual; e jovens cientistas altamente treinados. Ag\u00eancias de fomento, institui\u00e7\u00f5es que empregam cientistas e pr\u00f3prios cientistas, todos t\u00eam desejo e necessidade de avaliar a qualidade e o impacto de produtos cient\u00edficos. \u00c9, portanto, imperativo que a produ\u00e7\u00e3o cient\u00edfica seja medida com precis\u00e3o e avaliada com cuidado. O Fator de Impacto de Peri\u00f3dicos \u00e9 frequentemente utilizado como o principal par\u00e2metro com o qual se compara a produ\u00e7\u00e3o cient\u00edfica de indiv\u00edduos e institui\u00e7\u00f5es. O fator de impacto, calculado pela Thomson Reuters, foi originalmente criado como uma ferramenta para ajudar os bibliotec\u00e1rios a identificar revistas para comprar, e n\u00e3o como uma medida da qualidade cient\u00edfica da pesquisa em um artigo. Com isso em mente, \u00e9 fundamental entender que o fator de impacto tem \u00a0in\u00fameras defici\u00eancias bem documentadas que afetam seu uso como ferramenta para a avalia\u00e7\u00e3o da pesquisa. Estes limita\u00e7\u00f5es incluem: A) \u00a0as distribui\u00e7\u00f5es de cita\u00e7\u00f5es dentro das revistas s\u00e3o altamente enviesadas; B) a propriedades do fator de impacto s\u00e3o espec\u00edficas de cada campo, sendo compostos de diferentes tipos de artigos, incluindo trabalhos de pesquisa originais e resenhas da literatura; C) Os fatores de impacto podem ser manipulados (&#8220;gamed&#8221;) pelas pr\u00e1ticas editoriais das revistas; e D) dados utilizados para calcular os fatores de impacto n\u00e3o s\u00e3o transparentes nem abertamente dispon\u00edveis para o p\u00fablico.<\/p>\n<p>Varias recomenda\u00e7\u00f5es s\u00e3o apresentadas para melhorar a maneira pela qual os resultados da pesquisa devem ser avaliados. Outros produtos al\u00e9m de artigos de pesquisa ter\u00e3o import\u00e2ncia cada vez maior para a avalia\u00e7\u00e3o da efic\u00e1cia da pesquisa no futuro, mas os artigos de pesquisa avaliados por pares continuar\u00e3o sendo centrais nestas avalia\u00e7\u00f5es. Nossas recomenda\u00e7\u00f5es, portanto, se referem principalmente \u00e0s pr\u00e1ticas relacionadas aos artigos de pesquisa publicados em revistas com revis\u00e3o por pares, mas podem e devem ser ampliadas para reconhecer a import\u00e2ncia de produtos adicionais tais como bancos de dados. Estes recomenda\u00e7\u00f5es s\u00e3o destinadas a ag\u00eancias de fomento, institui\u00e7\u00f5es acad\u00eamicas, revistas, organiza\u00e7\u00f5es que fornecem m\u00e9tricas e pesquisadores individuais.<\/p>\n<p>Alguns temas centrais permeiam todas estas recomenda\u00e7\u00f5es:<\/p>\n<p>&#8211; A necessidade de eliminar o uso de m\u00e9tricas baseadas em revistas, como o fator de impacto, em decis\u00f5es de financiamento, \u00a0nomea\u00e7\u00e3o e promo\u00e7\u00e3o;<br \/>\n&#8211; A necessidade de avaliar a pesquisa em seus pr\u00f3prios m\u00e9ritos e n\u00e3o em fun\u00e7\u00e3o do revista em que a pesquisa foi publicada, e<br \/>\n&#8211; a necessidade de aproveitar as oportunidades oferecidas pela publica\u00e7\u00e3o on-line (inclusive ao reduzir os limites desnecess\u00e1rios sobre o n\u00famero de palavras, ilustra\u00e7\u00f5es e refer\u00eancias nos artigos, e explorar novos indicadores de import\u00e2ncia e impacto).<\/p>\n<p>Reconhecemos que muitas ag\u00eancias de fomento, institui\u00e7\u00f5es, editores e pesquisadores j\u00e1 est\u00e3o incentivando melhores pr\u00e1ticas de avalia\u00e7\u00e3o da pesquisa. Tais medidas est\u00e3o come\u00e7ando a aumentar o impulso em prol de abordagens mais sofisticadas e significativas que agora podem ser ser desenvolvidas e adotadas por todos os setores interessados.<\/p>\n<!-- AddThis Advanced Settings generic via filter on the_content --><!-- AddThis Share Buttons generic via filter on the_content -->","protected":false},"excerpt":{"rendered":"<p>Na medida em que aumenta a import\u00e2ncia do conhecimento, em sua produ\u00e7\u00e3o, transmiss\u00e3o e uso, tamb\u00e9m aumenta a preocupa\u00e7\u00e3o com a maneira pela qual a produ\u00e7\u00e3o de conhecimento e a educa\u00e7\u00e3o s\u00e3o avaliados. Este tema foi objeto de mat\u00e9ria recente no\u00a0Suplemento Sobre Cultura da revista Ci\u00eancia Hoje, para o qual colaborei com uma nota que &hellip; <a href=\"https:\/\/www.schwartzman.org.br\/sitesimon\/publicar-ou-morrer\/\" class=\"more-link\">Continue reading<span class=\"screen-reader-text\"> &#8220;Publicar ou morrer&#8221;<\/span><\/a><!-- AddThis Advanced Settings generic via filter on get_the_excerpt --><!-- AddThis Share Buttons generic via filter on get_the_excerpt --><\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_crdt_document":"","footnotes":""},"categories":[16],"tags":[],"class_list":["post-4777","post","type-post","status-publish","format-standard","hentry","category-ciencia-e-tecnologia"],"_links":{"self":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts\/4777","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/comments?post=4777"}],"version-history":[{"count":3,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts\/4777\/revisions"}],"predecessor-version":[{"id":7074,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/posts\/4777\/revisions\/7074"}],"wp:attachment":[{"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/media?parent=4777"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/categories?post=4777"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.schwartzman.org.br\/sitesimon\/wp-json\/wp\/v2\/tags?post=4777"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}