Análise das publicações em Universidades
comentada em 12/08/2024 09:55

Pergunto porque não conheço muito bem. O quanto, na sua opinião, o impacto é influenciado pelo "nome" da Universidade (ao invés de apenas pela qualidade da publicação)?

Ah, muito interessante a imagem. Obrigado!

Talvez também seja influenciado pela língua. Publicações em inglês provavelmente são citadas no mundo todo.

Tem que lembrar que a USP tem uma quantidade razoável de cursos em ciências humanas que publicam muitas vezes o texto em português, espanhol e francês. As áreas de ciências exatas e biológicas por outro lado utilizam a língua inglesa. Dessa forma, deveriam separar isso.

Obs. a estatística aceita td, basta tortura-la.

@oxe Em "nada". Na pesquisa científica o impacto/qualidade é mensurado através basicamente dois principais fatores, revista na qual foi publicada e número de citações RELEVANTES. Com relação ao primeiro, para uma pesquisa ser aceita para publicação em uma revista ela passa por um clivo de pelo menos três avaliadores e um editor, quanto mais importante e consolidada a revista, maior a exigência por autenticidade/avanço científico alcançado pela pesquisa para que ela seja aceita. Seguindo a lógica, quanto mais inovadores forem os resultados alcançados por tal pesquisa, maior será a tendência de que novas pesquisem a citem, seja pela inovação alcançada, ou pela tentativa de progredir com os resultados preliminares que ela conseguiu obter... e quando falo citações relevantes, é fazendo referência a "quais revistas" estão os artigos que estão citando elas.

Pior de tudo é que no Brasil, como em várias outras áreas, há uma promoção da produção em massa de artigos, independente da relevância/qualidade do estudo, que é motivado principalmente por políticas totalmente non-sense do próprio MEC, dentre outras coisas. Daí o gap gigantesco entre "quantidade" e "relevância" na imagem com relação a USP.

Penso que uma variável a ser considerada é que as publicações nacionais sofrem com a barreira linguística e, querendo ou não, com o nível de prestígio internacional da Universidade.

Fiz pesquisa em uma Universidade Federal por alguns anos e uma coisa que eu não compreendia direito é a dependência que os cientistas do grupo de pesquisa tinha de ficar replicando ou reproduzindo, sem questionar, autores referências e novos estrangeiros, sobretudo de Universidades respeitadas.

Não posso afirmar, mas acredito que isso também influencie um pouco.

Triste realidade

Não existe barreira linguística com relação a pesquisa de alto impacto. Se ela é relevante, é praticamente necessário que ela esteja em inglês (raras exceções), pq mais de 98% dessas que são relevantes no mundo estão publicadas nesse idioma. Barreira de idioma só existe no BR e em países subdesenvolvidos (onde pesquisa é nula).

Posso falar pela área médica/da saúde. A maioria das publicações tem impacto baixo mesmo, produzindo muito pouco conhecimento novo. Tem muito lixo repetitivo publicado apenas para dar volume nos currículos dos pesquisadores. Claro que tem pesquisa séria, de ponta, mas infelizmente é a minoria.

@yurigoofy eu entendo essa lógica. Uma dúvida mais, se você puder me ajudar. Nessas revistas mais prestigiadas, a escolha da publicação é feita sem conhecimento de quem está publicando? Se for uma escolha "cega", realmente, acredito que nenhuma Universidade teria vantagem óbvia. A não ser por fatores como custo pra publicar ou domínio do inglês, que imagino não serem problemas tão grandes.

@oxe O fluxo é o seguinte: o(s) pesquisador(es) interessados enviam o artigo completo para a revista que eles desejarem tentar publicar -> o editor chefe da revista escolhe um editor de área (na qual o artigo de encaixa naquele escopo) e três avaliadores da área de países distintos -> cada avaliador e editor emite um parecer sobre a pesquisa (rejeitar, aceitar, aceitar com ressalvas). Tanto editor como os avaliadores não recebem os nomes dos pesquisadores e/ou universidade, apenas o CONTEÚDO da pesquisa.

No caso de ser rejeitado, os pesquisador(es) irão verificar os feedbacks recebidos e decidir o que fazem (geralmente submeter para uma outra revista). Receber um "rejeitado" não quer dizer que a pesquisa é ruim, apenas que a relevância/inovação alcançada nela não está "a altura" daquela revista que você está tentando, então o caminho mais usual seria esse grupo tentar submeter a pesquisa em uma revista "menos prestigiada" que a primeira. Ah... o editor e os avaliadores possuem seu anonimato mantido no feedback que os pesquisadores recebem. Obviamente tudo que tou falando se refere as práticas adotadas por boas revistas.

Os papers são sempre enviados com o local de trabalho e com os autores

@yurigoofy muito obrigado pela explicação. Sendo assim, concordo com você. Se o impacto é dado principalmente pela "relevância", que costuma estar atrelada à qualidade da revista; e se a escolha da publicação pelas revistas é feita sem conhecimento de quem é o pesquisador; então em princípio o "nome" do pesquisador não influenciaria no impacto da publicação. A menos que exista alguma interferência menos óbvia que eu não esteja enxergando.

@oxe sobre o domínio do inglês, quando falei que isso não é uma barreira, é pq se o pesquisador não dominar... é praticamente certo que a pesquisa não será de alto impacto, já que ele precisaria ler/reproduzir várias outras pesquisas publicadas que tb estarão em inglês. O inglês não é barreira para que se tenha uma publicação de alto impacto, é barreira para que se faça a pesquisa em si desde a concepção.

@hhh ah, a anomimização é posterior, então. Se é assim, talvez haja alguma interferência nesse processo descrito pelo yurigoofy entre o recebimento do paper pelo editor chefe e o envio para avaliadores/editor.

Tem que ver se esses estudos consideram apenas papers em revistas, pq na minha área, muitos papers são publicados em congressos. E como muitos congressos são nos EUA ou Europa, não da pra mandar os papers de todo mundo pq tem número limitado de passagens...

Isso pra empresas né, o ranking é de universidades...

@hhh se a pesquisa possui uma grande relevância certamente ela irá ser publicada em uma revista posteriormente, na íntegra ou em uma versão expandida, seja por submissão dos pesquisadores ou por convite

@yurigoofy sim, eu concordo sobre isso do inglês. Teria que ser uma pessoa genial que produza quase que do zero (o que deve ser praticamente impossível na maioria das situações, pelo que entendo de pesquisa) ou um campo do conhecimento que se desenvolva praticamente fora da língua inglesa (o que, se existir, deve ser bastante raro também).

Muito obrigado por todas as informações, esclareceu muita coisa.

@oxe o editor chefe também não recebe os nomes, ele é responsável por ver ql o editor de área adequado pra selecionar os avaliadores daquela pesquisa. Os nomes e a instituição vão em um arquivo separado.

Então não vejo falha no processo. A não ser que ocorra algum tipo de "corrupção", o que não deve existir, pelo próprio interesse da revista em manter seu prestígio. Agradeço novamente.

@oxe perfeito... tanto o prestígio das revistas como dos próprios editores e avaliadores (que precisam ser pesquisadores excepcionais para avaliar nelas). Nada, abs!!

Questão absurdamente complexa. O processo de revisão é realizado inicialmente pelo editor, que sabe a identidade do autor. Após aprovacao do editor o trabalho é enviado para revisores que quase sempre sabem a identidade do autor mas o inverso nao é verdadeiro (não double blind).

O mercado editorial cientifico é dominado por pouquíssimas empresas (e inclusive há boicotes enormes de importantes universidades). Além disso o processo de citações é extremamente vicioso. As revistas de alto impacto publicam estudos que tem potencial de citações e visibilidade e isso significa muitas vezes dar visibilidade a quem já tem visibilidade.

Métricas simples muitas vezes levam a conclusões simplistas e não necessariamente ligadas a valor. Ou seja esses gráficos comparativos dizem quase nada ou muito pouco.

Bem, vamos simplificar.

TODOS sabemos que as universidades americanas são excelentes, como vale também para praticamente qualquer universidade de país de primeiro mundo.

TODOS sabemos que as universidades brasileiras são um acumulo de lixo ideológico misturado à panfletagem politica, sem estrutura, com péssima gestão de verbas, pouco estimulo a produção de pesquisa séria, salvo rarissimas exceções de profissionais, que como bem diz o @Bastter, são o exemplo do burro.

Então não há surpresa na USP aparecer entre os primeiros em volume, afinal pra produzir volume até lixeira de papel higiênico produz :) e estar na rabeira em CONTEÚDO.

Escolha cega é teoria. Na prática, publicação é uma indústria

Boa noite! Você tem a fonte do gráfico?

"Academia is to knowledge what prostitution is to love" Taleb

Pessoal, todo editor ou banca tem conhecimento dos pesquisadores e instituições publicadoras em alguma fase do processo. Que isso interfere na aceitação final de um paper é um fato. Qualquer um que trabalha em meio acadêmico sabe disso e é muita inocência acreditar que essa escolha é cega. Mas acho que isso não é o principal fator em relação ao gap.

Essa diferença basicamente está sim na qualidade dos trabalhos, mas não em relação aos pesquisadores na minha opinião. Existe um diferença brutal em relação a investimentos, foco e cultura entre as instituições citadas e Brasil interferindo no incentivo e qualidade do projeto. Dificuldades burocráticas, pessoal, infraestrutura e financeira. Pesquisa não é barato!  Acho que nem dá para comparar...

Basicamente aqui dependemos, infelizmente, de iniciativa pública e convenhamos isso nunca foi uma prioridade para a União e não temos uma iniciativa privada igual nos EUA. Não sei como é na China, mas lá o ONREVOG provavelmente vê isso como muito importante, até como propaganda, e deve investir horrores.

Sinceramente, fico até feliz de ver a USP pelo menos figurar entre essas escolas de renome mundial diante de tantas adversidades.



Fonte: How much does your country invest in R&D?

@guimb "Todo editor ou banca tem conhecimento dos pesquisadores e instituições publicadoras em alguma fase do processo". Discordo amigo, talvez isso ocorra na sua área, na minha é completamente diferente. Atuo como editor ou avaliador em 6 das 10 principais revistas nas áreas de Engenharias II e III (de acordo com o IF), e não tenho acesso a tais informações em nenhuma delas. As únicas onde recebo essas informações são aquelas que tem IF baixo (e são uma pequena minoria), ou seja, nem entram nessa cota de pesquisa de impacto que o estudo considera. No restante concordo 100%. Abs.

Estudo falso é aceito para publicação em mais de 150 revistas científicas

Jornalistas publicam estudo falso sobre câncer e expõem falhas de revistas - 20/07/2018 - Ciência - Folha

Teve um outro estudo que infelizmente não encontrei em que, se não me engano, pesquisadores de renome mudaram os nomes e tentaram publicar um estudo que foi recusado por várias revistas. Depois eles reenviaram com seus nomes verdadeiros e o estudo foi aceito. É algo mais ou menos assim

@yurigoofy Olá, amigo.

Que bom que acontece dessa forma na sua área. Eu tenho alguma experiência com papers em saúde. Os avaliadores tem conhecimento dos pesquisadores e instituição associada invariavelmente em algum ponto do processo e infelizmente é um viés. É muito comum por exemplo citar o local do estudo no corpo do texto (introdução, metodologia etc) existindo "preconceito" contra estudos de países em desenvolvimento.

É muito frequente vermos trabalhos com temas e qualidade semelhantes sendo aceitos ou rejeitados de formas diferentes tanto internamente no Brasil (USP X resto do país) quanto lá fora.  Abraço