Resultados completos da análise
Estatísticas descritivas
- No momento, nossa lista de periódicos potencialmente predatórios tem 2290 títulos, sendo: 1312 títulos isolados (standalone) da lista de Beall, 202 de editoras indicadas na lista de Beall que estão na base SCOPUS e 782 da editora OMICS.
- Do total de títulos da OMICS, 5 estavam na lista de standalone de Beals e 1 na SCOPUS entre os publicados por editoras na lista de Beals.
- Entre os potenciais predatórios que constam na SCOPUS, 60 foram cancelados da base em 2017. Uma nota na base de dados da SCOPUS informa que estes títulos “do not meet the Scopus quality criteria anymore and therefore Scopus discontinued the forward capturing”.
- A base QUALIS 2013-2016 tem 26477 titulos, dos quais 485 (1.8%) estão na lista de potenciais predatórios que compilamos.
- Os periódicos potencialmente predatórios presentes na QUALIS correspondem a 21.2% da lista que compilamos.
Áreas de avaliação CAPES e suas divisões
Na avaliação 2013-2016 os programas foram divididos em 49 áreas, reunidas em 9 grande áreas e três colégios (ciências da vida, exatas e humanas). A classificação de cada área em básica ou aplicada é nossa, para algumas análises estatísticas (mais abaixo).
Tabela 1: Áreas da avaliação CAPES 2013-2016. A última coluna foi acrescentada por nós e não faz parte da classificação CAPES.Colégio | Gde área | Área | Básica/Aplic. |
---|---|---|---|
ENGENHARIAS I | EXATAS | ENGENHARIAS | APPLIED |
ENGENHARIAS II | EXATAS | ENGENHARIAS | APPLIED |
ENGENHARIAS III | EXATAS | ENGENHARIAS | APPLIED |
ENGENHARIAS IV | EXATAS | ENGENHARIAS | APPLIED |
ASTRONOMIA / FÍSICA | EXATAS | EXATAS E TERRA | BASIC |
CIÊNCIA DA COMPUTAÇĂO | EXATAS | EXATAS E TERRA | BASIC |
GEOCIÊNCIAS | EXATAS | EXATAS E TERRA | BASIC |
MATEMÁTICA / PROBABILIDADE E ESTATÍSTICA | EXATAS | EXATAS E TERRA | BASIC |
QUÍMICA | EXATAS | EXATAS E TERRA | BASIC |
BIOTECNOLOGIA | EXATAS | MULTIDISCIPLINAR | APPLIED |
CIÊNCIAS AMBIENTAIS | EXATAS | MULTIDISCIPLINAR | APPLIED |
ENSINO | EXATAS | MULTIDISCIPLINAR | APPLIED |
INTERDISCIPLINAR | EXATAS | MULTIDISCIPLINAR | APPLIED |
MATERIAIS | EXATAS | MULTIDISCIPLINAR | APPLIED |
ANTROPOLOGIA / ARQUEOLOGIA | HUMANIDADES | HUMANAS | BASIC |
CIÊNCIA POLÍTICA E RELAÇƠES INTERNACIONAIS | HUMANIDADES | HUMANAS | BASIC |
CIÊNCIAS DA RELIGIĂO E TEOLOGIA | HUMANIDADES | HUMANAS | BASIC |
EDUCAÇĂO | HUMANIDADES | HUMANAS | BASIC |
FILOSOFIA | HUMANIDADES | HUMANAS | BASIC |
GEOGRAFIA | HUMANIDADES | HUMANAS | BASIC |
HISTÓRIA | HUMANIDADES | HUMANAS | BASIC |
PSICOLOGIA | HUMANIDADES | HUMANAS | BASIC |
SOCIOLOGIA | HUMANIDADES | HUMANAS | BASIC |
ARTES / MÚSICA | HUMANIDADES | LETRAS E ARTES | BASIC |
LETRAS / LINGUÍSTICA | HUMANIDADES | LETRAS E ARTES | BASIC |
ADMINISTRAÇĂO PÚBLICA E DE EMPRESAS, CIÊNCIAS CONTÁBEIS E TURISMO | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
ARQUITETURA, URBANISMO E DESIGN | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
COMUNICAÇĂO E INFORMAÇĂO | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
DIREITO | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
ECONOMIA | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
PLANEJAMENTO URBANO E REGIONAL / DEMOGRAFIA | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
SERVIÇO SOCIAL | HUMANIDADES | SOCIAIS APLICADAS | APPLIED |
CIÊNCIA DE ALIMENTOS | VIDA | AGRÁRIAS | APPLIED |
CIÊNCIAS AGRÁRIAS I | VIDA | AGRÁRIAS | APPLIED |
MEDICINA VETERINÁRIA | VIDA | AGRÁRIAS | APPLIED |
ZOOTECNIA / RECURSOS PESQUEIROS | VIDA | AGRÁRIAS | APPLIED |
BIODIVERSIDADE | VIDA | BIOLÓGICAS | BASIC |
CIÊNCIAS BIOLÓGICAS I | VIDA | BIOLÓGICAS | BASIC |
CIÊNCIAS BIOLÓGICAS II | VIDA | BIOLÓGICAS | BASIC |
CIÊNCIAS BIOLÓGICAS III | VIDA | BIOLÓGICAS | BASIC |
EDUCAÇĂO FÍSICA | VIDA | SAÚDE | APPLIED |
ENFERMAGEM | VIDA | SAÚDE | APPLIED |
FARMÁCIA | VIDA | SAÚDE | APPLIED |
MEDICINA I | VIDA | SAÚDE | APPLIED |
MEDICINA II | VIDA | SAÚDE | APPLIED |
MEDICINA III | VIDA | SAÚDE | APPLIED |
NUTRIÇĂO | VIDA | SAÚDE | APPLIED |
ODONTOLOGIA | VIDA | SAÚDE | APPLIED |
SAÚDE COLETIVA | VIDA | SAÚDE | APPLIED |
Números por área de avaliação
A proporção de títulos potencialmente predatórios por área é pequena, mas ainda assim varia em uma ordem de grandeza, o que indica tendências diversas dos programas de pós-graduação de cada área em publicar nestes periódicos:
Tabela 2: Número de periódicos e de potencialmente predatórios, por área de avaliação. Também indicadas os percentuais do total de títulos potencialmente predatórios e potencialmente predatórios classificados nos estratos A e B. As área estão em ordem crescente da proporção de potenciais predatórios classificados nos estratos A ou B.
Área | Total | Pot. Pred. | % Pred. | %Pred.A-B |
---|---|---|---|---|
HISTÓRIA | 2155 | 1 | 0.05 | 0.05 |
LETRAS / LINGUÍSTICA | 2720 | 5 | 0.18 | 0.07 |
DIREITO | 2111 | 5 | 0.24 | 0.09 |
FILOSOFIA | 1116 | 1 | 0.09 | 0.09 |
SOCIOLOGIA | 1987 | 5 | 0.25 | 0.10 |
COMUNICAÇĂO E INFORMAÇĂO | 1640 | 8 | 0.49 | 0.12 |
SERVIÇO SOCIAL | 739 | 6 | 0.81 | 0.14 |
ARTES / MÚSICA | 889 | 3 | 0.34 | 0.22 |
GEOCIÊNCIAS | 1368 | 12 | 0.88 | 0.22 |
MATEMÁTICA / PROBABILIDADE E ESTATÍSTICA | 1335 | 13 | 0.97 | 0.22 |
ANTROPOLOGIA / ARQUEOLOGIA | 1301 | 4 | 0.31 | 0.23 |
CIÊNCIAS DA RELIGIĂO E TEOLOGIA | 412 | 1 | 0.24 | 0.24 |
SAÚDE COLETIVA | 3325 | 55 | 1.65 | 0.30 |
GEOGRAFIA | 1576 | 12 | 0.76 | 0.38 |
BIODIVERSIDADE | 3293 | 72 | 2.19 | 0.39 |
EDUCAÇĂO | 3619 | 21 | 0.58 | 0.41 |
CIÊNCIA DE ALIMENTOS | 1364 | 53 | 3.89 | 0.44 |
CIÊNCIA POLÍTICA E RELAÇƠES INTERNACIONAIS | 1344 | 10 | 0.74 | 0.52 |
ADMINISTRAÇĂO PÚBLICA E DE EMPRESAS, CIÊNCIAS CONTÁBEIS E TURISMO | 3089 | 17 | 0.55 | 0.55 |
ENGENHARIAS I | 2097 | 47 | 2.24 | 0.57 |
ASTRONOMIA / FÍSICA | 1683 | 24 | 1.43 | 0.59 |
CIÊNCIAS BIOLÓGICAS II | 3417 | 86 | 2.52 | 0.61 |
CIÊNCIA DA COMPUTAÇĂO | 1696 | 42 | 2.48 | 0.71 |
CIÊNCIAS BIOLÓGICAS I | 3400 | 96 | 2.82 | 0.71 |
ARQUITETURA, URBANISMO E DESIGN | 1118 | 16 | 1.43 | 0.81 |
PSICOLOGIA | 2677 | 25 | 0.93 | 0.82 |
CIÊNCIAS AMBIENTAIS | 4110 | 70 | 1.70 | 0.83 |
QUÍMICA | 2392 | 84 | 3.51 | 0.84 |
ENGENHARIAS III | 3357 | 108 | 3.22 | 0.86 |
ENGENHARIAS IV | 2290 | 66 | 2.88 | 0.87 |
CIÊNCIAS BIOLÓGICAS III | 2119 | 64 | 3.02 | 0.99 |
ECONOMIA | 1466 | 22 | 1.50 | 1.02 |
MEDICINA I | 4448 | 130 | 2.92 | 1.03 |
ENSINO | 2597 | 41 | 1.58 | 1.04 |
INTERDISCIPLINAR | 9629 | 159 | 1.65 | 1.20 |
FARMÁCIA | 2822 | 106 | 3.76 | 1.24 |
BIOTECNOLOGIA | 3827 | 131 | 3.42 | 1.33 |
PLANEJAMENTO URBANO E REGIONAL / DEMOGRAFIA | 1745 | 29 | 1.66 | 1.38 |
MEDICINA II | 4417 | 120 | 2.72 | 1.65 |
ENFERMAGEM | 1656 | 38 | 2.29 | 1.69 |
MEDICINA III | 1761 | 47 | 2.67 | 1.76 |
ZOOTECNIA / RECURSOS PESQUEIROS | 1389 | 35 | 2.52 | 1.80 |
EDUCAÇĂO FÍSICA | 1978 | 49 | 2.48 | 1.87 |
CIÊNCIAS AGRÁRIAS I | 3374 | 78 | 2.31 | 1.93 |
NUTRIÇĂO | 1256 | 36 | 2.87 | 2.31 |
ODONTOLOGIA | 1998 | 67 | 3.35 | 2.35 |
MATERIAIS | 1503 | 45 | 2.99 | 2.53 |
ENGENHARIAS II | 2362 | 97 | 4.11 | 2.58 |
MEDICINA VETERINÁRIA | 1871 | 69 | 3.69 | 2.99 |
Distribuição dos predatórios nos estratos QUALIS
Em tese, o estrato C do QUALIS é destinado aos periódicos que não devem ser considerados na avaliação. Muitas áreas explicitam que incluem neste estrato periódicos que não seguem boas práticas editoriais, em alguns casos citando os parâmetros de boas práticas da COPE (https://publicationethics.org/).1
No entanto, 325 dos 485 periódicos potencialmente predatórios no QUALIS foram classificados nos estratos A e B por pelo menos uma área. Assim, periódicos potencialmente predatórios estão presentes em todos os estratos, como mostra a tabela a seguir:
Tabela 3: Percentual de predatórios entre periódicos em cada estrato QUALIS. Indicados a média do percentual sobre as 49 áreas de avaliação, bem como os percentuais mínimos e máximos.
Estrato | Média | Mínimo | Máximo |
---|---|---|---|
A1 | 0.2 | 0 | 1.4 |
A2 | 0.5 | 0 | 2.1 |
B1 | 0.5 | 0 | 2.5 |
B2 | 0.8 | 0 | 2.9 |
B3 | 1.2 | 0 | 4.1 |
B4 | 1.8 | 0 | 10.8 |
B5 | 2.4 | 0 | 9.2 |
C | 12.2 | 0 | 70.6 |
Probabilidade de classificação de um predador no estrato QUALIS C
Há grande variação entre as áreas quanto à proporção de potenciais predatórios classificados no estrato C:
Tabela 4: Número de periódicos potencialmente predatórios e percentual destes classificados no estrato QUALIS C, por área de avaliação. As áreas estão agregadas por grande área e então ordenadas pela proporção de potenciais predatórios classificados no estrato C.Gde Área | Área | Total | % em C |
---|---|---|---|
AGRÁRIAS | CIÊNCIAS AGRÁRIAS I | 78 | 16.7 |
AGRÁRIAS | MEDICINA VETERINÁRIA | 69 | 18.8 |
AGRÁRIAS | ZOOTECNIA / RECURSOS PESQUEIROS | 35 | 28.6 |
AGRÁRIAS | CIÊNCIA DE ALIMENTOS | 53 | 88.7 |
BIOLÓGICAS | CIÊNCIAS BIOLÓGICAS III | 64 | 67.2 |
BIOLÓGICAS | CIÊNCIAS BIOLÓGICAS I | 96 | 75.0 |
BIOLÓGICAS | CIÊNCIAS BIOLÓGICAS II | 86 | 75.6 |
BIOLÓGICAS | BIODIVERSIDADE | 72 | 81.9 |
ENGENHARIAS | ENGENHARIAS II | 97 | 37.1 |
ENGENHARIAS | ENGENHARIAS IV | 66 | 69.7 |
ENGENHARIAS | ENGENHARIAS III | 108 | 73.1 |
ENGENHARIAS | ENGENHARIAS I | 47 | 74.5 |
EXATAS E TERRA | ASTRONOMIA / FÍSICA | 24 | 58.3 |
EXATAS E TERRA | CIÊNCIA DA COMPUTAÇĂO | 42 | 71.4 |
EXATAS E TERRA | GEOCIÊNCIAS | 12 | 75.0 |
EXATAS E TERRA | QUÍMICA | 84 | 76.2 |
EXATAS E TERRA | MATEMÁTICA / PROBABILIDADE E ESTATÍSTICA | 13 | 76.9 |
HUMANAS | CIÊNCIAS DA RELIGIĂO E TEOLOGIA | 1 | 0.0 |
HUMANAS | FILOSOFIA | 1 | 0.0 |
HUMANAS | HISTÓRIA | 1 | 0.0 |
HUMANAS | PSICOLOGIA | 25 | 12.0 |
HUMANAS | ANTROPOLOGIA / ARQUEOLOGIA | 4 | 25.0 |
HUMANAS | EDUCAÇĂO | 21 | 28.6 |
HUMANAS | CIÊNCIA POLÍTICA E RELAÇƠES INTERNACIONAIS | 10 | 30.0 |
HUMANAS | GEOGRAFIA | 12 | 50.0 |
HUMANAS | SOCIOLOGIA | 5 | 60.0 |
LETRAS E ARTES | ARTES / MÚSICA | 3 | 33.3 |
LETRAS E ARTES | LETRAS / LINGUÍSTICA | 5 | 60.0 |
MULTIDISCIPLINAR | MATERIAIS | 45 | 15.6 |
MULTIDISCIPLINAR | INTERDISCIPLINAR | 159 | 27.0 |
MULTIDISCIPLINAR | ENSINO | 41 | 34.1 |
MULTIDISCIPLINAR | CIÊNCIAS AMBIENTAIS | 70 | 51.4 |
MULTIDISCIPLINAR | BIOTECNOLOGIA | 131 | 61.1 |
SAÚDE | NUTRIÇĂO | 36 | 19.4 |
SAÚDE | EDUCAÇĂO FÍSICA | 49 | 24.5 |
SAÚDE | ENFERMAGEM | 38 | 26.3 |
SAÚDE | ODONTOLOGIA | 67 | 29.9 |
SAÚDE | MEDICINA III | 47 | 34.0 |
SAÚDE | MEDICINA II | 120 | 39.2 |
SAÚDE | MEDICINA I | 130 | 64.6 |
SAÚDE | FARMÁCIA | 106 | 67.0 |
SAÚDE | SAÚDE COLETIVA | 55 | 81.8 |
SOCIAIS APLICADAS | ADMINISTRAÇĂO PÚBLICA E DE EMPRESAS, CIÊNCIAS CONTÁBEIS E TURISMO | 17 | 0.0 |
SOCIAIS APLICADAS | PLANEJAMENTO URBANO E REGIONAL / DEMOGRAFIA | 29 | 17.2 |
SOCIAIS APLICADAS | ECONOMIA | 22 | 31.8 |
SOCIAIS APLICADAS | ARQUITETURA, URBANISMO E DESIGN | 16 | 43.8 |
SOCIAIS APLICADAS | DIREITO | 5 | 60.0 |
SOCIAIS APLICADAS | COMUNICAÇĂO E INFORMAÇĂO | 8 | 75.0 |
SOCIAIS APLICADAS | SERVIÇO SOCIAL | 6 | 83.3 |
Congruência da avaliação entre áreas
Dos 485 periódicos potencialmente predatórios que encontramos no QUALIS, 377 foram avaliados por mais de uma área (77.7%). Destes, apenas 27.1% foram classificados no estrato “C” por todas as áreas que os avaliaram. Por outro lado, a maioria (80%) foi classificada no estrato C por pelo menos uma das áreas que os avaliou. A seguir a matriz de concordância entre áreas, para os periódicos potencialmente predatórios avaliados por mais de uma área:
Tabela 5: Melhor (colunas) e pior (linhas) classificação dos periódicos potencialmente predatórios que estão na base QUALIS e que foram avaliados por mais de uma área.
A1 | A2 | B1 | B2 | B3 | B4 | B5 | C | |
---|---|---|---|---|---|---|---|---|
B1 | 1 | 1 | 1 | 0 | 0 | 0 | 0 | 0 |
B2 | 0 | 0 | 1 | 3 | 0 | 0 | 0 | 0 |
B3 | 1 | 3 | 4 | 4 | 2 | 0 | 0 | 0 |
B4 | 0 | 3 | 1 | 0 | 1 | 1 | 0 | 0 |
B5 | 1 | 5 | 7 | 2 | 3 | 8 | 6 | 0 |
C | 4 | 8 | 16 | 14 | 20 | 75 | 79 | 102 |
Estimativas das probabilidades de classificação
Usamos modelos generalizados lineares (glm) para avaliar se a probabilidade de classificar um potencial predador no estrato C dependeria do colégio, grande área ou se a área é de pesquisa básica/aplicada. O modelo com menor perda de informação (menor AIC) foi o que considera apenas o efeito da área de avaliação.
AICc De | lta-AICc df | Ev | idence weights | |
---|---|---|---|---|
Área | -4615.0563 | 0.000 | 49 | 1 |
Gde Área | 335.6795 | 4950.736 | 9 | 0 |
Colégio + Básica/aplic | 342.3812 | 4957.437 | 4 | 0 |
Colégio * Básica/aplic | 343.7311 | 4958.787 | 6 | 0 |
Básica/aplic | 356.3866 | 4971.443 | 2 | 0 |
Colégio | 369.1173 | 4984.174 | 3 | 0 |
No-effect | 378.2152 | 4993.272 | 1 | 0 |
Ou seja, há tanta variação mesmo dentro de cada grande área e colégio que nenhum nível superior de classificação prevê bem a probabilidade de uma área classificar predatórios no estrato C.
A seguir os valores dessas proporções e seus intervalos de confiança, para as áreas com pelo menos cinco periódicos potencialmente predatórios.
Discusssão
- Uma proporção pequena do total de periódicos no QUALIS é potencialmente predatória. No entanto, a lista de potenciais predatórios que compilamos não está completa. Ainda assim, parece pouco provável que a proporção real de títulos potencialmente predatórios nos quais os programas de pós-graduação publicam chegue a 5%. Por outro lado, seria preciso avaliar a proporção do total de artigos que está nestes periódicos. Mais importante, apesar de baixa a proporção mostra que na maioria das áreas há pessoas que publicaram nestes veículos.
- Se a proporção de potenciais predatórios em relação ao total de títulos no QUALIS não é alarmante, a proporção que não é classificada no estrato C impressiona. A mediana do percentual de potenciais predatórios classificados como C é 50%. Ou seja, a maioria das áreas mantêm na avaliação cerca de metade do títulos potencialmente predatórios.
- Outro ponto importante é a grande heterogeneidade das áreas quanto a essa “detecção de potenciais predatórios”. Apesar disso, não há uma tendência clara entre agrupamentos dessa áreas, como grandes áreas, colégios ou áreas mais aplicadas e básicas. Isso acontece porque em quase todos estes grupos há pelo menos uma área que foge ao padrão. Por exemplo, na áreas de Ciências Agrárias, que têm em geral detecção baixa, a área de Alimentos mostra valores altos. Já entre as Engenharias, que têm valores mais altos, a área Engenharia II é discrepante.
- Assim, o sistema QUALIS é muito vulnerável a periódicos predatórios. Hipotetizamos que os critérios de classificação nos estratos das áreas não são suficientes para detectar predatórios, por duas razões principais: (i) critério para estratos altos focado no fator de impacto e (ii) critérios para estrato médio focado em presença em bases de indexação, número de artigos da área na revista e critérios subjetivos.
- No primeiro caso, em geral os estratos mais altos são definidos por ter fator de impacto medido pelo Journal Citation Reports (JCR) nos quartis mais altos de impacto dos periódicos da área. Isso pode excluir muitos títulos predatórios, mas alguns periódicos são suspeitos de serem predatórios justamente por práticas questionáveis para aumentar o seu fator de impacto. Dois casos famosos são Oncotarget e Aging, ambos da editora comercial Impact Journals , editados por Mikhail V. Blagosklonnye. A página da editora é vazia (http://www.impactjournals.com/) e há fortes indícios de que estes periódicos usem práticas condenáveis para aumentar impacto, sob o comando de Blagosklonnye 2. Estes dois periódicos e mais um da mesma editora, Genes & Cancer foram aclassificados nos estratos A e B1-B3 de várias áreas das Ciências da Vida. Buscamos agora exemplos análogos de outra áreas do conhecimento.
- No segundo caso, a inclusão de periódicos nos estratos mais baixos da faixa B, o critério de impacto no JCR é substituído ou ponderado pela mera presença em certas bases bibliográficas, além da WoS. SCOPUS, PubMed e Scielo são alguns exemplos. A presença de periódicos potencialmente predatórios mesmo em bases como a SCOPUS indica que este critério é problemático. Reforça este argumento que cerca de 30% dos títulos de editoras apontadas como predatórias na lista de Bealls foram retirados da SCOPUS em 2017. Muitas áreas também usam como critério adicional para pontuar no QUALIS o quanto a área publica no periódico, o que evidentemente tem potencial para retroalimentar o uso de periódicos predatórios. Por fim, há vários critérios mais subjetivos de importância dos periódicos, e que muitas vezes não estão claros nos documentos de avaliação.
- Um ponto importante é que a maioria dos periódicos potencialmente predatórios foi avaliada por mais de uma área, sendo que na maioria dos casos pelo menos uma área os classificou como “C”. Vale também notar que nos documentos de área ou de avaliação não há menção explícita a nenhum dos critérios usados pela lista de Bealls ou de outros autores e instituições para detectar periódicos predatórios.
- Também importante notar que o estrato C inclui periódicos sem evidências de práticas fraudulentas, e que apenas têm circulação restrita, baixa relevância e/ou baixo impacto para uma dada área.
Conclusões
- Baixa proporção de título potencialmente predatórios no QUALIS. Indica que o uso destes periódicos não é prática comum nos programas de pós-graduação.
- A eficiência para detectar periódicos potencialmente predatórios varia muito entre áreas, mas em geral é baixa.
- Assim, se por um lado periódicos potencialmente predatórios não são hoje um problema sério na pós-graduação brasileira, por outro há uma grande vulnerabilidade do sistema de avaliação da CAPES à invasão por este tipo de publicação.
Recomendações
- Criar uma categoria separada do estrato QUALIS C para periódicos potencialmente predatórios, com critérios mínimos de triagem deste tipo de publicação.
- Solicitar a todas as áreas de conhecimento que adotem e explicitem seus critérios específicos para identificar predatórios;
- Criar procedimento para verificar discrepâncias entre áreas quanto à classificação na categoria de potenciais predatórios.
As dez áreas com maior proporção de títulos potenciais predatórios no estrato C são Engenharias I-IV, Educação Física, Enfermagem, Materiais, Agrárias, Odontologia e Veterinária. Os documentos de avaliação das Engenharias I-III, Materiais e Enfermagem incluem explicitamente este critério de falta boas práticas para classificação no estrato C. A Veterinária usa estrato C na contabilização da produção discente, apesar de sete dos 20 periódicos neste estrato serem potencialmente predatórios. As restantes desta lista não mencionam e aparentemente não usam o estrato C em sua avaliação.↩
https://web.archive.org/web/20160420235706/https://scholarlyoa.com/2016/04/19/oncotargets-peer-review-is-highly-questionable/ , https://web.archive.org/web/20161224004259/https://scholarlyoa.com/2016/12/06/mikhail-blagosklonnys-journal-aging-a-review/, http://retractionwatch.com/2017/10/25/widely-used-u-s-government-database-delists-cancer-journal/ .↩