Narin, Capítulo VI

Operational Considerations
  • Este capítulo é dividido em diversas seções, tópicos e subtópicos. Comentarei cada um da mesma forma que no orignial. Algumas seções podem ser omitidas.
  • Devido a idade do texto, muitos aspectos estão datados ou podem estar desatualizados.;

1. Basics of Publication Citation Analysis
  • Tipo de publicação:
    • Narin comenta a importância da contagem. Em um contagem básica só levariamos em conta artigos, porém cartas, notas e reviews podem ter a mesma importância que um artigo dependendo do campo;
    • Para a maior parte dos campos a produção pode ser contatada pelos reviews e artigos, no entanto Narin afirma que nos campos da engenenharia é mais comum a comunicação em Meetings, seguidas por uma republicação em Proceedings, assim as apresentações nestes eventos devem ser contabilizadas. Para as áreas sociais é comum a publicação de livros, que são traduzidos em artigos pela técnica de weighting, já mencionada em um capítulo anterior;
  • Intervalo de tempo:
    • Para a análise de uma instituição, um ano é um intervalo apropriado;
    • Na comparação entre cientistas, deve-se ter o cuidado com o acúmulo de publicações e a queda das mesmas conforme a progressão da carreira. Narin diz que a idade profissional é normalmente contada a partir do PhD e ainda: "A typical scientist's first publication appears soon after his dissertation; if he continued working as a scientist, his publications may continue for thirty or more years.";
    • Narin diz que a contagem de publicação normalmente vem de fontes secundárias (geralmente Abstracts ou Indexing), assim é necessário o cuidado com a mudança de cobertura da fonte ao longo dos anos e a dissonância temporal entre a fonte e as publicações;
  • Autores e afiliações múltiplas:
    • Narin afirma que este é um dos principais problemas na avaliação de citações. Existem diferentes métodos de posicionamento de nomes nos artigos, segundo as diferentes revistas. A frequência de autoria múltipla é diferente para cada campo e para cada país. Lidamos com isso atribuindo uma porcentagem de citações a cada autor, 1/n, onde n é o número de autores;
    • Narin traz problemas importante a tona:
      • "Multiple authorship takes on particular importance when counting an individual's publications since membership on a large research team may lead to a single scientist being a co-author of ten or more publications per year."
    • Além disso, existe o "Problema do primeiro autor". A em artigos multiautorados a maioria das citações vai ao primeiro autor enquanto os demais autores raramente são citados. Devido a isso é importante que as citações ao primeiro autor de um artigo multiautorado sejam também catalogadas quando se está traçando a bibliometria de um segundo autor.
  • Completude dos dados disponíveis:
    • Mais um aspecto das fontes secundárias. Como Narin se refere aos serviços de indexação, geralmente voltados a bibliotecários, muitos dados são omitidos quando a publicação é catalogada;
  • Agradecimentos de apoio:
    • Narin diz que a maioria dos autores não lista suas fontes de financiamento, porém reconhece a tendência de que elas apareçam cada vez mais ao informar que em 1969 67% das revistas reconheciam financiamento e em 1972 esse número era 85%. Ele ainda diz que quanto menos prestigiosa a revista menor é o reconhecimento ao financiamento;
  • Classificação de assuntos:
    • Narin diz que classificar as revistas de acordo com o campo é o mais conveniente, porém com ressalvas:
      • "Such a classification implies, of course, a degree of homogeneity of publication which is normally adequate ehrn analyzing hundreds of papers. Such a classificiation may not be sufficient for the analysis of the scientific publications of one or a few individuals.";
    • O autor também comenta que os diferente Abstracts utilizam esquemas diferentes de classificação por assunto;
  • Contagem de citações:
    • Definida como:
      • "[...] measure of the utilization or influence of a single publication or of all the publications of an individual, a grant, contract, department, university, funding agency or country. Citation counts may be used to link individuals, institutions, and programs, since they show how one publication relates to another publication. In addition to these evaluative uses, citation also have important bibliometric uses, since the references from one paper to another define the structure of the sicentific literature. [...] The bibliometric characteristics of the literature also provide a numeric base against which evaluative paramaters may be normalized.
    • Narin ainda fornece um organograma do qual tira as seguintes conclusões:
      • Dispersão de referências: Uma medida da "dureza" de um campo científico, determina a concentração do campo em uma ou algumas poucas revistas de peso ou a difusão do campo;
      • Concentração de artigos e influência: Outra medida de "dureza", depende da estrutura literária do campo, ou seja, se ele possui ou não revistas fundamentais;
      • Relações de dependências hierárquica: Inclui a comparação do quanto que um grupo A se refere B versus o quanto que o grupo B se refere a A, a comparação, segundo Narin, fornece grandes justificativas para a pesquisa básica que é utilizada pela áreas aplicadas. Pode ser aplicada a campos, subcampos e revistas;
      • Conexões entre campos, subcampos e revistas: Medi o fluxo de informação e a importância de um grupo da estrutura científica analisada em relação a outra;
Organograma apresentado por Narin

2. An example of an evaluative bibliometric analysis
  • Nesta seção o autor utilizará um exemplo de pesquisa bibliométrica para demonstrar os passos, técnicas e problemas. Escolhi alguns conceitos interessantes para anotar aqui;
  • Em 1972, a NFS lançou um estudo que chegava a seguinte conclusão: "[...] the cost of scientific R&D is rising at a faster rate than inflation as measured by the Consumer Price Index. Research dollars received by researches buy less and less with the passage of time."
  • Curva de Lorenz: Ferramenta da economia que mede a distribuição de riqueza e renda de uma população. A linha diagonal define uma distribuição perfeita. Quanto maior a uniformidade menor a área sombreada da imagem.

  • Gini Index (GI): GI = 1 - 2 x (área abaixo da curva); O resultado zero indica distribuição uniforme perfeita e um indica concentração perfeita.

3. The Science Citation Index as a Publication and Citation Data Base
  • Narin considera o SCI como a base de dados mais aplicável e apropriada para trabalhos bibliométricos devido ao armazenamento abrangente dos dados das citações e publicações;
  • Desvantagens do SCI: 1) Falta de especificidade para cada campo, 2) Viés para publicações estadunidenses e 3) Complicações advindas do problema do primeiro autor;
  • O atraso temporal varia de 7% a 20% de artigos de um ano anterior cadastrados no ano seguinte;

4. Use of the Science Citation Index
  • O autor explica o Corporate Index, Source Index e o Citation Index do SCI;
  • Há uma seção intitulada "Special Problems in Citation Analysis on an Individual Author Basis" que terá seus tópicos listados aqui:
    • Autoria múltipla;
    • Autocitação: Narin afirma que "One of the most time consuming problems in citation analysis for individual authors is controlling for self citations". Esse problema possui dois desdobramentos que requerem metodologias diferentes.
      • Quando o cientista analisado é o primeiro autor;
      • Quando o cientista analisado não é o primeiro autor;
    • O problema dos homônimos;
    • Variação de citações por campo;
    • Flutuações de curto prazo: "The analyst has no way of being certain that the years chosen for a sample will present an adequate picture of an individual´s citation record [...]";
    • Nepotismo: O ponto mais interessante e requer o texto original para ser apreciado:
      • "If citation analysis becomes an accepted, universal method of evaluating research utilization, scientists may conspire with their colleagues to cite one another to effect an increase in their individual citation counts. If such "cronyism" becomes a widespread practice the total number of citations will increase [...] The problem will arise if cronyism occurs only in isolated instances. In an isolated instance, citation counts will be highly inflacted, leading to overestimates of the influence the scientist has in his field. When compiling citation counts, no way now existis to determine either the degree to which cronyism existis or the existence of cronyism as a factor in the count.";
      • Tantos pontos interessantes podem ser tirados destas palavras que ocopariam muito espaço deste post, assim deixo para meus futuros estudos as considerações adivindas deste trecho;
    • Escolha da base de dados;
    • Características da literatura científica peculiares aos campos:
      • Referências e citações: A ordem crescente de campos com maior taxa de referências é: Engenharia/Matemática/Tecnologia > Psicologia/Biologia > Ciências da Terra e do Espaço/Física/Química/Medicina clínica > Biomedicina;
      • Intervalos de tempo e taxas de crescimento: Narin comenta o que eu chamo de Estratigrafia da Ciência:
        • "The time distributions of references from any given year and the rate of growth of a given literature are intimately connected, since the fraction of the publications from more recent years would be increasing in a rapidly growing field. As a result, the average reference in such a field would tend to be a relatively recent publication."
      • Concentração: Os campos possuem diferentes níveis de concentração e influência entre as revistas. Um campo com alta concentração possui a maioria de suas publicações em poucas ou mesmo uma revista e campos com baixa concentração tem seus artigos e citações difusos por muitas revistas do campo. Um gráfico de concentração pode ser visto abaixo (Física é o mais concentrado e Medicina clínica o mais difuso);







Comentários

Postagens mais visitadas deste blog

O Evolucionista Voador - Costa

TS - Jia Ye (2021)

Brown Sequard