Avaliação da qualidade de conferências científicas através da visibilidade na Web

Abstract

Com o aumento constante dos eventos científicos realizados surge a necessidade de se ter uma ferramenta para auxiliar na avaliação desses eventos de maneira rápida e precisa a fim de evidenciar a sua qualidade. A tarefa de avaliação atualmente em uso tem alta probabilidade de falhas e geralmente envolve muito trabalho humano afetando o custo. Assim, este trabalho apresenta um estudo das principais métricas para avaliação de conferências científicas utilizadas. Essas métricas foram separadas em dois grupos. O primeiro, estuda as características internas, os chamados indicadores bibliométricos, e o segundo grupo analisa a perspectiva externa, ou seja, os indicadores de visibilidade na web. A partir deste estudo, apresenta-se um modelo para avaliação de Conferências Científicas, na área de Ciência da Computação, com o principal objetivo de gerar um indicador de qualidade, analisando múltiplos critérios, tais como a quantidade de citações dos artigos daquela conferência e a quantidade de links que a apontam e utilizando as tecnologias web disponíveis para obtenção dos dados. Este modelo tem o objetivo de contribuir para o processo de avaliação de conferências de uma maneira mais transparente. O resultado do ranking indicado pelo modelo é gerado a partir de dados obtidos das conferências científicas. Nos experimentos, foi possível observar o novo ranking dessas conferências baseados na visibilidade na web como uma nova maneira para medir a qualidade das conferências, podendo demonstrar que este método é adequado.

With the steady increase of the number of scientific conferences it is necessary the existence of a tool to assist the quality evaluation of these events in a quick and accurate manner. The manual assessment task presently in use has a high probability of failures and the huge human work needed affects its cost. For that reason this work presents a study and the application of the main metrics for evaluating scientific conferences. These metrics were separated into two groups: the first studies the internal features, the bibliometric indicators, and the second group analyzes the external perspective or the visibility indicators in the web. From this study, we developed a model for the evaluation of Scientific Conferences in Computer Science with the main objective of generating a quality indicator, analyzing multiple criteria such as the number of citations of articles that conference and the number of links that point and using the web technologies available for data collection. This model is intended to contribute to the evaluation process of conferences in a more clear and explicit way. The result of the ranking is generated from the obtained data of the scientific conferences. In these experiments, it was possible to verify the new ranking of these conferences based on the visibility in the web as a useful way for measuring the quality of the conference and thus demonstrating the suitability of this method.