An evaluation of methods for modelling distribution of Patagonian insects

Abstract

Varios estudios han mostrado que el desempeño de los modelos de distribución puede variar dependiendo de la especie modelizada, el área de estudio o el número de localidades de presencia utilizadas, sugiriendo que es necesario evaluar cuál es la mejor técnica de modelización en cada situación concreta. En este estudio evaluamos distintas técnicas de modelización para la distribución de los insectos patagónicos. Hemos aplicado ocho de los métodos más ampliamente usados (redes neuronales, BIOCLIM, árboles de clasificación y regresión, DOMAIN, Modelos Aditivos Generalizados, GARP, Modelos Lineares Generalizados y Maxent) a los datos de distribución de diez especies de insectos patagónicos, comparando su efectividad mediante cinco medidas diferentes. Para evitar el problema de la carencia de datos de ausencia fiables con los que evaluar los modelos, hemos utilizado pseudoausencias seleccionadas al azar fuera de un área poligonal definida por taxónomos expertos. Nuestros análisis muestran diferencias significativas entre los distintos métodos de modelización dependiendo de la medida de validación utilizada. Maxent es el método que ofrece mejores resultados para cuatro de las cinco medidas de validación utilizadas, aunque su precisión no difiere de la obtenida con redes neuronales. Cuando se examina la efectividad para cada una de las especies, Maxent resultó también uno de los métodos más fiables, especialmente en el caso de aquellas especies con un pequeño número de localidades. En conjunto, este estudio identifica cuatro grupos de técnicas de modelización. El de mayor fiabilidad sería el compuesto por Maxent y las redes neuronales, seguido de cerca por DOMAIN. El tercer grupo incluiría GARP, GAM, GLM y CART, mientras que el cuarto estaría formado por BIOCLIM. Aunque estos resultados pueden permitir obtener mejores predicciones de distribución con capacidad para ser utilizadas en la planificación de reservas, es necesario ser cauto en su utilización debido a la naturaleza provisional de estas simulaciones.

Various studies have shown that model performance may vary depending on the species being modelled, the study area, or the number of sampled localities, and suggest that it is necessary to assess which model is better for a particular situation. Thus, in this study we evaluate the performance of different techniques for modelling the distribution of Patagonian insects. We applied eight of the most widely used modelling methods (artificial neural networks, BIOCLIM, classification and regression trees, DOMAIN, generalized additive models, GARP, generalized linear models, and Maxent) to the distribution of ten Patagonian insect species. We compared model performance with five accuracy measures. To overcome the problem of not having reliable absence data with which to evaluate model performance, we used randomly selected pseudo-absences located outside of the polygon area defined by taxonomic experts. Our analyses show significant differences among modelling methods depending on the chosen accuracy measure. Maxent performed the best according to four out of the five accuracy measures, although its accuracy did not differ significantly from that obtained with artificial neural networks. When assessed on per species basis, Maxent was also one of the strongest performing methods, particularly for species sampled from a relatively low number of localities. Overall, our study identified four groups of modelling techniques based on model performance. The top-performing group is composed of Maxent and artificial neural networks, followed closely by the DOMAIN technique. The third group includes GARP, GAM, GLM, and CART, and the fourth best performer is the BIOCLIM technique. Although these results may allow obtaining better distributional predictions for reserve selection, it is necessary to be cautious in their use due to the provisional nature of these simulations.