Нейросетевая модель для сегментации космических снимков в мониторинге факторов обезлесения территории
Автор: Мельников А.В., Кочергин Г.А., Аббазов В.Р., Байсалямова О.А., Русанов М.А., Полищук Ю.М.
Рубрика: Информатика и вычислительная техника
Статья в выпуске: 3 т.23, 2023 года.
Бесплатный доступ
Статья посвящена важной проблеме применения нейросетевых моделей в задачах мониторинга состояния лесных территорий с использованием оптических спутниковых снимков. Цель исследования. Целью исследования явилась разработка нейросетевой модели лесных рубок, пригодной для автоматизации дешифрирования многоспектральных космических снимков Sentinel-2 в задачах мониторинга состояния лесных ресурсов лесодобывающего региона на примере Ханты-Мансийского автономного округа. Материалы и методы. Основу разработанной модели составила процедура сегментации космических снимков лесных рубок, основанная на сверточной нейронной сети глубокого обучения. Дешифрирование снимков со спутника Sentinel-2 проведено с помощью средств современной геоинформационной системы QGIS. Для подготовки набора обучающих данных было обработано более 990 пар разновременных космических снимков лесных территорий Ханты-Мансийского автономного округа за зимний (снежный) период 2018-2022 гг., с использованием которых было сформировано более 70 тыс. кадров в составе набора обучающих данных и соответствующих им масок контуров лесных рубок. Результаты. В результате выполненной работы создана нейросетевая модель лесных рубок, реализующая эффективную сегментацию космических снимков, что позволило автоматизировать трудоемкую процедуру дешифрирования многоспектральных снимков Sentinel-2 с целью выделения контуров лесных рубок. Полученный в работе набор обучающих данных в количестве более 70 тыс. кадров был разделен на обучающую, валидационную (проверочную) и тестовую (контрольную) выборки, объемы которых для разработки нейросетевой модели лесных рубок составили 58 000, 10 000 и 3600 кадров соответственно. Новизна разработанной модели определяется, с одной стороны, использованием для обучения нейронной сети зимних (снежных) космических снимков и, с другой стороны, применением пар разновременных снимков, полученных до и после лесной рубки. В качестве критериев для оценки точности обученной модели нейронной сети применены метрики Recall, Precision и F-мера, значения были рассчитаны по тестовой выборке. Рассчитанная точность выявления рубок с использованием предлагаемой модели на тестовой выборке данных по разным метрикам достигает 85-87 %. Заключение. Разработанная нейросетевая модель лесных рубок может быть использована в задачах мониторинга и картографирования состояния лесных ресурсов северных лесодобывающих территорий России с применением многоспектральных космических снимков Sentinel-2.
Нейронные сети, космические снимки, лесные рубки, набор обучающих данных, метрика точности модели
Короткий адрес: https://sciup.org/147241769
IDR: 147241769 | УДК: 004.032.26, | DOI: 10.14529/ctcr230301
A neural network model for space image segmentation in monitoring of deforestation factors
The article deals with the important problem of applying neural network models in the tasks of monitoring the condition of forest areas using optical satellite images. Objective. The objective of this research was to develop a neural network model of forest felling suitable for automation of decoding multispectral Sentinel-2 satellite images in forest monitoring tasks in the example of the Khanty-Mansi Autonomous Okrug. Materials and Methods. The basis of the developed model was the forest harvesting satellite images segmentation procedure based on the convolutional neural network of deep learning. Sentinel-2 data interpretation was done using the modern QGIS geoinformation system. Over 990 pairs of multi-temporal space images of the forest territories of Khanty-Mansi Autonomous Okrug in winter (snow) period of 2018-2022 were processed to prepare the training data set. More than 70 000 images of the training data set and corresponding masks of forest cutting contours were generated with these images. Results. As a result of this work, a neural network model of forest felling was created, which implements efficient segmentation of space images, which allowed automating the labor-intensive procedure of interpretation of multispectral Sentinel-2 images in order to identify forest logging contours. The set of training data totally 70 000 frames was divided into the training, validation (test) and test (control) samples, the amount of which for the development of the neural network model of forest felling was 58 000, 10 000 and 3600 frames respectively. The novelty of the model is determined, on the one hand, by the use of winter (snow) satellite images for training the neural network and, on the other hand, by the use of pairs of images acquired before and after forest felling. Recall, Precision and F-measure metrics were used as the criteria to evaluate the accuracy of the trained neural network model, and the values were calculated from the test sample. The calculated accuracy of felling detection using the proposed model on the test sample of data on different metrics reaches 85-87%. Conclusion. The developed neural network model of forest felling can be used for monitoring and mapping of forest resources of the northern forestry territories of Russia using multispectral Sentinel-2 satellite images.
Список литературы Нейросетевая модель для сегментации космических снимков в мониторинге факторов обезлесения территории
- GlobalForestWatch. Global Annual Tree cover loss. URL: https://gfw.global/40kCKzS (дата обращения: 28.03.2023).
- FAO. Global Forest Resources Assessment 2020. URL: https://doi.org/10.4060/ca8753en (дата обращения: 28.03.2023).
- Свидетельство о государственной регистрации базы данных № 2016620648 Российская Федерация. Реестр изменений лесного фонда ХМАО-Югры / Р.М. Габдрахманов, Г.А. Кочергин, М.А. Куприянов [и др.]; заявитель автономное учреждение Ханты-Мансийского автономного округа - Югры «Югорский научно-исследовательский институт информационных технологий». № 2016620412; заявл. 06.04.2016; опубл. 23.05.2016.
- Large-scale oil palm tree detection from high-resolution satellite images using two-stage convo-lutional neural networks / W. Li, R. Dong, H. Fu, L. Yu // Remote Sensing. 2018. Vol. 11, no. 1. P. 11. DOI: 10.3390/rs11010011
- Deforestation detection with fully convolutional networks in the Amazon Forest from Landsat-8 and Sentinel-2 images / D.L. Torres, J.N. Turnes, P.J.S. Vega et al. // Remote Sensing. 2021. Vol. 13, no. 24. P. 5084. DOI: 10.3390/rs13245084
- Forest change detection in incomplete satellite images with deep neural networks / S.H. Khan, X. He, F. Porikli, M. Bennamoun // IEEE Transactions on Geoscience and Remote Sensing. 2017. Vol. 55, no. 9. P. 5407-5423. DOI: 10.1109/TGRS.2017.2707528
- John D., Zhang C. An attention-based U-Net for detecting deforestation within satellite sensor imagery // International Journal of Applied Earth Observation and Geoinformation. 2022. Vol. 107. P. 102685. DOI: 10.1016/j.jag.2022.102685
- Classification of landscape affected by deforestation using high-resolution remote sensing data and deep-learning techniques / S.H. Lee, K.J. Han, K. Lee et al. // Remote Sensing. 2020. Vol. 12, no. 20. P. 3372. DOI: 10.3390/rs12203372
- Unet++: A nested u-net architecture for medical image segmentation / Z. Zhou, M.M.R. Sid-diquee, N. Tajbakhsh, J. Liang // Deep Learning in Medical Image Analysis and Multimodal Learning for Clinical Decision Support: 4th International Workshop, DLMIA 2018, and 8th International Workshop, ML-CDS 2018, Held in Conjunction with MICCAI 2018, Granada, Spain, September 20, 2018, Proceedings 4. Springer International Publishing, 2018. P. 3-11. DOI: 10.1007/978-3-030-00889-5
- Jiang Y., Zhong C., Zhang B. AGD-Linknet: A Road Semantic Segmentation Model for High Resolution Remote Sensing Images Integrating Attention Mechanism, Gated Decoding Block and Dilated Convolution // IEEE Access. 2023. Vol. 11. P. 22585-22595. DOI: 10.1109/ACCESS.2023.3253289
- Doha R., Al Hasan M., Anwar S. Semantic Segmentation Approaches in Crop Row Detection // 2022 IEEE International Conference on Big Data (Big Data). IEEE, 2022. P. 2224-2230. DOI: 10.1109/BigData55660.2022.10021091
- Ensemble Learning based on Classifier Prediction Confidence and Comprehensive Learning Particle Swarm Optimisation for Medical Image Segmentation / T. Dang, T.T. Nguyen, J. McCall, A.W.C. Liew // 2022 IEEE Symposium Series on Computational Intelligence (SSCI). IEEE, 2022. P. 269-276. DOI: 10.1109/SSCI51031.2022.10022114
- Copernicus Sentinel-2 data 2015, processed by ESA. URL: https://scihub.copernicus.eu/ (дата обращения: 02.03.2023).
- Свидетельство о государственной регистрации базы данных № 2016620923 Российская Федерация. Архив космических снимков / Р.М. Габдрахманов, Г.А. Кочергин; заявитель автономное учреждение Ханты-Мансийского автономного округа - Югры «Югорский научно-исследовательский институт информационных технологий». № 2016620615; заявл. 10.05.2016; опубл. 06.07.2016. EDN RRGSPX.
- Sentinel-2 processing level-2. URL: https://sentinels.copernicus.eu/web/sentinel/user-guides/ sentinel-2-msi/processing-levels/level-2 (дата обращения: 02.03.2023).
- Super-resolution of Sentinel-2 images: Learning a globally applicable deep neural net-work / C. Lanaras, J. Bioucas-Dias, S. Galliani et al. // ISPRS Journal of Photogrammetry and Remote Sensing. 2018. Vol. 146. P. 305-319. DOI: 10.1016/j.isprsjprs.2018.09.018