Анализ отзывов пациентов с использованием машинного обучения и лингвистических методов
Автор: Калабихина И.Е., Мошкин В.С., Колотуша А.В., Кашин М.И., Клименко Г.А., Казбекова З.Г.
Журнал: Онтология проектирования @ontology-of-designing
Рубрика: Прикладные онтологии проектирования
Статья в выпуске: 1 (55) т.15, 2025 года.
Бесплатный доступ
С развитием цифровизации традиционные методы анкетирования потребителей с целью оценки степени их удовлетворённости качеством услуг уступают место подходу, основанному на автоматической обработке текстовых массивов социальных медиа. Целью работы является определение степени удовлетворённости качеством медицинских услуг пациентов посредством разработки и апробации алгоритма классификации русскоязычных текстовых отзывов, извлечённых из социальных медиаресурсов. Интерес представляет определение тональности отзывов пациентов (положительный/отрицательный) о работе медицинских учреждений и врачей, а также объекты обращения отзыва - качество оказанных медицинских услуг или организация обслуживания пациентов медицинским учреждением. Разработан метод классификации текстовых отзывов о работе медицинских учреждений, размещённых пациентами на двух сайтах отзывов о врачах в России. Проанализировано около 60 тысяч отзывов. Апробированы методы машинного обучения с использованием различных архитектур искусственных нейронных сетей. Разработанный алгоритм классификации имеет высокую эффективность - лучший результат показала архитектура на основе рекуррентной нейронной сети (показатель точности = 0.9271). Применение метода поиска именованных сущностей к текстовым сообщениям позволило повысить эффективность классификации для каждого из классификаторов, базирующихся на использовании нейронных сетей. Для повышения качества классификации требуется семантическое разбиение отзыва по объекту обращения и тональности и последующий учёт полученных фрагментов отдельно друг от друга.
Машинное обучение, отзывы пациентов, нейронные сети, классификация отзывов, качество медицинских услуг
Короткий адрес: https://sciup.org/170208818
IDR: 170208818 | DOI: 10.18287/2223-9537-2025-15-1-55-66
Список литературы Анализ отзывов пациентов с использованием машинного обучения и лингвистических методов
- Litvin S.W., Goldsmith R.E., Pan B. Electronic word-of-mouth in hospitality and tourism management. Tourism management. 2008; 29(3), 458-468. DOI: 10.1016/j.tourman.2007.05.011.
- Emmert M., Meier F. An analysis of online evaluations on a physician rating website: evidence from a German public reporting instrument. Journal of medical Internet research. 2013; 15(8), e2655. DOI:10.2196/jmir.2655.
- Nwachukwu B.U., Adjei J., Trehan S.K., Chang B., Amoo-Achampong K., Nguyen J.T., Ranawat A.S. Rating a sports medicine surgeon's ―quality‖ in the modern era: an analysis of popular physician online rating websites. HSS Journal. 2016; 12(3), 272-277. DOI: 10.1007/s11420-016-9520-x.
- Obele C.C., Duszak Jr.R., Hawkins C.M., Rosenkrantz A.B. What patients think about their interventional radiologists: assessment using a leading physician ratings website. Journal of the American College of Radiology. 2017; 14(5), 609-614. DOI: 10.1016/j.jacr.2016.10.013.
- Emmert M., Meier F., Pisch F., Sander U. Physician choice making and characteristics associated with using physician-rating websites: cross-sectional study. Journal of medical Internet research. 2013; 15(8), e2702. DOI: 10.2196/jmir.2702.
- Gao G.G., McCullough J.S., Agarwal R., Jha A.K. A changing landscape of physician quality reporting: analysis of patients’ online ratings of their physicians over a 5-year period. Journal of medical Internet research. 2012; 14(1), e38. DOI: 10.2196/jmir.2003.
- Galizzi M.M., Miraldo M., Stavropoulou C., Desai M., Jayatunga W., Joshi M., Parikh S. Who is more likely to use doctor-rating websites, and why? A cross-sectional study in London. BMJ open. 2012; 2(6), e001493. DOI: 10.1136/bmjopen-2012-001493.
- Hanauer D.A., Zheng K., Singer D.C., Gebremariam A., Davis M.M. Public awareness, perception, and use of online physician rating sites. Jama. 2014; 311(7), 734-735. DOI: 10.1001/jama.2013.283194.
- McLennan S., Strech D., Meyer A., Kahrass H. Public awareness and use of German physician ratings websites: Cross-sectional survey of four North German cities. Journal of medical Internet research. 2017; 19(11), e387. DOI: 10.2196/jmir.7581.
- Lin Y., Hong Y.A., Henson B.S., Stevenson R.D., Hong S., Lyu T., Liang C. Assessing patient experience and healthcare quality of dental care using patient online reviews in the United States: mixed methods study. Journal of Medical Internet Research. 2020; 22(7), e18652. DOI: 10.2196/18652.
- Emmert M., Meier F., Heider A.K., Dürr C., Sander U. What do patients say about their physicians? An analysis of 3000 narrative comments posted on a German physician rating website. Health policy. 2014; 118(1), 66-73. DOI: 10.1016/j.healthpol.2014.04.015.
- Shah A.M., Yan X., Shah S.A.A., Mamirkulova G. Mining patient opinion to evaluate the service quality in healthcare: a deep-learning approach. Journal of Ambient Intelligence and Humanized Computing. 2020; 11, 2925-2942. DOI: 10.1007/S12652-019-01434-8.
- Jiang S., Street R.L. Pathway linking internet health information seeking to better health: a moderated mediation study. Health Communication. 2017; 32(8), 1024-1031. DOI: 10.1080/10410236.2016.1196514.
- Hotho., Nürnberger A., Paaß G. A Brief Survey of Text Mining, LDV Forum - GLDV Journal for Computational Linguistics and Language Technology.2005; vol. 20, pp.19-62. DOI: 10.21248/jlcl.20.2005.68.
- Păvăloaia V., Teodor E., Fotache D., Danileț M. Opinion Mining on Social Media Data: Sentiment Analysis of User Preferences, Sustainability. 2019; 11, 4459. DOI: 10.3390/su11164459.
- Bespalov D., Bing B., Yanjun Q., Shokoufandeh A. Sentiment classification based on supervised latent n-gram analysis‖, Proceedings of the 20th ACM international conference on Information and knowledge management (CIKM ’11). Association for Computing Machinery. 2011; New York, USA, 375–382. DOI: 10.1145/2063576.2063635.
- Irfan R, King CK, Grages D, Ewen S, Khan SU, Madani SA, Kolodziej J, Wang L, Chen D, Rayes A, Tziritas N, Xu CZ, Zomaya AY, Alzahrani AS, Li H. A Survey on Text Mining in Social Networks, Cambridge Journal, The Knowledge Engineering Review. 2015; 30(2), pp. 157-170. DOI:10.1017/S0269888914000277.
- Patel P., Mistry K. A Review: Text Classification on Social Media Data, IOSR Journal of Computer Engineering. 2015; 17(1), pp. 80-84.
- Lee K., Palsetia D., Narayanan R., Patwary Md.M.A, Agrawal A., Choudhary A.S. Twitter Trending Topic Classification, in Proceeding of the 2011 IEEE 11 th International Conference on Data Mining Workshops, ICDW’11. 2011; pp. 251-258.
- Kateb F., Kalita J. Classifying Short Text in Social Media: Twitter as Case Study, International Journal of Computer Applications. 2015; 111(9), pp. 1-12. DOI: 10.5120/19563-1321.
- Theeramunkong T., Lertnattee V. Multi-Dimension Text Classification, SIIT, Thammasat University, 2005.http://www.aclweb.org /anthology/C02-1155 (03 October 2024). DOI: 10.1109/TITB.2004.832.
- Sornlertlamvanich V., Pacharawongsakda E., Charoenporn T. Understanding Social Movement by Tracking the Keyword in Social Media, in MAPLEX2015, 2015; Yamagata, Japan.
- Kalabikhina I., Moshkin V., Kolotusha A., Kashin M., Klimenko G., Kazbekova Z. Advancing Semantic Classification: A Comprehensive Examination of Machine Learning Techniques in Analyzing Russian-Language Patient Reviews. Mathematics. 2024; 12(4): 566. DOI:10.3390/math12040566.
- Kalabikhina I., Zubova E., Loukachevitch N., Kolotusha A., Kazbekova Z., Banin E., Klimenko G. Identifying Reproductive Behavior Arguments in Social Media Content Users’ Opinions through Natural Language Processing Techniques, Population and Economics. 2023; 7(2), pp. 40-59. DOI: 10.3897/popecon.7.e97064.