Summary

Objektivering af tungediagnose i traditionel medicin, dataanalyse og undersøgelsesanvendelse

Published: April 14, 2023
doi:

Summary

Denne undersøgelse anvendte U-Net og andre deep learning-algoritmer til at segmentere et tungebillede og sammenlignede segmenteringsresultaterne for at undersøge objektiveringen af tungediagnosen.

Abstract

Tungediagnose er en vigtig teknik til diagnose af traditionel kinesisk medicin (TCM), og behovet for objektivering af tungebilleder gennem billedbehandlingsteknologi vokser. Denne undersøgelse giver et overblik over de fremskridt, der er gjort inden for objektivering af tungen i løbet af det sidste årti, og sammenligner segmenteringsmodeller. Forskellige deep learning-modeller er konstrueret til at verificere og sammenligne algoritmer ved hjælp af ægte tungebilledsæt. Styrker og svagheder ved hver model analyseres. Resultaterne indikerer, at U-Net-algoritmen overgår andre modeller med hensyn til præcisionsnøjagtighed (PA), tilbagekaldelse og gennemsnitlig skæring over union (MIoU) målinger. På trods af de betydelige fremskridt inden for indsamling og behandling af tungebilleder er der dog endnu ikke etableret en ensartet standard for objektivering af tungediagnose. For at lette den udbredte anvendelse af tungebilleder, der er taget ved hjælp af mobile enheder til objektivering af tungediagnoser, kan yderligere forskning tage fat på udfordringerne ved tungebilleder, der er taget i komplekse miljøer.

Introduction

Tungeobservation er en udbredt teknik i traditionel kinesisk etnisk medicin (TCM). Tungens farve og form kan afspejle den fysiske tilstand og forskellige sygdomsegenskaber, sværhedsgrader og prognoser. For eksempel i traditionel Hmong-medicin bruges tungens farve til at identificere kropstemperatur, f.eks. indikerer en rød eller lilla tunge patologiske faktorer relateret til varme. I tibetansk medicin bedømmes en tilstand ved at observere patientens tunge og være opmærksom på slimets farve, form og fugtighed. For eksempel bliver tungerne hos patienter med Heyis sygdom røde og ru eller sorte og tørre1; patienter med Xieri sygdom2 har gule og tørre tunger; i mellemtiden har patienter med Badakan sygdom3 en hvid, fugtig og blød tunge4. Disse observationer afslører det tætte forhold mellem tungetræk og fysiologi og patologi. Samlet set spiller tungenes tilstand en afgørende rolle i diagnose, sygdomsidentifikation og evaluering af behandlingseffekten.

På grund af forskellige levevilkår og kostvaner blandt forskellige etniske grupper er variationer i tungebilleder samtidig tydelige. Lab-modellen, der blev oprettet på grundlag af en international standard til bestemmelse af farve, blev formuleret af Commission International Eclairage (CIE) i 1931. I 1976 blev et farvemønster ændret og navngivet. Lab-farvemodellen består af tre elementer: L svarer til lysstyrke, mens a og b er to farvekanaler. a omfatter farver fra mørkegrøn (lav lysstyrkeværdi) til grå (medium lysstyrkeværdi) til lyserød (høj lysstyrkeværdi); b går fra lyseblå (lav lysstyrkeværdi) til grå (medium lysstyrkeværdi) til gul (høj lysstyrkeværdi). Ved at sammenligne L x a x b-værdierne for tungefarven på fem etniske grupper fandt Yang et al.5 , at egenskaberne ved tungebilleder af Hmong-, Hui-, Zhuang-, Han- og mongolske grupper var signifikant forskellige fra hinanden. For eksempel har mongolerne mørke tunger med en gul tungebelægning, mens Hmong har lyse tunger med en hvid tungebelægning, hvilket tyder på, at tungefunktioner kan bruges som en diagnostisk indikator til vurdering af en befolknings sundhedstilstand. Desuden kan tungebilleder fungere som et evalueringsindeks for evidensbaseret medicin i klinisk forskning af etnisk medicin. Han et al.6 anvendte tungebilleder som grundlag for TCM-diagnose og evaluerede systematisk sikkerheden og effekten af Chou-Ling-Dan-pellets (CLD-granulat, der anvendes til behandling af inflammatoriske og febersygdomme, herunder sæsoninfluenza i TCM) kombineret med kinesisk og vestlig medicin. Resultaterne etablerede den videnskabelige validitet af tungebilleder som et evalueringsindeks for kliniske undersøgelser. Ikke desto mindre er traditionelle læger generelt afhængige af subjektivitet for at observere tungekarakteristika og vurdere patienters fysiologiske og patologiske tilstande, hvilket kræver mere præcise indikatorer.

Fremkomsten af internettet og kunstig intelligensteknologi har banet vejen for digitalisering og objektivering af tungediagnose. Denne proces involverer brug af matematiske modeller til at give en kvalitativ og objektiv beskrivelse af tungebilleder7, der afspejler indholdet af tungebilledet. Processen omfatter flere trin: billedoptagelse, optisk kompensation, farvekorrektion og geometrisk transformation. De forbehandlede billeder føres derefter ind i en algoritmisk model til billedpositionering og segmentering, funktionsekstraktion, mønstergenkendelse osv. Resultatet af denne proces er en yderst effektiv og præcis diagnose af tungebilleddata, hvorved målet om objektivering, kvantificering og informatisering af tungediagnose8 opnås. Således opnås formålet med høj effektivitet og høj præcisionsbehandling af tungediagnosedata. Baseret på viden om tungediagnose og dyb læringsteknologi adskilte denne undersøgelse automatisk tungekroppen og tungebelægningen fra tungebilleder ved hjælp af en computeralgoritme for at udtrække de kvantitative egenskaber ved tunger til læger, forbedre diagnosens pålidelighed og konsistens og tilvejebringe metoder til efterfølgende tungediagnoseobjektiveringsforskning9.

Protocol

Denne undersøgelse er godkendt af National Natural Science Foundation of China-projektet, Constructing Dynamic Change rules of TCM Facial image Based on Association Analysis. Det etiske godkendelsesnummer er 2021KL-027, og den etiske komité har godkendt den kliniske undersøgelse, der skal udføres i overensstemmelse med de godkendte dokumenter, som omfatter klinisk forskningsprotokol (2021.04.12, V2.0), informeret samtykke (2021.04.12, V2.0), forsøgsrekrutteringsmateriale (2021.04.12, V2.0), undersøgelsessager og/el…

Representative Results

For sammenligningsresultaterne, se figur 12, figur 13 og tabel 1, hvor miljøet konstrueret af denne undersøgelse bruger de samme prøver til at træne og teste algoritmemodellen. MIoU-indikator: U-Net > Seg-Net > PSPNet > DeeplabV3; MPA-indikator: U-Net > Seg-Net > PSPNet > DeeplabV3; præcisionsindikator: U-Net > Seg-Net > DeeplabV3 > PSPNet; tilbagekaldelse: U-Net > Seg-Net > PSPNet > DeeplabV3. Jo større indeksværdien er, jo højere er s…

Discussion

På grundlag af de ovenfor præsenterede sammenligningsresultater er det tydeligt, at egenskaberne ved de fire algoritmer, der er under overvejelse, er forskellige, og deres forskellige fordele og ulemper er beskrevet nedenfor. U-Net-strukturen, der er baseret på modifikation og udvidelse af et fuldt konvolutionsnetværk, kan opnå kontekstuel information og præcis positionering gennem en kontraktsti og en symmetrisk ekspansionssti. Ved at klassificere hvert pixelpunkt opnår denne algoritme en højere segmenteringsnø…

Divulgazioni

The authors have nothing to disclose.

Acknowledgements

Dette arbejde blev støttet af National Nature Foundation of China (bevilling nr. 82004504), National Key Research and Development Program fra Kinas ministerium for videnskab og teknologi (bevilling nr. 2018YFC1707606), Chinese Medicine Administration of Sichuan-provinsen (bevilling nr. 2021MS199) og National Nature Foundation of China (bevilling nr. 82174236).

Materials

CPU Intel(R) Core(TM) i7-9700K
GPU  NVIDIA GeForce RTX 3070 Ti (8192MB)
Operating systems Microsoft Windows 10 Professional Edition (64-bit)
Programming language Python
RAM 16G

Riferimenti

  1. Jiu, G., et al. Effects of herbal therapy on intestinal microbiota and serum metabolomics in different rat models of Mongolian medicine. Evidence-Based Complementary and Alternative. 2022, 7255780 (2022).
  2. Xi, J., Xin, Y., Teregle, Study on the correlation between the animal model of Mongolian medicine 34;Xieri disease" and serum ALT and AST. Electronic Journal of Cardiovascular Diseases in Combination of Traditional Chinese. 4 (33), 134-135 (2016).
  3. Yin, L., et al. Study on the mechanism of serum differential protein changes in bronchial asthma based on proteomics. Chinese Journal of Traditional Chinese Medicine. 47 (22), 6227-6234 (2022).
  4. Wang, X. H., Bao, L. Band Seed. The origin and development of tongue diagnosis in Mongolian medicine. Chinese Ethnic Folk Medicine. (1), 64-65 (2008).
  5. Yang, S., et al. A comparative study on the feature parameters of tongue diagnosis images in five nationalities. Chinese Journal of Traditional Chinese Medicine. 36 (11), 6428-6430 (2021).
  6. He, J. Y., et al. Efficacy and safety of Chou-Ling-Dan granules in the treatment of seasonal influenza via combining Western and traditional Chinese medicine, protocol for a multicentre, randomised controlled clinical trial. BMJ Open. 9 (4), e024800 (2019).
  7. Wang, D. J., et al. Scientific knowledge mapping and visualization analysis in the field of Chinese medicine tongue feature objectification research. World Science and Technology – Modernization of Chinese Medicine. 23 (9), 3032-3040 (2021).
  8. Yuan, S. M., Qian, P., Li, F. F. Research progress of color correction methods for tongue and face diagnosis in traditional Chinese Medicine. Chinese Journal of Traditional Chinese Medicine. 34 (9), 4183-4185 (2019).
  9. Kanawong, R., et al. Tongue image analysis and its mobile app development for health diagnosis. Advances in Experimental Medicine and Biology. 1005, 99-121 (2017).
  10. Yu, Y., et al. Semantic segmentation evaluation index and evaluation method. Computer Engineering and Application. , (2023).
  11. Sehyung, L., Negishi, M., Urakubo, H., Kasai, H., Ishii, S. Mu-net: Multi-scale U-net for two-photon microscopy image denoising and restoration. Neural Networks. 125, 92-103 (2020).
  12. Huang, X. M., et al. A review on the application of U-Net and its variants in medical image segmentation. Chinese Journal of Biomedical Engineering. 41 (5), 567-576 (2022).
  13. Lu, J. H., Xu, Y. F., Wang, Y. Q., Hao, Y. M. Research overview of tongue objectification in traditional Chinese medicine based on computer image technology. World Science and Technology – Modernization of Traditional Chinese Medicine. 24 (11), 4568-4573 (2022).
  14. Mansour, R. F., Althobaiti, M. M., Ashour, A. A. Internet of things and synergic deep learning based biomedical tongue color image analysis for disease diagnosis and classification. IEEE Access. 9, 94769-94779 (2021).
  15. Cai, Y. H., Hu, S. B., Guan, J., Zhang, X. F. Analysis of the development and application of tongue diagnosis objectification techniques in Chinese medicine. World Science and Technology – Modernization of Chinese Medicine. 23 (7), 2447-2453 (2021).
  16. Ghosh, S., Das, N., Nasipuri, M. Reshaping inputs for convolutional neural network: some common and uncommon methods. Pattern Recognition. 93, 79-94 (2019).
  17. Shang, Z. M., et al. Research progress of digital acquisition and characterization of tongue diagnosis information. Chinese Journal of Traditional Chinese Medicine. 36 (10), 6010-6013 (2021).
  18. Ning, J., Zhang, D., Wu, C., Yue, F. Automatic tongue image segmentation based on gradient vector flow and region merging. Neural Computing and Applications. 21, 1819-1826 (2012).
  19. Zheng, F., Huang, X. Y., Wang, B. L., Wang, Y. H. A method for tongue detection based on image segmentation. Journal of Xiamen University. 55 (6), 895-900 (2016).
  20. Li, Y. T., Luo, Y. S., Zhu, Z. M. Deep learning-based tongue feature analysis. Computer Science. 47 (11), 148-158 (2020).
  21. Wang, Y. D., Sun, C. H., Cui, J. L., Wu, X. R., Qin, Y. X. Research on deep learning-based tongue fissure segmentation algorithm. World Science and Technology – Modernization of Chinese Medicine. 23 (9), 3065-3073 (2021).
  22. Wang, X. M., Wang, R. Y., Guo, D., Lu, S. Z., Zhou, P. Research on the identification method of tongue punctures based on auxiliary light source. Journal of Sensing Technology. 29 (10), 1553-1559 (2016).
  23. Yang, J. D., Zhang, P. A fully connected neural network based on migration learning for tongue image classification. Journal of the Second Military Medical University. 39 (8), 897-902 (2018).
  24. Song, C., Wang, B., Xu, J. T. Research on tongue feature classification method based on deep migration learning. Computer Engineering and Science. 43 (8), 1488-1496 (2021).
  25. Ding, H. J., He, J. C. Study on modern techniques and methods of tongue diagnosis. Shi Zhen Chinese Medicine. 21 (5), 1230-1232 (2010).
  26. Zhai, P. B., et al. A multi-stage tongue image classification algorithm incorporating attention mechanism. Computer Engineering and Design. 42 (6), 1606-1613 (2021).
  27. Hou, Y. S. A new clustering analysis algorithm based on deep learning. Journal of Xinxiang University. 35 (12), 4 (2018).
  28. Shi, Y. L., et al. A decision tree algorithm for classification of non-small cell lung cancer evidence based on tongue and pulse data. World Science and Technology – Modernization of Chinese Medicine. 24 (7), 2766-2775 (2022).
  29. Li, J., Hu, X. J., Zhou, C. L., Xu, J. T. Study on the feature analysis and diagnosis model of diabetic tongue based on random forest algorithm. Chinese Journal of Traditional Chinese Medicine. 37 (3), 1639-1643 (2022).
  30. Chen, C. H., et al. The characteristics of the combination of the four diagnostic methods of traditional Chinese medicine from the perspective of the differences between Chinese and Western medical diagnosis methods. Journal of Guangzhou University of Traditional Chinese Medicine. 28 (3), 332-334 (2011).
  31. Chen, R., et al. Correlation analysis of tongue image and western medicine typing in 382 patients with novel coronavirus pneumonia based on Lab colour model and imaging histology. Chinese Journal of Traditional Chinese Medicine. 36 (12), 7010-7014 (2021).
  32. Ju, J. W., Jung, H., Lee, Y. J., Mun, S. W., Lee, J. H. Semantic segmentation dataset for AI-based quantification of clean mucosa in capsule endoscopy. Medicina. 58 (3), 397 (2022).
  33. Wu, X., et al. A review of research on deep learning in tongue image classification. Computer Science and Exploration. , 1-23 (2022).
check_url/it/65140?article_type=t

Play Video

Citazione di questo articolo
Feng, L., Xiao, W., Wen, C., Deng, Q., Guo, J., Song, H. Objectification of Tongue Diagnosis in Traditional Medicine, Data Analysis, and Study Application. J. Vis. Exp. (194), e65140, doi:10.3791/65140 (2023).

View Video