Традиционная китайская медицина на протяжении тысячелетий использует диагностику по состоянию языка для выявления скрытых заболеваний. Вдохновившись этим подходом, учёные применили современные технологии машинного обучения для классификации цвета языка и предсказания различных болезней.
В рамках новой научной работы была разработана система освещения, где пациенты помещали голову в специальную коробку с диодами, излучающими стабильный свет. Это позволяло получать чёткие изображения языка в различных цветах и при разном освещении. В результате учёные собрали 5260 снимков, включая фотографии реальных языков и изображения с изменёнными цветовыми оттенками для обучения ИИ. Модель распознавала семь ключевых цветов — от красного до розового — с различной насыщенностью, пишет Ferra.
Розовый язык с белым налётом считается признаком здоровья, а его изменения могут указывать на проблемы. Например, более белый язык может сигнализировать о дефиците железа, синевато-жёлтый — о диабете. Фиолетовый язык с жировыми отложениями может быть связан с раковыми заболеваниями, а цвет языка при ковиде варьируется от бледно-розового в лёгкой форме до насыщенно-красного при тяжёлой.
После обучения модели ИИ, учёные протестировали её на 60 изображениях, полученных в двух больницах Ирака. Система показала отличные результаты, правильно распознав 58 из 60 изображений, что подтвердил профессор Али Аль-Наджи.