Исследователи Google разработали новую нейронную сеть для выявления болезней по кашлю человека. Модель искусственного интеллекта получила название Health Acoustic Representations (HeAR), что означает звуковая картина здоровья.
Система была разработана Google Research в сотрудничестве с учеными Центра исследований инфекционных заболеваний в Замбии. Разработка HEAR началась после пандемии коронавируса COVID-19. Исследователи обнаружили, что болезнь можно обнаружить по кашлю.
Ученые создали обширную базу данных человеческих голосов из видеороликов на YouTube. Она содержит более 300 миллионов коротких фрагментов и около 174 000 часов аудио. База данных включала в себя дыхание, одышку и кашель, а каждая запись была преобразована в спектрограмму. Всем звукам был присвоен специальный символ, например бронхит или другие заболевания. Затем части спектрограммы были заблокированы, чтобы АИ-модель могла предусмотреть недостающие части.
Обученная нейросеть смогла идентифицировать COVID-19, туберкулез и другие заболевания. Ученые описали результаты по шкале, где 0,5 – это уровень случайного предсказания, а 1 – точный результат; HEAR набрал 0,710 для обнаружения коронавируса и 0,739 для туберкулеза. По словам Али Имрана, инженера из Университета Оклахомы в Талси, исследование важно из-за большого количества данных.
Ученые планируют вывести разработку на рынок США в больших количествах. Для этого им необходимо провести клинические испытания и получить одобрение Управления по контролю за продуктами и лекарствами. Пока в США не существует никакого диагностического продукта на основе звука, одобренного властями.