Нейросеть научили определять источник звука в реальном времени Алгоритм работает подобно человеческому слуху

Команда ученых занималась разработкой компьютерной модели, которая могла бы выполнять такие же вычисления, которые мозг использует для локализации звуков, и обратилась для этого к сверточным нейронным сетям. Они могут быть разработаны с использованием множества различных архитектур, поэтому, чтобы помочь им найти те, которые лучше всего подходят для локализации, команда использовала суперкомпьютер, который позволил обучить и протестировать около 1500 различных моделей.

Из них выделили десять наиболее подходящих, а затем дополнительно обучили их при помощи набора из более чем 400 звуков, включающих человеческие голоса, звуки животных, природы и машин. Чтобы смоделировать человеческое ухо, ученые пропустили каждый звук через специальную математическую функцию, прежде чем он попал в компьютерную модель.

После обучения моделей исследователи протестировали их в реальных условиях — разместили манекен с микрофонами в ушах и воспроизвели звуки с разных направлений, а затем передали эти записи моделям. Модель смогла довольно точно локализовать звуки в реальном мире. Алгоритм использует синхронизацию и разницу уровней между двумя ушами так же, как это делают люди, уверяют ученые.

Нейросеть также научили определять расовую принадлежность человека по рентгеновским снимкам: