
Исследователи из Еврейского университета в Иерусалиме изучили, как человеческий мозг воспринимает речь, и сравнили этот процесс с работой языковой модели искусственного интеллекта Whisper. Оказалось, что искусственный интеллект и биологический мозг используют схожие механизмы обработки информации.
Whisper, разработанная OpenAI, обучалась на аудиозаписях и транскрипциях разговоров. В отличие от традиционных языковых моделей, которые анализируют фонетическую структуру языка, Whisper обрабатывает речь исключительно на основе статистических данных. Однако, несмотря на отсутствие явных указаний, модель все же усвоила особенности языковой структуры.
В исследовании приняли участие четыре пациента с эпилепсией, которым были имплантированы электроды для мониторинга активности мозга. Ученые записали более 100 часов их разговоров в больнице и использовали 80% этих записей для обучения Whisper. Затем модель должна была создать текстовую расшифровку оставшихся 20% аудиозаписей.
Результаты показали, что Whisper с высокой точностью предсказала, какие области мозга будут активны во время разговора. Например, верхняя височная извилина реагировала на обработку звуков, а нижняя лобная извилина – на понимание смысла слов. Это подтвердило гипотезу о том, что мозг работает коллективно, распределяя задачи между разными областями.
По словам Ариэля Гольдштейна, одного из авторов исследования, эти результаты помогают лучше понять работу когнитивных процессов: "Мы должны рассматривать познание через призму таких моделей".
Гашпер Бигуш, доцент Калифорнийского университета в Беркли, который не участвовал в исследовании, отметил, что сравнение искусственных и биологических нейросетей – важный шаг в изучении работы мозга: "Это позволит проводить эксперименты, которые невозможно осуществить в нашем биологическом мозге".
Это исследование открывает новые возможности для создания технологий, которые могут помочь людям с нарушениями речи и слуха, а также для дальнейшего изучения работы человеческого мозга.
Еще больше горячего и эксклюзивного контента – в наших Instagram и TikTok !