【第288期】（中文）统一嵌入空间：捕捉大脑语言处理

Seventy3：借助NotebookLM的能力进行论文解读，专注人工智能、大模型、机器人算法方向，让大家跟着AI一起进步。

今天的主题是：

A unified acoustic-to-speech-to-language embedding space captures the neural basis of natural language processing in everyday conversations

Summary

这份研究介绍了一个统一的计算框架，该框架将声学、语音和词级语言结构连接起来，以探索人类大脑在日常对话中自然语言处理的神经基础。通过使用电皮层图 (ECoG) 记录参与者在真实对话中的神经信号，研究人员提取了多模态语音转文本模型（Whisper）中的低级声学、中级语音和上下文词嵌入。他们发现，这个模型能够准确预测神经活动，并且其内部处理层级与皮层语言处理的层级相符，支持了一种新的范式，即统一的计算模型能够捕捉真实世界对话中语音理解和产生的整个处理层级。

原文链接：https://www.nature.com/articles/s41562-025-02105-9