资生网科学家利用“心灵字幕”技术将人们脑海中的图像转化为文本

科学生活·5分钟读取资生网

科学家利用“心灵字幕”技术将人们脑海中的图像转化为文本

经过

Amarachi Orie

9小时前

图片

功能磁共振成像(fMRI)是一种测量大脑活动的非侵入性技术。这张fMRI图像显示了大脑的多个水平视图，从下到上排列。

堀川友康

一位科学家在日本开发了一种技术，使用大脑扫描和人工智能将一个人的心理图像转化为准确的描述性句子。

虽然在使用大脑活动扫描来翻译我们认为的单词根据11月5日发表在该杂志上的一项研究的作者Tomoyasu Horikawa的说法，将我们复杂的心理图像转化为语言已被证明是具有挑战性的科学进展.

然而，堀川的一种被称为“心灵字幕”的新方法，通过使用人工智能生成描述性文本，反映大脑中关于视觉细节的信息，如物体、地点、动作和事件，以及它们之间的关系。

堀川是位于东京郊外的NTT通信科学实验室的研究员资生网，他首先分析了四男两女的大脑活动，他们的母语是日语，年龄在22岁到37岁之间，在他们观看视频剪辑时扫描他们的大脑。参与者观看了2180个没有声音的视频，时长几秒钟，内容因物体、场景和动作而异。

大型语言模型——在大型数据集上训练的生成式人工智能系统—— 拿视频剪辑的字幕，并将这些字幕转换成数字序列。

堀川训练了单独的、更简单的人工智能模型，称为“解码器”，将扫描到的与视频剪辑相关的大脑活动与数字序列进行匹配。

图片

ChatGPT背后的技术如何让读心术成为现实

然后他使用解码器解释研究参与者的大脑活动他们观看或回忆人工智能在训练过程中没有遇到的视频。另一种算法被创建来逐步生成与解码的大脑活动最匹配的单词序列。

当人工智能从数据中学习时，描述性文本工具越来越擅长使用大脑扫描来描述参与者看过的视频。

“在我看来，这只是朝着我们可以合理地称为读脑或读心术的方向又前进了一步，”德国慕尼黑工业大学人工智能和神经科学伦理学教授兼国际神经伦理学协会当选主席Marcello Ienca告诉CNN。他没有参与这项研究。

“深远”健康干预的潜力

人工智能模型生成了英语文本，即使参与者的母语不是英语。

堀川说，这种方法可以创建对视觉内容的全面描述，即使不使用大脑中与语言相关的区域或“语言网络”的活动，“这表明即使有人的语言网络受损资生网，这种方法也可以使用。”

这项技术有可能被用于帮助失语症患者，这些人由于语言网络受损而难以表达语言；或者肌萎缩性侧索硬化症根据这项研究，这是一种影响言语的进行性神经退行性疾病。

图片

在一项突破性的研究中，研究人员公布了显示决策过程的大脑地图

“我认为这项研究为一些有交流困难的人，包括非语言自闭症患者的深入干预铺平了道路，”心理学家斯科特·巴里·考夫曼说，他是纽约巴纳德学院的讲师，没有参与这项研究。

然而，“我们必须小心使用它，并确保我们不具有侵犯性，并且每个人都同意它，”他告诉CNN。

“终极隐私挑战”

这项研究指出，这种方法的成功——可以用于解码婴儿或动物的想法，或梦的内容——引发了关于隐私的“伦理问题”,有可能在个人的私人想法用语言表达出来之前就泄露出来。

如果将来这项技术被消费者用于生物医学以外的目的，“我认为这是终极的隐私挑战，”Ienca说。

他补充道，有很多公司，比如埃隆·马斯克的大脑植入创业公司Neuralink他们公开宣称将很快为大众开发神经植入物。

“如果我们实现了这一目标，那么在授权访问人们的思想和大脑方面，我们需要制定非常非常严格的规则，”伊恩卡说，并强调我们的大脑包括“敏感信息”，如“早期痴呆症、精神障碍和抑郁症的特征。”

发表在杂志上的一项研究细胞August提出，解码过程中私人内心想法的“泄漏”可以通过一种机制来防止，在这种机制中，用户仅在需要时才想到特定的关键字来解锁解码工具。

“神经科学发展迅速，辅助潜力巨大——但精神隐私和思想自由的保护不能等，”波兰亚当·米凯维奇大学(Adam Mickiewicz University)助理教授、纽约神经权利基金会(Neurorights Foundation)欧洲事务负责人、社会科学家祖卡斯·索斯凯维奇(ukasz Szoszkiewicz)说。

“我们应该默认将神经数据视为敏感数据，要求明确的有限目的同意，并通过用户控制的'解锁’机制优先处理设备上的数据。对人工智能的依赖带来了额外的监管和网络安全挑战，并强调了对补充性的、特定于人工智能的法律框架的需求，”没有参与该研究的Szoszkiewicz告诉CNN。

图片

什么是镜像生活？科学家们敲响了警钟

然而，堀川指出，在他的研究中使用的方法需要大量的数据收集，与积极的参与者合作。因此资生网，尽管这项技术对神经科学研究有用，但它“在实际应用中并不那么精确，”他说。

此外，研究中使用的视频包括典型的场景，例如，狗咬人，但没有更不寻常的场景——比如，人咬狗。因此，目前还不清楚这项技术是否可以用来捕捉更难预测的心理图像。

因此，“虽然有些人可能担心这项技术对精神隐私构成严重风险”，但在现实中，“目前的方法无法轻易读取一个人的私人想法，”堀川说。

本站仅提供存储服务，所有内容均由用户发布，如发现有害或侵权内容，请点击举报。

简配资提示：文章来自网络，不代表本站观点。